新知一下
海量新知
6 0 8 8 3 0 4

Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店

VR陀螺 | VR陀螺:关注热点、趣闻、产业 2021/08/07 21:04

看日报是个好习惯。


 Facebook EMG腕带及贴片专利曝光:可检测用户生理数据并在AR环境中提供互动反馈

近日,美国专利商标局公布了Facebook一项专利,该专利支持他们此前曝光的手腕设备,主题为 "可穿戴电子设备和扩展现实系统,包括神经肌肉传感器"。

该发明的技术涉及检测和解释神经肌肉信号的系统和方法,用于在增强现实(AR)环境以及其他类型的扩展现实(XR)环境中执行动作,如虚拟现实(VR)环境、混合现实(MR)环境,等等。

可穿戴的EMG传感器腕带

Facebook的专利图8A说明了一个可穿戴系统,该系统有多个传感器(#810)周向排列在一个弹性带(#820)周围,从结构上看可穿戴在用户的下臂或手腕上。这些传感器可以是神经肌肉传感器(例如,EMG传感器)。如图所示,可能有16个传感器以规则的间距围绕弹性带周向排列。

新知达人, Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店
图源:patentlyapple

可穿戴系统(如臂带、腕带、大腿带等)可用于产生控制信息,以控制机器人、车辆、滚动文本、虚拟化身和/或执行任何其他合适的控制任务。

在一些实施例中,传感器可以只包括一组神经肌肉传感器(例如,EMG传感器)。在其他实施方案中,传感器可以包括一套神经肌肉传感器和至少一个辅助设备。辅助设备可被配置为连续感应和记录一个或多个辅助信号。

辅助设备的例子包括但不限于IMU、麦克风、成像设备(例如照相机)、用于辐射生成设备(例如激光扫描设备)的传感器、心率监测器以及其他类型的设备,它们可以捕捉用户的状况或其他特征。

如图8A所示,传感器可以使用纳入可穿戴系统的柔性电子器件(#830)耦合在一起。图8B是图8A中所示的可穿戴系统的一个传感器的横截面图。

新知达人, Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店
图源:patentlyapple

Facebook的专利图10示意性地展示了一个使用EMG传感器和摄像头的实施例。例如,图10显示了用户的手臂和手#1010,它是由一个或多个关节和节段组成的,它可以被描绘成肌肉骨骼的代表。

更特别的是,用户的手(#1020)是由关节连接的。手臂和手的位置和节段长度可以由系统1000确定,并在肌肉骨骼模型的三维空间内定位。此外,用户的手还可以包括一个内插的前臂段(#1030)。

Facebook的工程师进一步指出,由多个神经肌肉传感器获得的神经肌肉信号和由相机捕获的图像可用于确定用户对物理对象施加的力。神经肌肉信号数据和辅助传感器数据(例如,照相机数据)可以以任何合适的方式结合起来,以确定用户与物理对象互动有关的信息,在这方面,本实施方案不受限制。

在实施例中,用户与物理对象互动信息的反馈会被提供给与该物体互动的用户。例如,基于AR的系统可以在AR环境中向用户提供反馈(例如,视觉反馈、听觉反馈、触觉反馈)。

在AR环境内,视觉反馈可以以任何合适的方式提供给用户。例如,正在与用户互动的物理对象可以改变颜色或发光,表明用户正在与该对象进行互动。

另外,反馈可以使用独立于物理对象的视觉指示器来提供。例如,在AR环境中可以显示一个图标或其他视觉指示器,显示正在与用户互动的对象的互动模式(例如,画笔模式)。

在一些向用户提供反馈的实施方案中,可以使用非视觉形式的反馈,如提供听觉或触觉反馈。例如,反馈可以指示用户,正在与之互动的物理对象可能具有增强的属性或功能,这些属性或功能可能无法在普通现实世界中通过与这些对象互动而获得。

可穿戴的EMG传感器贴片

Facebook专利的另一个方面涵盖了可穿戴贴片形式的EMG传感器的一种调和应用。在一些实施方案中, #110可以包括多个传感器,并且多个传感器中的一部分可以被安排成为可穿戴设备,其结构是穿戴在用户身体的某个部位或周围。

或者,一部分传感器可以被安排在一个可穿戴的贴片上,其结构是贴在用户身体的一部分。图6A-6D显示了各种类型的可穿戴贴片。

Facebook的专利图6A显示了一种可穿戴贴片(#62),其中电子传感器的电路可以印在柔性基材上,该基材可以贴在用户手臂上,例如,靠近静脉以感知用户的血流。该可穿戴贴片可以是一个RFID类型的贴片,它可以在外部设备的询问下以无线方式传输感应到的信息。

新知达人, Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店
图源:patentlyapple

Facebook的专利图6B显示了一种可穿戴贴片(#64),其中的电子传感器可以被整合到一个基底上,该基底的结构是佩戴在用户的额头上,例如,测量汗液的湿度。可穿戴贴片(#64)可以包括用于无线通信的电路,或者可连接到电缆的连接器,例如,连接到头盔、头戴式显示器或其他外部设备的电缆。

可穿戴贴片也可以贴在用户的前额上,或者通过头带、头显等固定在用户的前额上。


Facebook的专利图6C显示了一种可穿戴贴片(#66),其中电子传感器的电路可以印在基板上,该基板可以粘附在用户的脖子上,例如,在用户的颈动脉附近,以感知流向用户大脑的血液。可穿戴贴片#66可以是一个RFID类型的贴片,也可以包括一个结构上可以连接到外部电子设备的连接器。


图6D显示了一种可穿戴贴片#68,其中电子传感器可以被整合到一个基底上,该基底可以佩戴在用户的心脏附近,例如,测量用户的心率或测量流向/来自用户心脏的血液。


无线通信不限于RFID技术,还可以采用其他通信技术。另外,正如可以理解的那样,传感器#110可以被安装在其他类型的可穿戴贴片上,其结构可能与图6A-6D所示的贴片不同。


想了解更多详细信息,请查阅Facebook的专利20210217246。


 安卓版《Rec Room》现已上线谷歌商店

安卓用户现在就可以在谷歌商店下载到这款大型虚拟世界多人社交平台。此前,该应用已在iOS、Playstation、Xbox、PC(和PC VR)和Oculus Quest上发布。《Rec Room》公司表示,自2020年以来,它的用户增长了500%,平台上的"终身用户超过1500万",且"每月活跃的VR用户超过100万"。

新知达人, Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店
图源:uploadvr

Rec Room在今年早些时候获得1亿美元融资,与Roblox、VRChat和Minecraft等公司竞争,以实现一个具有不同类型的多人世界,可以举办活动、提供创意及游戏空间。《Rec Room》的开发者计划在2021年底前向用户支付至少100万美元,作为创作者鼓励计划的一部分,鉴于该公司的快速增长,支付的金额"可能是现在这个数字的几倍"。

在安卓设备上的普遍适用性是该平台向真正的跨平台服务推进的重要一步。现在,大多数人都可以期待他们的朋友有一台能够玩《Rec Room》的设备。


 印度AR社交媒体初创公司Flam获350万美元种子轮融资

7月28日,总部位于印度的AR社交网络公司Flam已经筹集了350万美元资金,由Silicon Valley Quad和Inventus Capital Partners SV领投。本轮融资还有9Unicorns、Kwaish Ventures和少数天使投资人的参与。

Flam成立于2021年5月,它的第一个产品FlamCard允许用户扫描打印的照片并在照片上播放AR视频。用户还可以选择打印视频的某一帧,然后使用该公司的应用程序来播放剪辑。

新知达人, Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店
图源:Flam

Flam首席执行官兼创始人Shourya Agarwal表示,该公司为FlamCard使用了一项专有技术,结合了图像识别、增强和跟踪等功能。

Agarwal透露,该公司产品自推出以来已经记录了超过4000万次的相机互动和扫描。

Flam计划利用这笔资金来开发产品,并扩展其AR引擎的规模。它还计划成立一个由计算机视觉、图形工程、GPS地图、社交媒体、3D设计等领域专家组成的团队。

据Agarwal说,该公司还计划在FlamCard上增加更多的社交功能。即将推出的功能包括FlamCard Stories,它将允许用户在一张打印的照片上添加不同的视频。另一个正在开发的功能是"ghost",这是一张只有拥有正确权限的用户才能扫描的空白照片。

Agarwal表示:"这笔资金将使我们能够推动AR进行社交互动的转变。我们的目标是成为代表全球消费者AR技术的领跑者。"

 VR射击音游《Pistol Whip》将于8月12日推出免费DLC“Smoke & Thunder”

VR射击音游《Pistol Whip》即将上线DLC“Smoke & Thunder”,这个新活动将于8月12日在所有平台上发布,该DLC由五个新的关卡和歌曲组成,通过一个隐藏主线故事串联在一起。新的修改器系统也将随同更新而来,让玩家对任何关卡的游戏难度进行修改。

Pistol Whip的第一个小型活动“2089”于今年早些时候推出,并成功地将游戏与新的音乐和以未来风格主题的玩法结合起来。即将推出的“Smoke & Thunder”将以西部为背景,承诺提供新的武器和Boss战等。

新知达人, Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店
图源:Steam

开发商Cloudhead Games说,“Smoke & Thunder”中会出现乐队Magic Sword的一首从未亮相的原创歌曲的,该乐队以前曾在游戏中出现过。

《Pistol Whip》的DLC“Smoke & Thunder”现在定于8月12日在Quest、PC VR和PSVR上发布。将对所有拥有该游戏的玩家免费开放,目前游戏的价格为25美元,然而Cloudhead表示,8月15日之后游戏的价格将提高到30美元。考虑到游戏自推出以来所增加的内容,涨价似乎是合理的DLC更新后关卡将达到28个。

新知达人, Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店
图源:Cloudhead Games

 苹果新专利:未来HMD配备注视点追踪传感器,用户可直接通过注视进行文本输入

今天,美国专利商标局公布了苹果公司的一项专利申请,该专利涉及与电子设备互动的用户界面,更具体地说,是与使用注视点追踪的电子设备互动。

苹果公司的专利描述了使用注视点追踪与电子设备互动的技术。根据一些实施方案,用户可以用眼睛来选择电子设备上显示的文本输入字段。

这些技术提供了一个更自然和有效的界面,在一些示例性的实施方案中,允许用户主要用眼睛的注视来识别要输入的文字。

这些技术可以应用于虚拟现实、增强现实和混合现实设备,也可以应用于传统的设备,如台式电脑、笔记本电脑、平板电脑和智能手机等设备。

苹果公司的专利图2描述了一个用户(#200)的俯视图,其目光集中在一个物体(#210)上。用户的目光由用户的每只眼睛的视觉轴来定义(如射线201A和201B所描述的)。视觉轴的方向定义了用户的注视方向,而轴线汇聚的距离定义了注视深度。

新知达人, Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店
图源:patentlyapple

注视方向也可以被称为注视矢量或视线。在图2中,注视方向是在物体的方向,注视深度是相对于用户的距离D。注视方向和/或注视深度是用于确定注视位置的特征。

在一些实施例中,用户的角膜中心、瞳孔中心和/或用户眼球的旋转中心被用于确定用户眼睛的视觉轴的位置。因此,用户的角膜中心、瞳孔中心和/或用户眼球的旋转中心可以用来确定用户的注视方向和/或注视深度。

在一些实施方案中,注视深度是根据用户眼睛视觉轴的汇合点(或用户眼睛视觉轴之间的最小距离的位置)或用户眼睛焦点的一些其他测量数据来确定的。可选的是,注视深度被用来估计用户的眼睛所集中的距离。

苹果公司的专利图4说明了一种内置注视传感器的头戴式显示器设备(HMD)。用户将能够在VR世界或现实世界的环境中看一个表格,并能够将他们的文字输入引导到表格的特定区域,因为注视传感器检测到了用户的焦点。这项技术非常精准,从 "姓名 "输入槽到下一个方框 "姓氏 "的微小注视都能被准确检测到,这样用户就可以在不使用鼠标的情况下在方框中填写文字。

新知达人, Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店
图源:patentlyapple

苹果公司指出,注视传感器(#410)朝向用户,在操作过程中,能够捕捉用户眼睛注视的特征,例如用户眼睛的图像数据。

在一些实施方案中,注视传感器包括一个事件相机,该相机根据检测到的光强度随时间的变化检测来自用户(例如,用户的眼睛)的事件数据,并使用该事件数据来确定注视方向和/或注视深度。

HMD同时还可以使用图像数据和事件数据来确定注视方向和/或注视深度。HMD使用射线投射和/或锥体投射来确定注视方向和/或注视深度。在一些实施方案中,使用了多个注视传感器。

苹果公司这项专利的申请号为20210240331,于今天由美国专利商标局公布,该专利最初是在2020年第四季度提交的。

专利中的两位发明人包括Aaron Thompson(高级体验设计师)和Pol Pla(UX和UI原型师,人机界面设计负责人)。还有一位Earl M. Olson,目前并无他的详细职位信息

考虑到这是一项专利申请,带有该专利技术的产品何时会进入市场目前还不得而知。

 可创建人体全息图的应用HoloX 9月上线HoloLens 2

电子商务、AR 学习应用程序、AR 增强型视频会议以及虚拟活动的AR提供商Nextech AR Solutions,8月5日宣布开始整合其MR解决方案HoloX。

新知达人, Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店

图源:auganix

HoloX是一款能够创建人体全息图的应用程序,支持手势控制,允许用户通过眼动追踪和手势来导航应用程序。据了解,该应用程序将于2021年9月上线HoloLens 2。

Nextech表示这是其AR创新实验室推出的第一款支持头戴式显示器的产品,上线HoloLens是为了给用户提供更为逼真的人类全息图,而且有助于Nextech为那些有沉浸式交互、远程协作需求的行业(比如教育、医疗、军事训练)提供一个解决方案平台。目前Nextech也在积极寻找其他AR眼镜商。

Nextech 首席执行官 Evan Gappelberg 评论说:“随着 Facebook、SNAP、苹果、谷歌、联想和微软都将推出自己的AR眼镜,AR眼镜将变得非常重要。我们先从微软开始,是因为微软非常清晰地将定位放在企业与政府身上,这些企业恰好也是我们的客户,因此我们能从中看到非常具体的人体全息图的用例。”

“AR眼镜行业正在迅速发展,我们认为将微软HoloLens与强大的内容创建应用HoloX集成在一起,是帮助我们未来取得成功的关键因素。”


第一时间了解XR资讯

  关注VR陀螺官网(vrtuoluo.cn)


VR陀螺的联系方式:

商务合作 | 采访 | 投稿 :

西瓜(微信号 18659030320)

六六 (微信号 13138755620)

交流分享 | 爆料:案山子 (微信 shimotsuki_jun)
投稿邮箱:tougao@youxituoluo.com


推荐阅读


2021年半年度全球VR/AR产业发展报告


新知达人, Facebook EMG腕带及贴片专利曝光;安卓版《Rec Room》现已上线谷歌商店

新知精选

更多新知精选