Facebook展示了如何使用其神经腕带与AR眼镜

2021-03-19 13:42:49

Facebook在2019年的Ctrl-Labs的启动时,基于来自Ctrl-Labs的技术的新增强现实接口的计划在其计划中提供了一瞥。在视频中,它显示了使用电拍摄(EMG)将微妙的神经信号转化为腕带的腕带操作 - 像键入,滑动或像射箭模拟器一样玩游戏。乐队还提供触觉反馈,创建一个比基本手跟踪选项更响应的系统。

Facebook现实实验室发布了一个博客文章,详细说明了它在腕带的原型上的工作。在最简单的状态下,乐队将跟踪基本手势Facebook调用“点击”,这应该是可靠且易于执行的。它们与All-Picso Microsoft Hololens“空气龙头”手势有点像,但随着沿着手臂运行的神经信号跟踪,而不是安装在耳机上的视觉传感器。

然而,乐队理论上可以做到更多。例如,它们可以跟踪您的大脑在键入时向手指发送到手指的神经信号,因此您可以在没有物理按钮的情况下键入虚拟键盘。与普通键盘不同,频段可以慢慢适应您类型的方式 - 所以他们可以“学习”您的手指移动当您制作常见的拼写错误时的方式,然后自动更正它们并捕获您可能意味着键入的内容。

这将是大多数人与计算机互动的巨大变化,而是概念上,Ctrl-Lab年前如何描述其工作的实际更新并不重要。事实上,EMG腕带的最终可能性更加思维弯曲:最终,通过思考移动手而不是实际移动它们,您可以执行相同的打字样式手势。 Facebook希望通过依靠人工智能和增强现实眼镜,进一步简化用户互动,它宣布它去年工作了。

即使在他们更简单的迭代中,这些控制器也会提供一个界面,您可以随时佩戴,而不是拾取和保持,如当前的Oculus触控VR控制器。效果可能类似于像Mudra Band这样的较小的启动产品,它通过Apple Watch Band感知手势。

一个主要的新增添加是触觉。 Facebook表示它正在实施各种原型,可以使用不同方法给您微妙的反馈。一个,“轰鸣声”,每个手腕围绕着八个气孔。这些可以以产生明显的感觉的模式膨胀或放气。另一个是“TASBI”,它使用振动执行器和“新型手腕挤压机制”。当它们与AR耳机的视觉反馈配对时,它们可以通过简单而直观的界面提供大量信息。

Facebook坚持认为,虽然乐队读取神经信号,“这并不像思想阅读。”这是它如何解释这个概念:

你有很多想法,你选择只采取一些人。当发生这种情况时,你的大脑向你的手和手指发出信号,告诉他们以特定方式移动,以便执行键入和刷新等动作。这是关于在手腕上解码这些信号 - 您已经决定执行的操作 - 并将它们转换为您的设备的数字命令。

Ctrl-Labs仍然是这种技术作为脑电脑界面,但它与Elon Musk的Neuralink这样的技术鲜明对比 - 这将通过植入物直接从大脑读取神经活动。植入物具有独特的用途,特别是对于瘫痪或截肢四肢的人,其身体根本无法向腕带发送紧张信号。但是Facebook首席执行官Mark Zuckerberg最近批评植入物作为一个近期的消费技术,称“我们不认为人们将想让他们的头部钻探,以便使用虚拟或增强现实。”腕带也没有与读取您在源头的想法相同的隐私恐慌因素。

也就是说,乐队几乎肯定会收集大量数据。这可能包括键入模式的令人难以置信的微量变化;身体紧张的总体水平;以及由健身跟踪传感器,增强现实眼镜和其他可以与乐队集成的技术捕获的生物识别信息。 (Facebook现实实验室指出,它有一个“神经言语计划”检查AR和神经界面技术的隐私,安全和安全影响。)

与最具可佩带的技术一样,EMG乐队提供了一种亲密的看待我们的身体如何移动 - 虽然它与读取您的想法的乐队并不像令人毛骨悚然的声音,但它仍然需要很多信任。