VR交互可纯靠思想,已实现脱离手柄操作

今日初创公司Neurable想要通过阅读我们的想法来增强体验感。帮助我们用我们的眼睛与VR世界进行交互。
 

 

 

SIGGRAPH大会,波士顿一家公司展示了其改装的HTC Vive,其中包括位于头带设备内部的EEG(脑电图)传感器。这与来自德国公司SMI的眼球跟踪技术相结合。使EEG传感器的梳状结构可以巧妙地与体验者的头皮相接触,从而检测到大脑活动。与会媒体立即进行了以下两种测试。

 

第一个是简短的交互训练,一列火车,一个球和一块木块浮现在头戴头显的体验者面前。体验者被告知要把注意力集中在旋转的物体上,并在脑海中想象抓住它。现场的很多次试验最终都是成功的。

 

第二组测试,体验者需要在脑海中挑选出目标物品。为增加任务难度,体验者尝试了目光不注视,唯一一次错误是由于有人和体验者交流从而被分散了注意力,其余所有测试均正确
 

 

在上面的图中,我们可以看到每个物体都在闪烁。Neurable的首席执行官兼总裁Ramses Alcaide解释道,即使人们已经在潜意识中选择目标物品,他们也能够检测到体验者大脑中那些思考的痕迹。他说,在演示训练和测试期间,头显设备内的眼动追踪并不活跃。但是在下一部分的演示中,它却变得很活跃,这表明了在游戏环境中显示系统的潜力。在洛杉矶的SIGGRAPH 2017中,Neurable推出了Awakening,这是一款与eStudiofuture合作制作的虚拟现实游戏预览版。Awakening游戏讲述的是一个提及陌生人的未来故事:你是一个被关押在政府科学实验室里的小孩。你会发现实验赋予了你一项运动能力。你必须使用这些力量来逃离你的牢房,打败机器人狱警,逃离实验室。这个游戏让你用自己的头脑来操纵物体和对抗敌人,完全没有手持控制器。

 

根据Neurable的说法,这项工作使用机器学习来解释“实时的大脑活动,以提供虚拟的行动能力”。该公司提供了一个SDK,因此Unity开发人员可以将系统集成到游戏中。

 

我们能够仅通过大脑的思考来选择面前的对象,然后使用它们来尝试逃脱。这其中会有一些关于如何逃离这个房间的提示,当我们走进实验室的时候,环顾柜台顶部,并想要向冲我走来的机器人投掷东西。其中一个物体是键盘。当我想到“抓住”这个词时,它就会飘来。不断向机器人投掷物体,直到进入到底层位置。
 

 

 

Alcaide解释道。“我认为混合现实交互的未来是一个包含语音,手势控制,眼球跟踪和连接到脑机接口为一体的生态系统,但同时我们需要某种系统来控制这种行为发生,直到用户允许这样的操作,这就是脑机接口所在。”Alcaide解释说。“在我看来,混合现实不能成为像iPhone这样无处不在的计算平台,或者像计算机一样,直到我们将脑机接口作为解决方案的一部分。