今天,Neurable让我们睹见了一项在现代科技世界中绝无先例的产品:面向虚拟现实的脑机接口。Neurable表示,这一集成平台只有一个目的:使开发者能够为虚拟现实创建由大脑控制的内容。
想象一下你大脑在VR中的力量。你在一个阴暗的洞穴中醒来,并发现自己被雪怪丸帕悬吊在半空中。你的光剑被扔在触不能及的地方,于是你平静自己,集中精神,召唤原力来抓取武器。你及时切断了绳子,并杀死了可怕的捕食者。
当然,相信许多人都记得这是《星球大战》中的一个著名场景。流行的科幻小说已经探索了心灵感应,魔法和其他超能力主题。作为一个社会,幻想世界令我们神往:我们的想象渴望探索一切不可能的禁地。
沉浸式计算的出现使得这种幻想更接近于我们的感官现实。虚拟现实和增强现实正在重新绘制人类体验的界限。这两种媒介迫使我们重新思考用户应该如何体验和与数字世界交互。点击式这样的旧规则已经不再适用。沉浸式计算需要一种全新的人机交互方法。
终极平台
我们预见了一个控制输入的生态系统,可以提高AR/VR环境对用户行为的响应速度和适应能力。动捕,触觉,眼动追踪和自然语言处理已经取得了巨大的进步。我们现在缺少的是把混合现实与终极计算平台,亦即我们大脑联系起来的方式。
Neurable为下一代计算平台开发了脑机接口。Neurable表示,他们的革命性技术只需大脑意念即可让人们与AR/VR环境进行交互。
脑机接口主要通过分析大脑活动模式来确定用户意图。这种技术已经可以用于虚拟键盘打字和控制假肢,这种由大脑意念驱动的交互在虚拟现实和增强现实领域极具前景,因为当前VR和AR中的用户交互问题成为了相关技术普及的重要障碍。
最理想的一个解决方案是脑机界面,其中用户可以通过大脑意念来滑动菜单,选择项目,启动应用程序,操纵对象,甚至是输入文本。我们可以想象一下,高性能,非侵入性,直观的脑机接口将给虚拟现实和增强现实带来的生产力革命。
神经科技与VR的结合
在本周末举行的SIGGRAPH 2017大会中,Neurable将会展示与eStudiofuture合作研发的VR游戏《Awakening》。《Awakening》 是一个未来派的故事,让人联想到《怪奇物语》:你是一个被拘留在政府科学实验室中的小孩。你发现科学实验赋予了你隔空取物的能力。为逃离实验室,你必须使用这种能力,并打败机器人监狱看守。游戏允许玩家通过自己的大脑意念操纵对象和对抗敌人,不需要使用任何手持控制器。
这种体验是通过Neurable的机器学习平台开发而成。这种机器学习平台可以实时解释你的大脑活动,并提供隔空取物这样的虚拟超能力。这一复杂的机器学习管道已经整合成一个兼容Unity的SDK。借助Neurable SDK,Unity开发者可以轻松地为任何游戏带来脑部意念这种控制输入。
系统主要通过Neurable为HTC Vive设计的升级头带来进行脑信号采集。Neurable表示,他们的解决方案是把脑传感器和神经技术与AR/VR设备集成的示范原型。
未来应用
游戏是一个令人兴奋的新技术试验领域,但脑机接口的应用远远超出了娱乐范畴。随着AR/VR设备开始转向更广泛的应用,脑机接口将会得到进一步的发展,并支持更复杂的任务。
从长远来看,我们预计AR/VR头显公司将会把脑传感器直接集成到他们的产品中。最近的公司公告和其他公开信息都表明,主要科技公司正在积极开发商用脑机接口技术。触摸界面成就了智能手机,而脑机接口将成就AR/VR头显。