加入收藏 | 设为首页 | 会员中心 | 我要投稿 核心网 (https://www.hxwgxz.com/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 站长百科 > 正文

售价399美元,NextMind亮相脑机接口开发套件

发布时间:2020-01-10 22:28:52 所属栏目:站长百科 来源:映维网作者黄颜 NextMind正在开发一种可将大脑视觉皮层
导读:副标题#e# 来源:映维网作者黄颜 NextMind正在开发一种可将大脑视觉皮层信号转换为机器可读指令的脑机接口设备。利用视觉信号,你可以向计算机和AR/VR头显输入命令。最终,这家法国巴黎初创公司希望你能够通过自己的视觉想象来实现同样的操作。日前,Ventur

第二个演示内容是一款平台游戏,其中你需要控制一个小型立方体(没有录制视频,但你可以联想一款简单的平台游戏)。普洛塔林斯基可以通过一个操纵杆进行移动和跳跃,但同时可以通过集中注意力来射击敌人并推动物体。每当屏幕出现一个绿色三角形时,普洛塔林斯基都会将注意力集中于所述的三角形,从而执行特定的操作。

第三个演示内容要求普洛塔林斯基通过视觉关注来输入四位数的数字。注视每个数字的过程十分缓慢(库伊德尔后来证明,由于经过了大量的练习,所以他可以更快地做到这一点。)

第四个演示内容是经典游戏《打鸭子》的修改版本。利用视觉注意要比使用喷枪控制器容易得多。实际上,普洛塔林斯基甚至尝试增加操作的难度,将注意力集中在眼睛角落之外的鸭子。库伊德尔表示:“只要它最终进入你的视觉皮层,它就应该是可解码的信号。”。速度尽管较慢,但依然可行。

当普洛塔林斯基摘下眼镜时,他没有在任何鸭子身上看到绿色三角形。库伊德尔解释道:“当然,重点不在于三角形。三角形只是焦点。”如果没有眼镜,你有时会杀错鸭子。这是因为系统使用了证据累加器。有时它过于宽松,并断定你正在注视一个错误的对象。

最有趣的是第五个演示内容,你可以在其中更改台灯的颜色。但首先,这需要进行一定的重新校准。在练习期间,你必须专注于其中一个色块,然后可以通过注视每个对应色块来实时切换台灯颜色。

我们可以轻松联想到这在第二轨道中的应用。开发者可以为台灯拍照,加入着色器,并为图像附加一个动作(例如更改物理台灯的光色)。最终,NextMind设备的用户可以自己完成这项操作,然后只需简单地想想他们拍摄的照片。剩下的工作将由软件完成。

3. 如何工作

诀窍在于,NextMind的设备不仅可以检测颜色差异,同时可以检测代表每种颜色的迷你方块。你在视频中看不到的是,每个迷你方块都有不同的图案。这就是设备在视觉皮层中解码的内容。所以,理论上色盲人士可以尝试这个演示内容。库伊德尔指出:“视觉皮层包含有关形状,方向,边界,颜色和运动的信息。”

电视应用程序同样如此。每个用户界面按钮的背景都存在小颗粒,而你会看到绿色三角形显示在其中。这种颗粒以不同的频率缓慢出现和消失,而每个数字都有不同的时间图案。库伊德尔表示:“我们知道你的大脑与5而不是6或4同步,因为基本上它会优先响应这个特定的图案。”

“我相信我们能够自行解码形状的那一天很快就会到来。你不需要颜色,几乎不需要图案。”

为什么说“几乎不需要”呢?这是因为“图案正在为我们提供帮助。大脑就是这样。它可以区分5和4。(数字)不必稍微闪烁。如果你的大脑能够做到,这就意味着信息就在那里。”

简而言之,NextMind将保留图案,以便证据累加器可以更快地建立起来。但最终,库伊德尔希望你可以随意应用。

“或许SDK版本1不能,但当你注视关注的时候,你同时可以决定不做任何事情。你可以决定按键的下按量,就有点像是将手指放在键盘但不按下。”

演示绝非完美,但普洛塔林斯基表示所述技术显然可行。话虽如此,NextMind仍在努力解决问题,并致力于改善硬件,软件和机器学习。

“我们改进了硬件。我们改进了机器学习,如我们正在使用的深度神经网络。这与改善认知方面有很多关系,比方说如何更好地集中注意力,需要注意哪种信息,诸如此类。”

库伊德尔表示,团队花费了大量时间和精力来开发可用的认知技巧。建立更快,更高效的机器学习是其中一部分,但寻找创新的方法和捷径以获得预期结果同样是重要的拼图。不过,这两者都不是最大的障碍。

“目前的硬件是主要限制。但不仅只是我们面对这样的问题,任何成像技术都存在这样的问题。你不希望用MRI包裹人们的头部,它的分辨率更高,但时间分辨率却很差。”

如同任何一家机器学习初创公司所说的一样,最终能走多远取决于你的数据。

4. VR演示

NextMind将设备设计成可以简单地夹在Oculus头显的头带背面。

售价399美元,NextMind亮相脑机接口开发套件

另一个需要接受的VR练习环节涉及注视外星人大脑中心,从而实现爆头效果。同样,在校准过程中不能言语。最终,校准所花费的时间会更少,因为系统会实时估计模型的置信度,并满意时停止。

库伊德尔指出,在VR中的分辨率不是很高,所以你可以通过集中视觉注意力来执行操作的对象必须更大。就像在《打鸭子》游戏中一样,有时你看着一个敌人,但干掉的却是另一个会。当分辨率较差且屏幕存在多个敌人时,证据累加器的工作会十分棘手。这次没有绿色三角形,但出现了大量的闪烁。

“闪烁本身并不重要。显示必须有所变化。例如,可能是颜色变化。你的大脑必须处理新信息。我们需要产生神经反应。”

你可以爆破的另一个对象是木桶,但它的形状与外星人大脑不同。它在不断地闪烁。库伊德尔暗示,随着游戏的推进,某种形式的迁移学习正在发生。

“不要将它看成只是一款独立设备。这是一种程序。对于想要使用增强现实或虚拟现实的人们来说,这是一种额外的程序。”

5. 用例

需要再次说明的是,NextMind所有的演示内容都可行。你会感觉自己处于控制之中。库伊德尔指出:“还没有实现完全的控制,但这是我们正在努力的方向,而这很快就会实现。”

但到目前为止,不存在NextMind的操作方式是快于使用双手或其他设备的用例。寻找杀手级用例的过程正在进行之中。所以,这家公司提供开发套件的原因有两个:首先是获取更多数据以改善其机器学习算法;第二个是NextMind希望开发者可以挖掘新的用例。

(编辑:核心网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读