意念打字登Nature封面!每分钟写90个字符,准确率超99%,网友 我打的都比它慢

zydadmin2022-02-18  117

万万没想到,脑机接口这么快就有了重大突破!

甚至还登上了Nature封面。

一位截瘫患者,正在用“意念”打出一段话,0.5秒左右就能输出一个字母。

准确率也十分惊人,高达99.1%。

他所需要做的,只是在脑中将字母“手写”出来,然后系统就会自动识别生成字母,一分钟可写90个字符。

这幅字虽然写的不咋地,但起码受到了Nature的“青睐”。

值得一提的是,在此之前,这位患者在另一个测试项目中,尝试过“意念”移动光标来打字,不过一分钟只能打出13.4个正确字符 。

此研究一出,就引发学界、网友的巨大关注。

祝贺之余,一位华盛顿大学教授甚至直呼:我打的都比它慢!

这位代号为T5的老爷子脑中植入的,是两个来自Braingate的电极阵列,各含有96个电极。

实验刚开始就遇到第一个困难:如何识别用户什么时候开始尝试书写字母。

最后发现原本用于语音识别的模型可以完成这个任务。

解决这个问题之后,研究人员发现书写单个字符时观察到的脑部活动相对固定,并且总是集中在一起。

并且书写形状类似的字母比如“b”和“p”时用到的区域是接近的。

看来即使瘫痪多年,运动皮层中笔迹的神经表征也没有消退。

经过人工标注后,这些数据就可以作为原始数据集了。

接下来是算法,研究人员选择了循环神经网络 (Recurrent Neural Network,以下简称RNN)。

与常见的前馈神经网络相比,RNN对数据序列中的每个元素执行相同的任务,计算结果取决于之前的所有结果,所以用循环命名。

RNN更擅长预测连续数据,正适合这次研究的连续书写一个句子。

RNN虽强大但有一个缺点,就是需要大量的数据,否则容易出现过拟合。

这次参与研究的被试就只有老爷子一人,他也不愿意每天花好几个小时大量的进行重复书写提供数据。

不过没关系,还有数据增强 (Data Augmentation)。就是对每个图像数据进行一些微小的改变,旋转一下、缩放一点、或者镜像翻转之类的操作,增加数据的多样性。

除了26个字母以外,输入英文还得有一些必要的标点符号。比如空格,研究人员就要求老爷子用>代替,英文句号只有一个点也不好分辨,用~代替。此外还有逗号、顿号和问号。

不过这次研究没加入数字,可能是研究人员觉得区分z和2有点难,就留待下次解决了。

开始训练时使用的数据只有242个句子,随后每天都增加一些,最终共有572个句子,31,472个字符。

最后,为了解决有的英文字母之间过于相似,研究人员还设计了一套专用于脑机接口的字母表进行测试,准确率会高不少,但有学习成本。

接着,就到了志愿者测试阶段。

根据屏幕提示,志愿在大脑中一个字母一个字母地复制书写,字符经过识别生成在屏幕上。

结果测试显示,从大脑“手写”字符,到字符在屏幕中出现,中间会有一个延迟,大概在0.4-0.7秒之间。

整体来看,志愿者平均每分钟可以打出18个单词、90个字符,字符错误率仅为5.9%。

经过类似手机自动纠正的预测语言模型之后,他们进一步将字符的准确率提高到99.1%。

单词的错误率也从25.1%降低到3.4%。

此外,志愿者还进行了一番自我创作——不用复制、自己“书写”句子,结果每分钟也可以打出73.8 个字符,经过预测语言模型纠正后,准确率超过了97%。

最后,为了挑战极限,研究人员还训练了一个新的RNN,用户写完整个句子之后再集中处理,这种方法的正确率高达99.83%,不过用户就得不到实时的反馈了。

实际上,这其实是BrainGate项目的一部分。这是一个多机构联盟的项目,包括布朗大学、美国生物技术公司Cyberkinetics,专注于脑机接口技术,致力于恢复神经系统疾病、损伤或丧失肢体的人的交流、行动和独立性。

此前,这个项目实现了脑机接口信号的无线传输,让患者可以离开实验室环境,在家轻松上网看视频。

斯坦福大学霍华德?休斯医学研究所(HHMI)研究员、论文作者之一Krishna Shenoy表示,此次研究最大的创新在于,破译了与手写笔记相关的大脑信号,让截瘫患者快速准确的打字。

论文一作,同样是来自斯坦福大学的Frank Willett博士,他表示会将整个研究的代码和神经数据开源。

目前,它还不是一个完整的、临床的商业系统,毕竟也只在一个人身上进行了测试。

接下来将在更多测试群体、打字功能的拓展(编辑、删除)、扩展字符集(比如大写字母,以及其他语言)等方面进行提升。

是不是可以dream一个汉语?

除此之外,还有一些因素值得讨论,比如成本和风险。

华盛顿大学生物工程系学者Pavithra Rajeswaran、电气和计算机工程系学者Amy Orsborn表示,这项研究仍需要经过试验论证,将电极植入大脑的费用和风险是否合理。

除了瘫痪患者外,也有因其他伤病导致打字困难的人表示很激动!

比如闭锁综合症,因部分神经的损坏导致身体部分机能的退化或消失,虽然意识清醒,但无法通过语言交流。

还有重复性压迫损伤 (RSI),包括因使用鼠标或打字不当产生的鼠标手、腱鞘炎等。

有一位RSI患者说,我还需要一个能够模仿鼠标滚轮的功能,不过网友回复他说你用一个脚踩的踏板或者眼球追踪要比侵入型脑机接口简单多了。

看到这个消息,网友也脑洞大开。

有人发现,想象自己用手写字和直接想象脑海中的轨迹是不一样的感觉,不知道哪个更容易识别。

要不, 你也试试在脑中写字?(手动狗头)

转载请注明原文地址:http://www.2345lzwz.cn/read-808.html
上一篇下一篇
00

randomThread
(11-14热点)-世亚预赛(澳大利亚vs沙特)很有信心的!好的句子简短优美励志短句(早安短句)好的句子短句(好句简单又少)好的句子简短优美语句(唯美的句子说说心情)好的句子大全摘抄(好句子短句)好的句子都有哪些(5~6字好句)好词好句好段小学四年级上册(四年级上册词语句子积累)好的句子短一些(比较好的短句子)好词好句大全摘抄三年级下册颜语(三年级句子大全)好的句子简短优美励志句子(经典语录励志唯美)好的句子经典的句子励志短句(生活语录经典短句)好词好句摘抄大全优美(简短句子摘抄大全)好词好句初中生摘抄励志(适合摘抄的神仙惊艳句子)寒假祝福老师的句子有哪些简短(写给老师的祝福语简短)好词好句小学生课外阅读摘记本子(课外书优美句子摘抄大全小学生)好词好句大全三年级短句子(好词好句大全三年级摘抄大全)好词好句大全三年级短句子(好词好句大全三年级短四字)好词好句初中生摘抄环境(初二优美句子摘抄)好词好段优美句子摘抄(摘抄好词好句好段感悟)好词大全摘抄三年级(三年级每日积累优美句子)好的句子短句写外公的(形容外公外婆的好语句)好的句子简短(美篇经典短句)好的句子短句摘抄(又短又优美的句子)好的句子简短优美短句(感悟人生的句子简短)好的句子短一些(好句子特点)(11-13热点)-降温预报图冻到发紫了!我国大部将上演冷暖大逆转 局地降温超16℃!(11-13热点)-邓超红发亮相新片首映,全家助阵温情满满(11-13热点)-个人购房不超140平契税降至1% 多项税收优惠出台很走心的治愈小短句子(干净又治愈的小句子)很想你的情话短句(想念却不敢打扰的句子)和朋友一起开心快乐的句子网络(相聚快乐的句子)和老婆表白最感动的句子(老公写给老婆感动的话)很暖很治愈的短句韩语(韩剧值得摘抄的神仙句子)很皮的生日句子搞笑祝别人(又皮又搞笑的生日祝福语)很有内涵的车贴句子(比较个性的车后标语)很治愈人心的句子(人间值得治愈系句子)很现实的人生感悟句子诗句(感叹人生现实的诗句)很深入人心的句子短句(5字短句子却深入人心)弘扬德孝文化的句子(儿女尽孝道的温馨语)和优秀的人在一起的句子(跟强者在一起的短语)很想去很远的地方说说(一个人去远方的句子说说心情)(11-12热点)-2025元旦假期放哪三天?元旦放假时间揭秘来了!(11-12热点)-百度世界2024将于11月12日举办 五大亮点曝光(11-12热点)-小米15定制色太火爆,雷军:我马上去催一下 网友:我亲爹都没有你这么惯着我(11-12热点)-32扇窗户能打开!看杨贵妃“核舟”出游→激励女儿正能量的句子带锋芒的话(生两个儿子正能量句子)积极学生的励志的短句(干净简短的励志句子)灬如果灬就灬造句一年级简单(二年级在在在在仿写句子)激励活着的正能量励志短句文案(高级有质感的励志句子)积极上进的文案句子8字(八个字阳光短句积极向上的)婚姻情感语录与感悟句子(适合婚姻的心情语录)回家心情的句子大全(回家意味着什么)激励女儿正能量的句子带锋芒的话(给孩子信心和鼓励的句子)婚姻情感语录与感悟短句(感悟婚姻的经典句子)积累好句摘抄大全六年级(六年级优美句子摘抄)激励女儿正能量的句子带锋芒的话(鼓励女儿继续努力的朋友圈)积极向上的正能量句子(积极有上进心的句子)积极的心态成功的一半演讲稿(积极心态的正能量句子)激励男人成功励志正能量语句(男人励志挣钱霸气句子)激励女儿正能量的句子短句(女儿励志有深度有品味的句子)
New Post(0)