“意念书写”“思想驱动”的交流

或许，这项新进展可以被描述为“意念书写”。

坐在电脑前，无需任何肢体动作，动一动“意念”，你就可以将大脑中想写的字符呈现在屏幕上。其“写字”速度甚至可与身体健全的同龄人在智能手机上发短信的速度相媲美。

在5月13日以封面形式发表于《自然》的一项报告中，美国斯坦福大学的研究者通过脑机接口(BCI)，可让参试者每分钟动用“意念”写出90个字符，是之前采用类似脑机接口打字记录的两倍多，且书写准确率超99%。

“随着进一步的发展，这项创新成果可以让瘫痪者无需用手就能快速打字。”该论文资深作者、斯坦福大学霍华德·休斯医学研究所研究员Krishna Shenoy在接受《中国科学报》采访时说。

“思想驱动”的交流

“我的肉体沉重如潜水钟，但内心渴望像蝴蝶般自由飞翔……”1995年12月8日，一场突如其来的灾难袭击了法国杂志编辑吉恩·多米尼克·鲍比——脑干突然中风，继而引发极其罕见的闭锁症候群。凭借顽强的意志和仅能活动的左眼，鲍比给后世留下了《潜水钟与蝴蝶》一书。

目前，鲍比使用的眼球追踪键盘技术可以让瘫痪者每分钟输入47.5个字符，远低于身体健全者的每分钟115个字符。且这种技术并不适用于那些眼部运动受损的人，很多患者只能“与世隔绝”。

而Shenoy与合作者的最新研究成果无疑为他们打开了一扇与外界沟通的窗。

“当受伤或疾病夺去一个人的行动能力之后，其大脑对一些行为(如写字、行走、说话等)的神经活动仍然存在。我们希望利用相关神经活动帮助瘫痪或截肢的人恢复一些失去的能力。”Shenoy说。这推动他和该研究共同通讯作者、斯坦福大学神经外科医生Jaimie Henderson自2005年起开始BCI方面的合作。

在2017年发表于eLife的一项研究中，他们在3名肢体瘫痪者的大脑运动皮层植入了BCI芯片。每个芯片约阿司匹林药片大小，上面有100个电极，用于接收大脑运动皮层神经元发出的信号，这些信号可以控制手的动作。参试者被要求集中精力，尝试用与手臂运动相关的“意念”，用光标指向字符并点击。其中，代号为T5的参试者(2007年因脊髓损伤几乎丧失了颈部以下的所有活动能力)创造了最高纪录：每分钟可点击40个字符。

这种方式为重度瘫痪与失明者找到了打开“心窗”的钥匙。不过，Shenoy与合作者的想法是：“让意念书写的速度再快些!”

通过进一步研究，他们发现，与以稳定速度直线移动光标等简单的预期运动相比，涉及改变速度和曲线轨迹的复杂预期运动可以通过AI算法进行更简单、迅速的解译。这让他们把研究思路从指向和点击字符转变为书写字符。

“字符表中的每个字符都不相同，所以很容易区分。”第一作者兼通讯作者、Shenoy团队的神经科学研究者Frank Willett向《中国科学报》解释说，通过AI算法对BCI芯片上的神经信号信息进行解码，就可以推测T5想做的手部运动，并将参试者的书写“意念”快速转换为电脑屏幕上的文本。

很快，新思路让这种“思想驱动”的交流速度翻倍。

媲美普通人手机打字速度

“如果说2017年的研究模式类似于‘打字’，那么这项新研究的模式则类似于‘手写’。”Willett解释说。

T5是这项研究的唯一参试者。尽管手臂不能动，但他还是集中精力，试图用一支假想的笔在一张假想的格子纸上写出字符表中的单个字符。他把每个字符重复10次，让软件“学习”识别与他想写的那个特定字符相关的神经信号。

随后，研究者给T5展示了几组句子，并要求他在心中努力“书写”每个句子，但不使用大写字符。如“我被打断了，无法保持沉默”“三十秒内军队就登陆了”。最后，无论T5想写什么，AI算法大约仅延迟半秒就能把他的想法“写”在电脑屏幕上。接下来，T5被要求抄写算法从未接触过的句子。最终，他能够每分钟生成90个字符，大约18个单词。相比之下，身体健全的人在智能手机上的打字速度为每分钟23个单词。

“这种方法让瘫痪者输出句子的速度几乎可以与健全同龄成年人用智能手机打字的速度相媲美。”Henderson说，“我们的目标是让他们恢复用短信交流的能力。”

据介绍，T5的抄写错误率约为每18至19个字符中存在一处错误，自由写作的错误率约为每11或12个字符中一处错误。不过，当研究人员使用类似于智能手机键盘的自动更正功能加以纠正后，错误率明显降低：抄写的错误率低于1%，自由书写的错误率略高于2%。

“与其他BCI相比，错误率已经相当低。”Shenoy说。据介绍，受法律限制，目前这项研究中使用的BCI仅用于调查性研究，尚未批准用于商业用途。

未参与这项研究的加州大学伯克利分校的神经工程师Jose Carmena在接受《中国科学报》采访时评价称，这项技术以及其他类似技术可能有助于残障人士。虽然这些发现只是初步的，却是该领域的一大进步。“脑机接口可将思维转化为行动。”Carmena说，“这篇论文就是一个很好的例子。BCI破译了书写的思想，并付诸行动。”

为残障人士带来无限可能

由于在医疗康复、养老助残、航空航天和军事等领域有广泛的应用前景，当前，国内相关研究也在如火如荼地开展。

例如，华南理工大学脑机交互实验室通过采集分析实验者的脑电波，实现了“脑控输入法”;香港中文大学通过BCI系统将脑电波转换成繁体中文字，让全身瘫痪无法说话的人有机会“打开心窗”。此外，天津大学神经工程团队早在2016年就与中国航天员科研训练中心合作，成功开展人类首次太空脑—机交互实验，通过获取航天员在太空飞行中脑—机交互生理特征的变化模型，初步探索意念控制在航天任务中的可行性。

不过，在同期发表于《自然》的一篇观点新闻中，华盛顿大学生物工程系的Pavithra Rajeswaran和Amy Orsborn表示，如何让脑机接口在其生命周期中保持性能仍需要进一步研究。“需要拥有极佳的效果和使用益处，才能证明在患者脑部植入电极所产生的费用和风险是值得的。”

展望未来，Shenoy团队希望将手写文本输入的方法整合到一个更全面的系统。该系统还包括目前智能手机上使用的指向和点击导航，甚至尝试性的语音解码。“拥有这2~3种模式并在它们之间切换，是人天生就可以做到的。”

“虽然我们每分钟可以写接近20个单词，但语速往往在125个单词左右，所以语音将是弥补手写不足的另一个令人兴奋的方向。”Shenoy说，“如果将这些系统结合起来，可以为患者提供更多有效沟通的选择。”

Shenoy说，接下来，研究小组打算与聋哑人、患有肌萎缩性脊髓侧索硬化症(这种退行性神经疾病会导致运动和语言能力丧失)的参与者合作。Henderson也补充说，新系统有可能帮助那些因多种情况瘫痪的人，如因脊髓损伤失去上肢或语言能力的人。

“鲍比费了极大的力气，通过眼球运动一次选择一个字符才写出《潜水钟与蝴蝶》这本动人的书。”Henderson说，“想象一下，如果有现在这样的界面，他能做些什么。”

标签： “意念书写”