文化
科学家开发出解码大脑发声信号的系统,读出脑中所想
“随着技术的不断进步,我们可以期待有语言障碍的人能够重新获得自由表达想法的能力,并与周围的世界重新建立起联系。”
*本文只能在《好奇心日报》发布,即使我们允许了也不许转载*
让-多米尼克·鲍比(Jean-Dominique Bauby)在回忆录《潜水钟与蝴蝶》(The Diving Bell and The Butterfly)一书中写道:“在我的脑海里,每句话我都要翻来覆去地思忖个十回,删掉一个单词,添加一个形容词,然后一段一段地默记下来。”在这本书里,记者兼编辑鲍比回忆了自己中风瘫痪前后的生活,那次中风使他全身几乎无法动弹;他只能通过眨眼睛的动作,(在别人的帮助下)一个字母一个字母地完成了这本书。
成千上万的人由于在事故或战斗中受伤、中风或神经退行性疾病(如肌萎缩性侧索硬化症,简称 A.L.S.)而丧失语言能力,只能采取同样艰难的交流方式。
目前,科学家报告称,他们已经开发出一种虚拟假声。这种系统可以解码大脑的发声意图,并将其转换成通常可以理解的语音,而不需要牵动肌肉,连嘴部肌肉都无需抽动。(物理学家兼作家斯蒂芬·霍金[Stephen Hawking]利用脸颊的一块肌肉来输入键盘字符,计算机再将其合成为语音。)
佛罗里达州杰克逊维尔梅奥医学中心(Mayo Clinic)的神经学家兼神经系统科学专家安东尼·里塔乔(Anthony Ritaccio)并不是这个研究小组的成员。他表示,“这是一项艰巨的工作”,通过解码大脑信号,“让我们再上一个台阶,朝着恢复语言功能的目标进发。”
研究人员还开发了其他虚拟语言辅助工具。它们的工作原理是解码负责识别字母和单词的大脑信号,即语言的口头表达。但这些方法缺乏正常说话时的速度和流畅性。
周三发表在《自然》杂志上的这个新系统,可以破译大脑中引导发声活动的运动指令(比如轻叩舌体、紧抿双唇等),并生成可以被理解的句子,与说话人自然的抑扬顿挫语调相接近。
专家表示,这项新工作相当于“原理验证”,是对进一步的实验和改进之后可能出现的情况进行事先查看。该系统在语言功能正常的人身上进行了测试;它还没有在神经系统疾病或损伤(如常见的中风)可能造成解码困难或无法解码的患者身上进行过测试。
为了新的试验,加州大学旧金山分校和伯克利分校的科学家招募了五名住院接受癫痫手术的患者。


许多癫痫患者药物治疗效果不佳,于是选择接受脑部手术。手术前,医生必须首先找到每个人大脑中癫痫发作的“常见位置”;这个步骤是通过放置在大脑中或大脑表面的电极来完成的,这些电极用来监听能说明问题的电风暴。
准确定位这个位置可能需要几周时间。在此期间,电极被植入在患者大脑中与运动和听觉信号相关的区域或其附近。这些患者通常同意参与利用这些植入物进行的补充实验。
加州大学旧金山分校有五名这类患者同意参与虚拟语音发生器的测试。他们每个人都被植入了一到两个电极阵列:它的大小和邮票差不多,上面有几百个微型电极,被放置在大脑的表面。
在每个参与实验的患者背出几百个句子时,电极就记录下运动皮层神经元的放电模式。研究人员将这些模式与患者在自然发音过程中嘴唇、舌头、喉头和下巴的细微运动联系起来。研究小组随后将这些动作转化成口语句子。
实验安排了英语为母语的参与者听句子,以测试虚拟声音的流畅性。研究发现,虚拟系统中多达 70% 的内容是可理解的。
加州大学旧金山分校神经外科教授爱德华·常(Edward Chang)是这项新研究的发起人,他说:“我们发现,通过解码大脑活动指导的发音,我们可以模拟出比基于从大脑中提取声音表征的合成语音更准确、更自然的语音。”与他一起从事这项研究的是他在加州大学旧金山分校的同事戈帕拉·阿南奇帕利(Gopala K. Anumanchipalli)以及同时隶属于加州大学旧金山分校和伯克利分校的乔希·沙尔捷(Josh Chartier)。
先前基于植入的通讯系统每分钟生成大约 8 个单词。而新程序每分钟能产生大约 150 个单词,相当于正常讲话的速度。
研究人员还发现,基于某一个人大脑活动的合成语音系统可以被其他人使用和调整,这表明可供人们直接使用的虚拟系统终有一天会出现。
该研究团队正计划转向临床试验,以进一步测试这个新系统。临床面临的最大挑战可能是找到合适的患者:使人丧失语言功能的中风通常也会损害或彻底摧毁大脑中支持语言表达的区域。
尽管如此,众所周知,脑机接口技术领域正在迅速发展,世界各地的研究团队都在提供改进的方案,这些方案有可能正好是为具体的损伤量身定制的。
埃默里大学(Emory University)和佐治亚理工学院(Georgia Institute of Technology)的生物医学工程师塞詹·潘德瑞纳斯(Chethan Pandarinath)和叶海亚·阿里(Yahia H. Ali)在随同发表的一篇评论文章中写道:“随着技术的不断进步,我们可以期待有语言障碍的人能够重新获得自由表达想法的能力,并与周围的世界重新建立起联系。”
翻译:熊猫译社 胡敏
题图来自 Pixabay
© 2019 THE NEW YORK TIMES
原文链接 (已下线): https://www.qdaily.com/articles/63258.html
Wayback 快照: http://web.archive.org/web/20190425084436/https://www.qdaily.com/articles/63258.html
原始截图: http://ww3.sinaimg.cn/large/007d5XDply1g3ygywynb8j30u04ji4qq