脑机接口可以让闭锁病人意念发声

f7298169eb734b309050ff6403e60a9a.png

在大仲马的经典小说《基督山伯爵》中,一个名叫诺瓦蒂埃-德-维尔福先生的人物患了严重的中风,全身瘫痪了。虽然他仍然清醒,但已经不能动弹或说话,只能依靠孙女瓦朗蒂娜背诵字母表和翻阅字典来找到他需要的字母和单词。凭借这种最基本的交流方式,这位意志坚定的老人成功地使瓦朗蒂娜免于被继母毒死,并挫败了儿子违背她的意愿将她嫁出去的企图。

大仲马对这种状况的描写--正如他所说,"灵魂被困在一个不再听从自己命令的躯体中"--是对锁闭综合症最早的描述之一。这种形式的深度瘫痪发生在脑干受损时,通常是因为中风,也可能是肿瘤、脑外伤、蛇咬、药物滥用、感染或神经退行性疾病(如肌萎缩性脊髓侧索硬化症)所致。

6f588ef58ee933f9953cbb1d05969296.png

在《基督山伯爵》中,诺瓦蒂埃-德-维尔福先生不能动也不能说话,只能通过书中的文字和字母与孙女交流。Project Gutenberg

这种情况很罕见,但究竟有多罕见还很难说。许多闭锁患者可以通过有意识的眼球运动和眨眼进行交流,但也有一些患者完全不能动弹,甚至连眼球或眼睑都不能动弹,这样一来,"如果你听懂了,就眨两下眼睛"的指令就变得毫无意义。因此,在得到正确诊断之前,患者平均要在一动不动的躯体中度过很长时间,虽然有意识,但却无法交流。

脑-机接口的出现为这种被禁锢状态下的人恢复交流带来了希望,使他们能够与外界重新建立联系。这些技术通常使用植入式设备记录与语言相关的脑电波,然后使用计算机算法解码预期信息。最令人兴奋的先进技术不需要眨眼、眼球跟踪或尝试发声,而是捕捉并传达一个人在脑中默念的字母或单词。

30a33926fde4618339ec4b28cfb4a98f.png

通过记录大脑中特定神经元的活动,研究人员实现捕捉有意识说话的信号。Knowable Magazine

加州理工学院计算和神经系统研究生萨拉·万德尔特(Sarah Wandelt)表示:“我觉得这项技术确实有潜力帮助那些失去最多的人,那些真的被锁住了,再也无法沟通的人。”万德尔特(Wandelt)等人最近的研究首次证明,脑机接口可以解码内部语音。这些方法虽然前景广阔,但通常都是侵入性的、费力的、昂贵的,专家们一致认为,要让闭锁病人发出声音,还需要进行更多的研究开发。

# 让大脑参与--但在哪里?

构建脑机接口的第一步是决定利用大脑的哪个部分。在大仲马年轻的时候,许多人认为,一个人头骨的轮廓为理解大脑的内部运作提供了一个图谱。在古老的医学书籍和百货公司的家居装饰区,仍然可以找到色彩斑斓的颅骨图--上面标注了仁慈、食欲和语言等人类能力的区域。"加州理工学院的神经科学家和博士后研究员大卫-比约恩斯(David Bjånes)说:"当然,我们现在知道这是无稽之谈。事实上,现在已经很清楚,我们的能力和功能来自于不同脑区之间的互动网络,每个脑区都是神经网络中的一个节点。这种复杂性既是挑战,也是机遇:由于目前还没有发现一个大脑区域负责内部语言,因此许多不同的区域都可能成为可行的目标。

例如,Wandelt、Bjånes 和他们的同事发现,顶叶中被称为 "边上回"(SMG)的部分通常与抓握物体有关,但在说话时也会被强烈激活。他们在观察一名四肢瘫痪的研究对象时发现了这一惊人的发现,这名研究对象的SMG中被植入了一个微电极阵列--一个比大头针还小的装置,上面布满了大量按比例缩小的金属尖刺。该阵列可以记录单个神经元的发射,并通过纠缠在一起的电线将数据传输到计算机进行处理。

Bjånes将他们的脑机接口的设置比作一场足球比赛。想象你的大脑是一个足球场,每个神经元都是这个足球场里的一个人。电极就是麦克风,你可以把它放进球场来收听。他解释说:“我们希望把这些设备放在教练附近,或者播音员附近,或者观众中真正知道发生了什么的人附近。然后我们试图了解球场上发生了什么。当我们听到人群的吼声时,那是触地得分吗?那是传球吗?那是被罚下场的四分卫吗?我们正在努力了解游戏规则,我们获得的信息越多,我们的设备就越好。”

在大脑中,植入的装置位于神经元之间的细胞外空间,在那里它们监测每次神经元放电时穿过突触的电化学信号。如果植入物接收到相关的神经元,电极记录的信号看起来就像音频文件,反映了不同动作或意图的不同波峰和波谷模式。

加州理工学院的研究小组训练了他们的脑机接口,以识别当一个四肢瘫痪的研究参与者在内心“说”六个词(battlefield, cowboy, python, spoon, swimming, telephone)和两个伪造词(nifzig、bindip)时产生的大脑模式。他们发现,仅仅经过15分钟的训练,通过使用相对简单的解码算法,该设备识别单词的准确率就超过了90%。

efac9198c4cd07d8b7c286fde4b03d21.png

研究人员在一位四肢瘫痪的志愿者的帮助下进行了脑机接口实验,这位志愿者同意在他们的大脑中植入电极。图中显示的是大脑边缘上回神经元的读数,该区域在说话时会被强烈激活。该志愿者接受了一些单词以及一些无意义单词的测试。触发电极阵列的神经元群在两次测试之间(ITI,即测试间歇)的表现相似,但在向受试者展示单词(提示)、内心说出单词(内部言语)或大声说出单词(有声言语)时,神经元群表现出很大的差异性。每条彩线表示一个不同的单词。纵轴上的起伏显示了差异模式,计算机软件可以将单词相互区分开来。

Wandelt在圣地亚哥举行的2022年神经科学学会会议上介绍了这项研究,该研究尚未在同行评议的科学期刊上发表。她认为这些发现表明了一个重要的概念证明,尽管在一个被锁住的病人能够挫败邪恶的继母或获得一杯水之前,词汇还需要扩大。Wandelt在会议上说:“很明显,我们选择的词汇并不是信息量最大的,但如果你用‘是’、‘不是’这些真正信息量大的词汇来代替它们,那将会很有帮助。”

Wandelt 在圣地亚哥举行的 2022 年神经科学学会会议上介绍了这项尚未在同行评审科学杂志上发表的研究。她认为,这项研究结果标志着一个重要的概念验证,不过在被锁住的病人能够挫败邪恶的继母或获得一杯水之前(《基督山伯爵》中的场景),还需要扩大词汇量。显然,我们选择的词汇并不是信息量最大的词汇,但如果你用 "是"、"否 "或某些真正有信息量的词汇来代替它们,那将会很有帮助。"

# 把想法变成文字

另一种方法是设计一种能识别字母而不是单词的脑机接口,从而避免了积累大量词汇的需要。通过尝试用嘴说出罗马字母的每个字母所代表的单词,瘫痪病人可以拼出他们脑海中闪现的任何单词,并将这些单词串联起来,用完整的句子进行交流。

加州大学旧金山分校和加州大学伯克利分校生物工程专业的研究生肖恩·梅茨格说:“我们经常会大声说出一些事情,比如当你和客户服务代表打电话的时候。”就像电话线上的静电一样,大脑信号也可能是嘈杂的。使用暗号——比如Alpha代表A, Bravo代表B, Charlie代表C——可以更容易地辨别某人在说什么。

梅茨格和他的同事在一名因中风而无法行动或说话的参与者身上测试了这一想法。研究参与者在他的运动皮层上植入了一个更大的电极阵列——大约是一张信用卡的大小。这种阵列不是窃听单个神经元,而是记录成千上万个神经元的同步活动,就像听到足球场的整个区域同时欢呼一样。

利用这项技术,研究人员记录了数小时的数据,并将其输入复杂的机器学习算法。他们能够解码 92% 的研究对象默写的句子,如"没关系 "或 "现在几点了?"--两次尝试中至少有一次成功。梅茨格说,下一步可以将这种基于拼写的方法与他们之前开发的基于单词的方法结合起来,让用户能够更快、更省力地进行交流。

# 还在早期阶段

如今,全球已有近 40 人植入了微电极阵列,还有更多的人将被植入。这些志愿者中有许多人因中风、脊髓损伤或渐冻人症而瘫痪,他们花费数小时与电脑连接,帮助研究人员开发新的脑机接口,以便有朝一日让其他人重新获得失去的功能。德克萨斯大学奥斯汀分校的计算机和语音科学家Jun Wang表示,他对最近在制造恢复语音设备方面取得的进展感到兴奋,但他提醒说,距离实际应用还有很长的路要走。"目前,整个领域仍处于早期阶段"。

Wang和其他专家希望看到软硬件的升级,让设备不那么笨重,更准确,更快。例如,由加州大学旧金山分校实验室首创的设备以每分钟约7个单词的速度工作,而美式英语的自然语音速度约为每分钟150个单词。而且,即使技术发展到可以模仿人类说话,目前还不清楚在有一定行动或说话能力的患者身上开发的方法是否适用于那些完全被禁锢的患者。"梅茨格说:"我的直觉是它会扩展,但我不能肯定。“我们必须核实这一点。”

另一个悬而未决的问题是,是否有可能设计出无需脑部手术的脑机接口。创造非侵入式方法的尝试已经失败,因为这些设备试图理解穿过层层组织和骨骼的信号,就像试图从停车场跟踪一场足球比赛一样。

Wang在使用一种称为脑磁图(MEG)的先进成像技术方面取得了进展,这种技术可以记录大脑电流在头骨外部产生的磁场,然后将这些信号翻译成文本。现在,他正在尝试制造一种设备,利用脑磁图识别英语语言中的44个音素,或者语音,比如ph或o,这些音素可以用来构造音节,然后是单词,然后是句子。

最终,让闭锁患者恢复语言的最大挑战可能更多地与生物学有关,而不是技术。语音编码的方式,特别是内部语音,可能因个人或情况而异。有人可能会想象在脑海中在一张纸上潦草地写一个词;另一个人可能听到这句话,还没有说出口,在他们的耳朵里回响;还有人可能会把一个词和它的意思联系起来,唤起一种特殊的感觉状态。由于不同的脑电波可能与不同的人的不同词汇相关联,因此可能需要针对每个人的个性采用不同的技术。

参考文献链接:

https://www.smithsonianmag.com/innovation/brain-computer-interfaces-that-could-give-locked-in-patients-voice-180982254/


仅用于学术分享,若侵权请留言,即时删侵!

更多阅读

马斯克合伙人“造出”大脑皮层 有望进行人体测试

人类“第六感”首次被证实,研究发现人脑具有磁场感应能力

上海交大教授卢策吾深度解读“具身智能”

预见2023:《2023年中国脑机接口行业全景图谱》

这个脑机接口实现每分钟超60个单词的意念说话

脑机接口公司Precision Neuroscience完成了B轮4100万美元

哈佛研究人员说:柔性水凝胶电极也许是脑机接口的下一步

人类意识的大脑模式

57a50d4a50d7bdcef096b080eb8e9bff.png

   加入社群  

欢迎加入脑机接口社区交流群,

探讨脑机接口领域话题,实时跟踪脑机接口前沿。

加微信群:

添加微信:RoseBCI【备注:姓名+行业/专业】。

加QQ群:913607986

  欢迎来稿  

1.欢迎来稿。投稿咨询,请联系微信:RoseBCI

2.加入社区成为兼职创作者,请联系微信:RoseBCI

7e6c512121604f6c3c157480f45933e4.png

074e20b765646eb865e8faff35ae90e9.png

0fd17ab7775bcc7d15fb4a7e582e871b.png

51453747ff8c27469feb46f882e30fbe.png

点个在看祝你开心一整天!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

脑机接口社区

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值