本周三,加州大学旧金山分校(Universityof California, San Francisco, UCSF)等机构的研究人员在《New England Journal of Medicine》发表了一项研究成果,研究人员在该成果中表示,一名15年前因中风失去了说话能力的男子,如今通过脑机接口技术恢复了某种语言能力。

在Facebook的资助下,加州大学旧金山分校开展了一项名为Project Steno的研究,经过长达数年之久的研究。这项研究将一名有语言障碍的瘫痪患者的对话尝试转化为屏幕上的文字,帮助瘫痪患者实现再次“说话”。

神经外科医生 Edward Chang 在加州大学旧金山分校进行脑部手术

研究人员表示,“据我们所知,这是首次成功地从瘫痪不能说话的人的大脑活动中直接解码完整单词。”

“希望这是通信设备直接语音控制的原理证明,使用有意尝试的语音作为无法说话、瘫痪的人的控制信号。”

该团队在一名在20岁时因中风导致瘫痪而不能说话的患者的大脑中控制语言的区域植入了一系列电极。

加州大学旧金山分校在一份声明中表示:“该患者受伤后,他的头部、颈部和四肢的活动极其有限,只能通过戴在棒球帽上的指针在屏幕上戳出字母来与人交流。”

这名男子现年 30 多岁,被提示使用有限的词汇,同时使用算法调整设备以翻译来自他大脑的电活动。然后这些词被投射到电脑屏幕上。该男子试图回答屏幕上显示的问题。UCSF 的机器学习算法可以识别 50个单词并实时将其转换为句子。例如,患者看到屏幕上显示"Good morning",患者通过脑机接口将其大脑所想的解码并显示在屏幕上:“Hello”。

如果患者看到一个询问"Howare you today?“的提示。屏幕上出现的回应是"I am very good.”。

该团队表示:“我们从参与者的皮层活动中实时解码句子,平均速度为每分钟15.2个单词,单词错误率的平均速度为25.6%。”

研究人员说:“我们检测到98% 的参与者尝试生成单个单词,并且我们利用在81周的研究期间保持稳定的皮层信号对单词进行分类,准确率为47.1%。”

最终,这位不愿透露姓名的患者帮助团队编造了一个50个单词的词汇表,包括"yes,"“no,” “family,” “clean"和"nurse.”。这些被扩展成完整的句子,比如"No, I am notthirsty."

这种电极不是永久性的,它是一个位于颅骨顶部的大型装置,不能持续使用。但研究人员说,这也不是一个实验的奇迹。

研究人员写道:“在先前报道的脑机接口应用中,解码模型通常需要在与用户部署之前每天重新校准。”他们说,这个设备更稳定。

上图显示了 ECOG 电极在参与者的言语运动皮层上的放置,以及用于将电极连接到计算机的头部阶段

“对于一个不能自然交流的人来说,这是一个重要的技术里程碑,它展示了这种方法的潜力,可以让严重瘫痪和失语的人发声,”Chang实验室的博士后工程师David Moses表示。

研究人员表示,“这项试验只是一个开始。这是该试验的第一个参与者,也是该试验的第一组实验,表明这是可能的。”

“在硬件方面,我们需要构建具有更高数据分辨率的系统,以便更快地记录来自大脑的更多信息。在算法方面,我们需要拥有能够将这些非常复杂的大脑信号转化为语音的系统,不是文字,而是真正的口头、可听的口语,”他补充道。

“也许最重要的事情之一就是扩大词汇量,使其不仅限于我们开始使用的 50 个单词,而是可以概括为所有的英语单词。”“我们还需要确保,我们在这个参与者身上看到的,可以在更广泛的患者群体中看到。”

参考
https://edition.cnn.com/2021/07/15/health/man-speech-implant/index.html
https://apnews.com/article/technology-science-health-2034d0fff5e63a83b7add3e991df79b1
https://www.nytimes.com/2021/07/14/health/speech-brain-implant-computer.html

更多阅读
脑机接口技术在医疗健康领域应用白皮书
脑机产业迎来“新标准”,CESI发布《脑机接口标准化白皮书》
2021世界机器人大赛脑机接口系列视频讲座之SSVEP相关
EEGLAB 使用教程 2 - Events 和 通道位置
猴子意念打字,有可能敲出莎士比亚全集
人脑启发AI设计:让神经网络统一翻译语音和文本
MNE中数据结构Epoch及其创建方法

BCI里程碑!脑机接口首次让患者输出完整句子相关推荐

  1. 重磅!UCSF的研究者利用脑机接口首次让患者输出完整句子,展现恢复语言沟通的潜力...

    本周三,加州大学旧金山分校(Universityof California, San Francisco, UCSF)等机构的研究人员在<New England Journal of Medic ...

  2. 脑机接口让脊髓损伤患者重新获得手部触觉

    目录 脊髓严重损伤的受试者恢复了手部触觉 导读 改进的BCI系统给触觉功能带来的好处 本分享为脑机学习者Rose整理发表于公众号:脑机接口社区 .QQ交流群:941473018 脊髓严重损伤的受试者恢 ...

  3. 伍冬睿教授:脑机接口中迁移学习的完整流程

    大家好,今天Rose分享一篇关于脑机接口中的迁移学习的完整流程.本文由华中科技大学伍冬睿教授授权分享. 关于脑机接口中迁移学习方面的研究,伍教授团队做过大量的工作.之前社区分享过<脑机接口中的流 ...

  4. 运动想象脑机接口中迁移学习的完整流程

    点击上面"脑机接口社区"关注我们 更多技术干货第一时间送达 脑机接口(Brain-Computer Interface, BCI)可以让用户使用脑电信号直接与计算机或其他外部设备进 ...

  5. 让瘫痪失语患者「说话」,脑机接口首次从大脑活动解码完整句子,登上新英格兰医学杂志...

    视学算法报道 转载自:机器之心 编辑:杜伟.陈萍 Facebook 与加州大学旧金山分校(UCSF)Chang Lab 的脑机接口项目 Project Steno 取得了最新进展,该研究通过解码从运动 ...

  6. 深度学习下的脑机接口BCI究竟有多远?

    BCI | ECoG  | 脑机接口 LFP | CMRR | 生物计算 随着生命科学.医药研发.数据分析.数据挖掘.LFP.生物计算.靶点发现.基因测序等技术的快速发展,脑科学逐渐出现在人们的视野中 ...

  7. 脑机接口(BCI)的研究方法

    " 嘘!悄悄插播的哦" (图1 BCIduino实物图) BCIduino 8通道脑电放大器具体参数如下: 输入阻抗:1TΩ 输入偏置电流:300pA 输入参考噪声:1μVpp 采 ...

  8. Nature封面:脑机接口重大突破!意念手写字速度破纪录!

    近日,由斯坦福大学.霍华德·休斯医学研究所(HHMI).布朗大学等机构的科研人员联合研究,该研究首次从脑电信号中解码手写字母的动作,使瘫痪人士意念中的写字动作可以实时转换成屏幕上的文字. 该项研究结果 ...

  9. 脑机综述(一) | 脑机接口在康复医学中的应用进展

    来源:<中国康复医学>杂志 .臻泰智能 论文<脑机接口在康复医学中的应用进展> 琚芬1,赵晨光1,袁华1,牟翔1,王冰水2 [关键词] 脑机接口:运动功能:康复 [基金项目]国 ...

最新文章

  1. Java 根据comboBox选择结果显示JTable
  2. python下载文件到指定目录-python – 如何将文件下载到特定目录?
  3. 产品助理要练哪些姿势,才能看上去舞步优雅?
  4. 互联网产品用户体验设计的三大定律
  5. spacy 英文模型下载_spaCy2.1中文模型包
  6. 中国人工智能学会最高荣誉CAAI Fellow出炉,首批53位大牛,姚期智谭铁牛等入选
  7. 极大强连通分量的Tarjan算法
  8. JDK API在线文档
  9. Hive数据分析案例——汽车销售数据分析
  10. windows 安装msi 出现报错 2503 无权限 使用cmd模式安装
  11. 载入java VM 时Windows 出现错误:2
  12. Hive SQL行列转换
  13. 哈工大同义词词林扩展版-资源分享
  14. 爬虫CASE01:反爬策略之使用随机user-agent模拟浏览器的网页爬取
  15. 第一讲_SQP添加与查询语句
  16. 轻风送暖写诗意,梅雨传情送祝福
  17. Win10系列:JavaScript综合实例1
  18. 二进制部署Prometheus及监控服务
  19. 从“点卡改月卡”谈电子游戏产业中的道德困境
  20. 想跳槽却简历石沉大海?一起来围观月薪20k的软件测试工程师真实简历 (含金量高面试题)

热门文章

  1. [解决方案]SystemError: Parent module ‘‘ not loaded, cannot perform relative import的解决方案
  2. Google Maps API v2 android版本开发 国内手机不支持google play Service相关问题解决--图文教程
  3. Vue 兼容 ie9 的全面解决方案
  4. redis Could not connect to Redis at 127.0.0.1:6379: Connection refused 问题解决
  5. event.stopPropagation和event.preventDefault有什么区别?
  6. 再见乱码:5分钟读懂MySQL字符集设置
  7. 为什么需要批判性思维 -- 读《学会提问》
  8. excel中日期设置星期
  9. [置顶] think in java interview-高级开发人员面试宝典(二)
  10. 第十四章 梁山好汉中谁最惹人爱