对于有运动障碍或身体残疾的人来说,完成日常任务和家务是非常具有挑战性的。机器人技术的最新进展,例如大脑控制的机器人肢体,有可能显著改善他们的生活质量。

河北工业大学和其他研究机构的研究人员联合开发了一种基于增强现实 (AR) 和脑机接口的用于控制机械臂的一个新系统。研究人员在《Journal of Neural Engineering》上发表的研究成果中提出了该系统,该项研究让用户更容易控制的仿生或假肢的开发成为可能。

研究人员表示,“近年来,随着机械臂、脑科学和信息解码技术的发展,脑控机械臂取得了越来越多的成就。然而,灵活性差等缺点限制了它们的广泛应用。我们的目标是促进脑控机械臂的轻量化和实用性。”

整体系统结构图。 该系统由AR-BCI子系统和机械臂子系统组成。

该系统集成了AR技术,用户可以看到周围环境的增强版,其中包括数字元素和脑控制界面,采用传统的异步控制方法来控制机器人的四肢。这最终允许用户实现对机械臂的更大控制,提高运动的准确性和效率。

异步控制方法的灵感来自于人类大脑的运作方式。更具体地说,他们试图复制大脑在工作和空闲状态之间切换的能力。

“异步控制的关键在于区分机器人系统的空闲状态和工作状态,”研究人员表示。“当用户开始操作我们的机械臂系统后,系统会被初始化为空闲状态。当受试者想到控制命令时,受试者可以通过状态切换界面将系统切换到工作状态。”

机械臂子系统

在研究人员创建的系统切换到工作状态后,用户只需选择他们想要执行的动作的控制命令,系统就会将其传输到他们佩戴的机械臂上。当机械臂接收到这些命令时,它会简单地执行所需的动作或任务。任务完成后,系统自动返回空闲状态。

“我们系统的一个独特之处是成功集成了AR-BCI、异步控制和用于数据处理的自适应刺激时间调整方法。与传统的 BCI 系统相比,我们的系统也更加灵活且易于控制。”

该系统的自适应特性使其可以根据用户使用机械臂时的状态灵活调整呈现给用户的 AR 内容的持续时间。这可以显著减少因看屏幕或数字内容而引起的疲劳。此外,与传统的BCI相比,该团队的增强现实系统减少了对用户身体活动的限制,使他们能够更轻松地操作机器人手臂。

研究人员表示,“最终,我们能够成功地集成增强现实、脑机接口、自适应异步控制和一种新的空间滤波算法来分类SSVEP信号,这为脑控机械臂的发展提供了新思路。我们的方法有助于提高大脑控制机械臂的实用性,并加速这项技术在现实生活中的应用。”

用于 BCI 中目标识别的 mtCCA-TRCA 方法的分步图。(A) 第一步是获得四个权重向量:W (n)、W Y (n)、W Z(n) 和 W 1(n)。

用于 BCI 中目标识别的 mtCCA-TRCA 方法的分步图。(B) 先计算6个特征值:r1、r2、···、r6,然后用这6个特征值计算最终的特征值。

研究人员在一系列实验中评估了他们的系统,并获得了非常不错的结果。最值得注意的是,研究人员发现他们的系统允许用户使用机械臂执行他们想要的动作,准确率达到 94.97%。此外,测试其系统的十名用户能够在平均 2.04 秒的时间内为机械臂选择单个命令。总的来说,这些发现表明,他们的系统提高了用户控制机械臂的效率,同时也减少了他们的视觉疲劳。

机器人手臂控制系统的实验环境。(A)实验环境;(B)在线拼图图形。上:菱形,下:三角形

未来,研究人员提出的方法可以帮助提高现有和新开发的机械臂的性能。这可以促进这些系统在医疗保健机构和老年护理机构中的实施,使患者和客人能够独立参与他们的一些日常活动,从而提高他们的生活质量。

虽然该系统只在没有运动障碍或残疾的用户身上进行了测试。不过,他们很快也希望与老年用户或身体残疾用户合作对其进行评估,以进一步探索其潜力和适用性。

未来展望

研究人员表示,“我们现在计划从以下几个方面着手,以提高该系统在社会生活中的可靠性和实用性。”“首先,在异步控制策略方面,可以利用EOG等生理信号来改善异步控制过程。其次,脑电图解码、迁移学习等方法可以进一步改善模型训练过程。此外,在动态窗口方面,我们可以使用其他预测方法实时修改系统阈值。

参考:

Lingling Chen et al, Adaptive asynchronous control system of robotic arm based on augmented reality-assisted brain-computer interface, Journal of Neural Engineering (2021).

DOI: 10.1088/1741-2552/ac3044

https://techxplore.com/news/2021-11-robotic-arms-based-augmented-reality.html

翻译:Tina

排版:羽化

文章仅用于学术交流,不用于商业行为,

若有侵权及疑问,请后台留言,管理员即时删侵!

更多阅读

一种灵活,坚固且无凝胶的脑电图电极,可用于无创脑机接口

基于头皮脑电的癫痫分类

Science封面:人为何要睡觉?

科学研究|脑际同步揭示快乐情绪如何增强人际合作协调

《关于拟制定脑机接口技术出口管制规则的通知》

2021年中国最强生物医学工程学校排名

大脑如何编码视觉信息?

神经科学:脑研究的综合学科

你的每一次在看,我都很在意!

基于增强现实和脑机接口的机械臂控制系统相关推荐

  1. 基于音乐的脑机接口——采访Stefan Ehrlich 和 Kat Agres(上)

    音乐可以唤起强烈的情绪并影响人类的行为.我们通过一系列复杂的认知操作来处理音乐.因此,它可以成为了解高级大脑功能的窗口,也可以用作诊断和治疗工具.那么我们如何才能理解音乐唤起情感的方式并将其有效地用于 ...

  2. 基于EEG的脑机接口中的安全性问题

    目录 本分享为脑机学习者Rose整理发表于公众号:脑机接口社区 .QQ交流群:941473018 电子设备被攻击会带来非常严重的安全问题,尤其是医疗领域.当前的很多BCI设备应用于医疗领域.所以基于E ...

  3. 工程技术TOP期刊《Engineering》观点评述:基于脑电图的脑-机接口系统在实用化进程中面临的挑战...

    许敏鹏[a,b], 何峰[a,b,*], 钟子平 [a,b,c], 顾晓松[b,d], 明东[a,b,*] [a] Departmentof Biomedical Engineering, Colle ...

  4. 使用基于MI的脑机接口在Google Street View中进行实时导航

    本文提出了一种新的中级控制范式,在用户控制和效率之间提供了良好的平衡,适用于已知和未知的场景.本文在Google Street View®中设计了应用程序,为用户提供虚拟沉浸式体验. BCI导航的本质 ...

  5. 脑机接口可以控制机械臂

    卡内基梅隆大学的研究团队与明尼苏达大学合作,在无创机器人设备控制领域取得了突破.研究人员使用一种非侵入性的脑机接口(BCI),开发了有史以来首个成功的,由心理控制的机械臂,该机械臂具有连续跟踪和跟踪计 ...

  6. 猴脑主动脑控机械臂!中国完成首例非人灵长类动物介入式脑机接口试验

    来源:大数据文摘 脑机接口又出新闻了,只不过这次不是马斯克,而是中国. 根据北京日报报道,5月4日,由南开大学教授段峰团队牵头的团队成功在猴脑内实现了介入式脑机接口脑控机械臂,这也是全球首例非人灵长类 ...

  7. 深度学习下的脑机接口BCI究竟有多远?

    BCI | ECoG  | 脑机接口 LFP | CMRR | 生物计算 随着生命科学.医药研发.数据分析.数据挖掘.LFP.生物计算.靶点发现.基因测序等技术的快速发展,脑科学逐渐出现在人们的视野中 ...

  8. Cell:视觉错觉运动刺激的探索:基于EEG的实用辅助系统的脑机接口

    本文提出了一种基于视觉错觉运动刺激(illusory visual motion stimuli)的脑机接口(BCI),旨在使用提出的系统来增强运动想象(MI)的范式.由于运动想象需要较长时间的训练, ...

  9. 基于稳态视觉诱发电位(SSVEP)的中文拼写器脑机接口(BCI)对于应用于ALS患者

    点击上面"脑机接口社区"关注我们 更多技术干货第一时间送达 本研究将基于稳态视觉诱发电位(SSVEP)的脑-机接口(BCI)应用于肌萎缩性侧索硬化症(ALS)患者,并验证了其进行交 ...

最新文章

  1. php rabbmq教程_RabbitMQ+PHP 教程一(Hello World)
  2. Oracle中merge into的使用
  3. 3745路由器配置简单的dhcp server
  4. Linux进程管理工具的使用
  5. 个人博客系统的设计与实现_一款小而美的博客系统,专为程序员设计
  6. 演示: 动态NAT完成网络地址翻译
  7. Java基础11-封装(思想、访问权限、this、构造方法)
  8. webassembly类型_WebAssembly 现状与实战
  9. resin 配置 java_home_resin的安装与配置 - chencheng-linux的个人空间 - OSCHINA - 中文开源技术交流社区...
  10. ubuntu18.04新体验
  11. Visio 2013 永久激活,破解工具在win10下避免自动删除程序文件
  12. 概要设计文档和详细设计文档的关系
  13. 360全景倒车影像怎么看_360度全景倒车影像应该装么?告诉大家千万要冷静,一招对付所有...
  14. 报告:ICO项目2019年第一季度融资总额仅1.18亿美金,相较于2018年同比下降逾58倍...
  15. 【区块链】7 个步骤入门区块链
  16. Redis主从复制、Redis哨兵模式、Redis集群
  17. STM32F429 rtthread CAN总线
  18. 一级计算机word字处理教程,四川省计算机一级WORD字处理题库.doc
  19. python多线程下载视频_python 实现多线程下载视频的代码
  20. 为什么中国出不了Facebook和Twitter?

热门文章

  1. oracle:ORA-01940无法删除当前已连接用户的解决方案
  2. 使用supervisor支持Python3程序 (解决找不到Module的问题)
  3. 连接池你用对了吗?一次Unexpected end of stream异常的排查
  4. Bootstrap4 glyphicon 移除图标 glyphicon fonts-faces 解决方案
  5. 自定义HTTP标头:命名约定
  6. 如何在ActionScript 3中将“ Null”(真实的姓氏!)传递给SOAP Web服务
  7. 如何从当前Git工作树中删除本地(未跟踪)文件
  8. 面试题:css之品字布局?
  9. js进阶课程 12-9 jquery的事件对象event的方法有哪些?
  10. 我是如何将网站全站启用Https的?-记录博客安装配置SSL证书全过程