‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍

最近,在建筑工地上开始出现了协作机器人的使用。由于大多数机器人不是完全自动化的并且需要某种控制机制,因此将机器人融入到人类主导的环境中可能引发安全问题。

在实际的一些场景中,比如工人需要机器人的协助但无法用双手来操控机器人,此时传统的控制系统可能无法达到要求。脑机接口(BCI)可以提供这种无需用手的可控性。

宾夕法尼亚州立大学(Pennsylvania State University)的研究人员提出了一种基于BCI的机器人远程控制系统,该系统通过连续采集可穿戴式脑电图(EEG)设备中工人的脑电波,并以90%的准确率将其解释为机器人指令。研究结果表明,该系统有望提高机器人在危险作业中的控制能力。

BCI机器人控制系统的成功研究应用证明了该技术在增强工人与机器人之间以人为主导的通信(控制)方面的潜力。这样的技术可以在没有物理交互的情况下,无需用手就能实现对机器人的控制。这种集成的范围可以提高建筑任务中的生产率以及在安全问题上对机器人性能进行提高。

它可以帮助工人需要手来执行即将发生的动作的场景,例如抓住未完成的建筑物的框架以获得更好的稳定性,或者执行需要双手的灵巧任务。在这些情况下,可以将BCI系统作为“第三只手”来实施,以放松物理限制并提高生产率。

这类场景的一个例子是,一名工人控制UGV机器人将急需的设备/材料运送到预定的位置,可能是在高海拔,,而同一工人在施工任务(例如执行砌筑)期间正在积极使用双手的情况。任务)。通过对比图1-A所示的基于BCI的场景和正常场景以及单个bondB,可以看到潜在的生产率提高。

图1 A:基于MI-BCI的机器人在建筑材料交付过程中控制技术的潜在应用;

B:手工交付建筑材料;C:基于MI-BCI的技术在远程避免意外事故方面的潜在应用。

此外,如果工作人员在事故发生前捕捉到的脑电图信号能够准确地转换为机器人的动作,MI-BCI方法可以在机器人系统中实现远程停止。此功能对于赋予机器人控制系统更高的安全级别特别有用,甚至在工人点击物理停止按钮之前就启动远程安全停止命令的传输。通过这种方式,控制系统利用“包含”工人意图的EEG信号来避免可能的事故,如被机器人撞击,这可以显着提高复杂和不受控制的建筑环境中机器人应用的安全性和可靠性。图1-C可视化了这种在未来建筑工地的潜在应用。

图1-C BCI在未来建筑工地的潜在应用

系统框架

研究人员所提出的BCI系统分为两个阶段,即离线训练(阶段1)和在线机器人操纵(阶段2)。在阶段1中,研究者通过在离线设置中应用集成算法来开发机器人命令的预测模型。集成算法旨在通过使用多个分类器来提高预测模型在生成正确命令中的准确性。在阶段2中,研究人员设计了两个子系统并将其集成到他们提出的机器人控制系统中,分别是机器人命令生成子系统和机器人控制子系统。前者旨在根据工人的运动想象诱发的脑电信号的预测集成模型结果创建机器人命令。同时设计了基于动力学函数的机器人控制系统,对所传输的指令进行评估和执行。

图2 BCI机器人控制系统概述

机器人控制系统的整个体系结构是基于机器人操作系统(ROS)构建的,其中集中式工作站可以迅速操作这些过程来控制UGV机器人。

离线过程

下图展示了用于训练集成分类器的主要离线过程。

图3.生成集成分类器的离线训练过程。

A:去除伪影前后的脑电信号;

B:BCI的滤波器组和常见的空间模式特征;

C:整体分类器的总体训练过程。

MI任务包括三个连续的时间间隔、注视交叉、视觉提示和运动想象(图7)。在第一个时间间隔中,十字准线显示在监视器的中央。此步骤旨在减少所有受试者数据收集的不一致性。在暂停2秒后,选择与三个想象动作(右箭头、左箭头和停止图像)中的一个对应的视觉符号,并在1.5秒内显示给被试。这一步的目的是诱导每个受试者的视觉干预。在最后的运动想象阶段,被试被要求对视觉符号活动进行4秒的想象(向左或向右运动和双脚站立)。

运动想象实验流程案例

在MI任务中,通过使用一个现成的可穿戴式脑电图耳机(Emotiv Flex)来收集脑波,该耳机具有32个内置通道。采集信号的采样率为128,信号分辨率为14位,连通性为2.4 GHz(图8-C和-D)。在每个试验中,将根据相应的会话自动标记收集的EEG信号。因此,对于向左移动、向右移动和停止会话,分别标记−1、+1和0。

图8. A:基于BCI的机器人控制任务的实验场景;B:基于BCI的机器人控制任务的布局;C:可穿戴式EEG  D:配置32通道脑电图设备;E:执行砌体任务时对象的控制场景;G:右控制(RC)任务场景;左控制(LC)任务场景;远程安全停止(RSS)任务场景。

总结

研究人员在本项研究中提出了一种基于BCI的机器人远程控制系统,该系统通过连续采集可穿戴式脑电图(EEG)设备中工人的脑电波,并以90%的准确率将其解释为机器人指令。研究结果表明,该系统有望提高机器人在危险作业中的控制能力。

这项研究提出了许多需要进一步研究的问题。其中之一是确定是否可以检查更精细的BCI机器人控制,如控制UGV机器人的速度或机械臂的运动来提升和放置物体。利用颅内记录解码运动学运动参数可以实现更精细的机器人控制。

论文信息:

Brain-computer interface for hands-free teleoperation of construction robots

版权声明:编译作者:邹思

文章仅用于学术交流,不用于商业行为,

若有侵权及疑问,请后台留言,管理员即时删侵!

更多阅读

超越马斯克!脑机AR头显即将面世:不用开颅,也能意念操控

脑与脑相互关联?王益文教授课题组综述“人类互动脑-脑耦合的计算方法”

精彩长文 | 脑机接口技术的现状与未来!

通俗讲解机器学习!

用于情绪识别的生物信号数据集汇总

共享脑影像数据?来中国科学院脑影像数据共享平台!

运动想象脑机接口中模式识别方法研究

基于深度学习网络的运动想象BCI系统及其应用

你的每一次在看,我都很在意!

当脑机接口应用于建筑工地,会发生什么?相关推荐

  1. 基于脑功率谱检测飞行过程认知网络的脑机接口

    飞行员的疲劳驾驶会导致严重的事故,尤其是在大型飞行任务中.目前还没有一种有效的手段去监测飞行过程飞行员大脑的疲劳状态. 飞行员在驾驶过程中,主要有4个认知状态发生变化的阶段, 1.起飞和下降过程中,飞 ...

  2. 为什么华为200万招聘AI博士,马斯克却推出脑机接口对抗AI?

    作者 | 伍杏玲 来源 | CSDN(ID:CSDNnews) 7 月,华为一则薪资通知刷爆朋友圈:华为给8位博士应届生给予 89.6 万至 201 万的年薪.其中薪资最高的两位博士均研究人工智能相关 ...

  3. 脑机综述(一) | 脑机接口在康复医学中的应用进展

    来源:<中国康复医学>杂志 .臻泰智能 论文<脑机接口在康复医学中的应用进展> 琚芬1,赵晨光1,袁华1,牟翔1,王冰水2 [关键词] 脑机接口:运动功能:康复 [基金项目]国 ...

  4. 这一次,脑机接口可以实时读取人类脑中画面了?

    来源:机器之心 由俄罗斯脑机接口公司 Neurobotics.莫斯科物理技术学院(MIPT)研发的一种全新脑机接口算法最近被公之于众,它可以利用人工神经网络和脑电图将人类大脑中的图像实时显示在计算机屏 ...

  5. 清华大学医学院张明君团队招聘脑机接口与微纳医学交叉领域博士后

    清华大学医学院张明君团队招聘博士后 课题组简介 本实验室瞄准于脑机接口与微纳医学的交叉领域,探索借助生物兼容纳米材料.微纳机器人技术.多模态信号分析及控制理论, 发展长效微/非侵入脑机接口技术与神经交 ...

  6. 你知道吗?脑机接口训练会对大脑物质结构和功能产生影响

    ‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍‍ 脑机接口(BCI)的工作原理是,大脑可以通过想象或思考执行一项任务时,脑电活动就会发生可测量的变化.脑电活动产生的信号可以被脑电图(EEG)读取.评估,然后通 ...

  7. 清华大学微纳脑机接口与机器人实验室:微纳系统机械设计研发工程师招聘

    点击上面"脑机接口社区"关注我们 更多技术干货第一时间送达 清华大学医学院生物医学工程系 微纳脑机接口与机器人实验室 微纳系统机械设计研发工程师招聘启事 实验室简介 本实验室致力于 ...

  8. 清华大学微纳脑机接口与机器人实验室:生物材料研发工程师招聘

    点击上面"脑机接口社区"关注我们 更多技术干货第一时间送达 清华大学医学院生物医学工程系 微纳脑机接口与机器人实验室 生物材料研发工程师招聘启事 实验室简介 本实验室致力于微纳机器 ...

  9. 脑机接口和卷积神经网络的初学指南(一)

    脑机接口和卷积神经网络的初学指南分为两部分,第一部分主要介绍脑机接口和AI +研究论文的概貌:第二部分主要深入解释神经网络与BCI的结合 本篇是第一部分,介绍脑机接口和AI+研究论文的概貌. 大脑能否 ...

最新文章

  1. Log4J配置方式Java工程测试
  2. 胡秀光谋定邦源粮食银行-·万祥军:“互联网+”农业大健康
  3. ScheduledThreadPoolExecutor定时任务线程池执行原理分析
  4. 【深度学习】PyTorch深度学习训练可视化工具visdom
  5. QT的QCategoryAxis类的使用
  6. java memcache 队列_基于memcache的java分布式队列实现。
  7. 手机百度输入法的用户体验
  8. 【Python】Matplotlib绘制正余弦曲面图
  9. 不能随意切换的Tab选项卡页面
  10. 计算机表格中格式隐藏了怎么办,excel表格第一列被隐藏起来了怎么办
  11. 机器学习——PCA(主成分分析)与人脸识别
  12. dede标签属性(转载)
  13. 万由nas系统安装MySQL_【不折腾】VM虚拟机安装体验万由U-NAS系统
  14. 律师查询微信实名认证信息之操作指引
  15. python实现流媒体相关示例
  16. Logback:同时按照日期和大小分割日志(最新日志可以不带日期或数字)
  17. ps4 html5转换器,PS4键鼠转换器评测XIM4 主机FPS的福音(X1通用)
  18. 人工智能助力新零售,无人售货柜降至6000元
  19. java中的path是什么_什么是java path环境变量
  20. ECShop开源网店系统的代码写的怎么样?

热门文章

  1. IDEA maven项目查自动查看依赖关系,解决包冲突问题
  2. XML解析文件出错解决方法
  3. java.net.BindException: Address already in use: 解决方法
  4. * ngIf和* ngFor在同一元素上导致错误
  5. 如何使用jQuery按名称选择元素?
  6. 如何大写字符串中每个单词的第一个字符
  7. 如何在Java中解析命令行参数?
  8. 获取PHP中的完整URL
  9. 框架和库有什么区别? [关闭]
  10. 如何检查Bash中是否设置了变量?