目前驾驶员监测提到的不多,主要是厂商不想强调对用户的检测,有侵犯隐私的嫌疑,目前驾驶员监测主要功能有:驾驶员的身份识别、驾驶员疲劳监测以及危险驾驶行为识别。

主要的视觉线索包括面部特征、手特征或身体特征。许多检测系统仅使用单个视觉线索,这种系统鲁棒性差,比如出现遮挡或光照变化时,容易被干扰。所以将多种视觉线索组合才是关键,也是具有挑战性的。

1. 面部特征。

一个驾驶员面部监控系统是基于驾驶员面部图像处理来研究驾驶员身心状况的实时系统。可以从眼睑闭合、眨眼、凝视方向、打哈欠和头部运动等,检测到驾驶员状态。基本分成两大类:

  1. 仅从眼部区域检测驾驶员;
  2. 不仅可以从眼睛中检测,还可以从脸部和头部的其他区域检测。

检测人脸,还有眼睛和其他脸部特征,同时跟踪变化,提取症状,实现疲劳和分心检测。人脸检测已经研究了很多年,非常成熟了,眼睛和脸部其他位置也有对应的网络实现。下图,每个关键点的位置都可以提取出来。

瞌睡状态可以通过眼睛周围的点上下移动或头部的方向来检测;包括向上,向右倾斜等。

DMS中的驾驶员面部随着视觉算法不断收集和分析关键的面部标记,基于深度学习模型的人脸表情识别系统,输出驾驶员状态的感知指标越准确,如警惕程度,疲劳,注意力分散,视觉聚焦区域等。

而整个深度学习模型是CNN和LSTM结合,从而利用前后帧的信息:

2. 身体姿势。

识别驾驶员分心症状的系统。其症状类包括:喝酒,调整收音机,正确姿势驾驶,摆弄头发或化妆品,面向后面,与乘客交谈,用左手打手机通话,用右手打手机通话,用左手发短信, 用右手发短信。

系统的算法框图如图:包括面部检测器、手部检测器和皮肤区域分割。对于每个输出图像(即皮肤,面部,手),训练AlexNet和InceptionV3网络(5个AlexNet和5个InceptionV3),最后识别是一个加权组合输出。

自动驾驶(三十)---------驾驶员监测相关推荐

  1. 吴甘沙创业照见自动驾驶十年变迁,产业爆发在下一个春天里 | 自动驾驶这十年...

    个人创业照见自动驾驶十年变迁. 效力英特尔16年.三发创业之心最终"出走"人工智能,吴甘沙的创业故事已经被说得太多.而他所领衔创立的驭势科技,继2017年完成国内首个自动驾驶商业运 ...

  2. 智行者王肖:自动驾驶本质在于对待数据的态度、获取及应用方式 | 自动驾驶这十年...

    雷锋网(公众号:雷锋网)按:回头看,第一届DARPA自动驾驶挑战赛已经是十年前的事了.对比互联网产业,十年前手机还没有支付业务,而现在支付宝.微信已经全面改变了人们的消费习惯.反观汽车产业,尤其是自动 ...

  3. 智行者王肖:自动驾驶本质在于对待数据的态度、获取及应用方式 | 自动驾驶这十年... 1

    雷锋网(公众号:雷锋网)按:回头看,第一届DARPA自动驾驶挑战赛已经是十年前的事了.对比互联网产业,十年前手机还没有支付业务,而现在支付宝.微信已经全面改变了人们的消费习惯.反观汽车产业,尤其是自动 ...

  4. 眼图matlab仿真_MATLAB开发自动驾驶第二十课-自动驾驶场景设计器中的预建驾驶场景...

    自动驾驶场景设计应用提供了一个代表常见驾驶动作的预建场景库.该应用还包括代表欧洲新车评估计划(Euro NCAP)测试协议的场景,以及3D仿真环境中使用的预建场景的3D版本. 选择一个预建场景 要开始 ...

  5. 自动驾驶(十四)---------车道线检测

    目前车道线检测主要有两种方法:传统方法,深度学习,本文主要从传统方法出发来介绍车道线检测,毕竟Mobileye也没有用到太多的深度学习(以前和Moblieye有交流). 再者,一直以来我们传统汽车行业 ...

  6. matlab 定义string_MATLAB开发自动驾驶第十课-创建用于加载自定义地面真值数据源的类...

    在Ground Truth Labeler应用中,可以对来自图像和点云数据源的信号进行标记.这些数据源包括视频.图像序列.点云序列.Velodyne 数据包捕获.视频.图像和点云数据. (PCAP)文 ...

  7. 自动驾驶年度激辩:量产由三要素驱动,本质是数据的军备竞赛 | MEET2022

    编辑部 整理自 MEET 2022 量子位 | 公众号 QbitAI "AI在自动驾驶上是应用科学,除了一些核心算法的开发,70%是智能驾驶工程化."" "特斯 ...

  8. 第六十八篇:从ADAS到自动驾驶(一):自动驾驶发展及分级

    作者:liaojiacai     邮箱: ljc_v2x_adas@foxmail.com 从ADAS到自动驾驶(一):自动驾驶的发展及分级 从今天起,我将根据自己所接触的ADAS和无人驾驶技术,来 ...

  9. 自动驾驶汽车想成为主流?先过了这十二关再说

    自动驾驶汽车已经成了整个汽车行业的掌上明珠,未来这些汽车有可能影响我们每个人的生活. 在有些人看来,这项技术只不过是交通进化历程中新迈出的一步而已,毕竟已经有人在控制操纵杆玩"飞行汽车&qu ...

  10. 适用于高级别自动驾驶的驾驶员可预见误用仿真测试

    摘要 借助高级别自动驾驶(HAD),驾驶员可以从事与驾驶无关的任务.在系统出现失效的情况下,驾驶员应该合理地重新获得对自动驾驶车辆(AV)的控制.不正确的系统理解可能会引起驾驶员的误操作,并可能导致车 ...

最新文章

  1. java编程器答疑z湖南岚鸿,吐血整理
  2. C++中vector的capacity和size的区别
  3. 石油化工静设备计算机辅助设计桌面系统,PV Desktop 石油化工静设备计算机辅助设计桌面系统简介...
  4. 微软最强命令行工具 Windows Terminal,强势霸榜GitHub
  5. mysql zerofill设置方法_在MySQL中使用ZEROFILL设置自定义自动增量
  6. 自主知识产权 曙光龙芯3号服务器将面市
  7. adb驱动和adb工具官方下载链接
  8. List集合去重方式及效率对比
  9. 【CF #807 Div2】A-D
  10. 读书百客:《白马篇》赏析一
  11. 考HCIE大概需要多少钱?
  12. 如何在CAD中修复CAD图纸
  13. dubbo系列三、 服务发现RegistryDirectory
  14. php 微信红包开发代码,PHP 生成微信红包代码简单
  15. 多图详解:如何不停服分库分表
  16. 51.性能调优之广播大变量
  17. 朗强:会议控制系统设备信号hdmi传输器有哪些
  18. P1428小鱼比可爱-C++编程解析-数组
  19. C语言基础入门学习笔记
  20. 永磁同步电机pmsm 双闭环foc控制系统 双pi调节 一共三个pi模块调参方式为ti的方法

热门文章

  1. 计算机教师师徒结对师傅总结,师徒结对师傅小结
  2. el-transfer 用法
  3. 查看网卡信息中qdisc和pfifo _fast是什么
  4. Unity面试经验(两天面六家,四个offer,济南)
  5. 钙钛矿型复合氧化物高熵陶瓷/过渡金属碳氮化物高熵陶瓷/固体氧化物燃料电池(SOFC)材料
  6. (转)零基础入门--中文命名实体识别
  7. graphpad如何检测方差齐_SPSS和GraphPad如何比较组内和组间差异「杏花开生物医药统计」...
  8. 剑指 Offer 31-40
  9. 改进蚁群算法 改进flod算法对路径进行双向平滑度优化,提高路径的平滑度
  10. APP+springboot订餐APP 毕业设计源码190711