Python人脸检测实战之疲劳检测
本文主要介绍了实现疲劳检测:如果眼睛已经闭上了一段时间,我们会认为他们开始打瞌睡并发出警报来唤醒他们并引起他们的注意,感兴趣的朋友可以了解一下。
今天我们实现疲劳检测。 如果眼睛已经闭上了一段时间,我们会认为他们开始打瞌睡并发出警报来唤醒他们并引起他们的注意。我们测试一段视频来展示效果。同时代码中保留开启摄像头的的代码,取消注释即可使用。点击领取编程学习资料
使用 OpenCV 构建犯困检测器
要开始我们的实现,打开一个新文件,将其命名为 detect_drowsiness.py ,并插入以下代码:
1 2 3 4 5 6 7 8 9 10 11 12 |
|
导入们所需的 Python 包。
我们还需要 imutils 包,我的一系列计算机视觉和图像处理功能,以便更轻松地使用 OpenCV。
如果您的系统上还没有安装 imutils,您可以通过以下方式安装/升级 imutils:
1 |
|
还将导入 Thread 类,以便我们可以在与主线程不同的线程中播放我们的警报,以确保我们的脚本不会在警报响起时暂停执行。
为了真正播放我们的 WAV/MP3 闹钟,我们需要 playsound 库,这是一个纯 Python 的跨平台实现,用于播放简单的声音。
playsound 库可以通过 pip 方便地安装:
1 |
|
但是,如果您使用的是 macOS(就像我为这个项目所做的那样),您还需要安装 pyobjc,否则当您实际尝试播放声音时,您将收到与 AppKit 相关的错误:
1 |
|
接下来,我们需要定义 sound_alarm 函数,该函数播放音频文件:
1 2 3 |
|
定义 eye_aspect_ratio 函数,该函数用于计算垂直眼睛界标之间的距离与水平眼睛界标之间的距离之比:
1 2 3 4 5 6 7 8 9 10 11 12 |
|
由于OpenCV不能直接绘制中文,我们还需定义绘制中文的方法:
1 2 3 4 5 6 7 8 9 10 11 12 |
|
接下来,定义命令行参数:
1 2 3 4 5 6 7 8 9 10 11 |
|
犯困检测器需要一个命令行参数,后跟两个可选参数,每个参数的详细信息如下:
–shape-predictor :这是 dlib 的预训练面部标志检测器的路径。 您可以使用本博文底部的“下载”部分将检测器和本教程的源代码一起下载。
–video:视频文件。本文用视频文件测试。
–alarm :您可以在此处选择指定要用作警报的输入音频文件的路径。
–webcam :此整数控制内置网络摄像头/USB 摄像头的索引。
定义了命令行参数,我们还需要定义几个重要的变量:
1 2 3 4 5 6 7 8 9 10 |
|
定义了 EYE_AR_THRESH。如果眼睛纵横比低于此阈值,我们将开始计算人闭上眼睛的帧数。
如果该人闭上眼睛的帧数超过 EYE_AR_CONSEC_FRAMES,我们将发出警报。
在实验中,我发现 0.3 的 EYE_AR_THRESH 在各种情况下都能很好地工作(尽管您可能需要为自己的应用程序自己调整它)。
我还将 EYE_AR_CONSEC_FRAMES 设置为 48 ,这意味着如果一个人连续闭眼 48 帧,我们将播放警报声。
您可以通过降低 EYE_AR_CONSEC_FRAMES 来使疲劳检测器更敏感——同样,您可以通过增加它来降低疲劳检测器的敏感度。
定义了 COUNTER,即眼睛纵横比低于 EYE_AR_THRESH 的连续帧的总数。
如果 COUNTER 超过 EYE_AR_CONSEC_FRAMES ,那么我们将更新布尔值 ALARM_ON。
dlib 库附带了一个基于定向梯度的人脸检测器的直方图以及一个人脸地标预测器——我们在以下代码块中实例化了这两个:
1 2 3 4 5 |
|
dlib 产生的面部标志是一个可索引的列表,见下图:
因此,要从一组面部标志中提取眼睛区域,我们只需要知道正确的数组切片索引:
1 2 3 4 |
|
使用这些索引,我们将能够通过数组切片轻松提取眼睛区域。
我们现在准备启动我们的睡意检测器的核心:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 |
|
实例化 VideoStream。
暂停一秒钟,让相机传感器预热。
开始遍历视频流中的帧。
读取下一帧,然后我们通过将其大小调整为 450 像素的宽度并将其转换为灰度进行预处理。
应用 dlib 的人脸检测器来查找和定位图像中的人脸。
下一步是应用面部标志检测来定位面部的每个重要区域:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 |
|
循环遍历检测到的每个人脸——在我们的实现中(特别与司机睡意有关),我们假设只有一张脸——司机——但我把这个 for 循环留在这里以防万一你想应用多张脸视频的技术。
对于每个检测到的人脸,我们应用 dlib 的面部标志检测器并将结果转换为 NumPy 数组。
使用 NumPy 数组切片,我们可以分别提取左眼和右眼的 (x, y) 坐标。
给定双眼的 (x, y) 坐标,我们然后计算它们的眼睛纵横比。
Soukupová 和 Čech 建议将两个眼睛的纵横比平均在一起以获得更好的估计。
然后,我们可以使用下面的 cv2.drawContours 函数可视化框架上的每个眼睛区域——这在我们尝试调试脚本并希望确保正确检测和定位眼睛时通常很有帮助:
1 2 3 4 5 6 |
|
最后,我们现在准备检查视频流中的人是否出现犯困的症状:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 |
|
检查眼睛纵横比是否低于“眨眼/闭合”眼睛阈值 EYE_AR_THRESH 。
如果是,我们增加 COUNTER ,即该人闭上眼睛的连续帧总数。
如果 COUNTER 超过 EYE_AR_CONSEC_FRAMES,那么我们假设此人开始打瞌睡。
进行了另一次检查,以查看警报是否已打开——如果没有,我们将其打开。
处理播放警报声音,前提是在执行脚本时提供了 --alarm 路径。我们特别注意创建一个单独的线程来负责调用 sound_alarm 以确保我们的主程序在声音播放完毕之前不会被阻塞。
绘制文本 DROWSINESS ALERT!在我们的框架上——同样,这通常有助于调试,尤其是当您不使用 playsound 库时。
最后,第 136-138 行处理眼睛纵横比大于 EYE_AR_THRESH 的情况,表示眼睛是睁开的。如果眼睛是睁开的,我们重置计数器并确保警报关闭。
我们的睡意检测器中的最后一个代码块处理将输出帧显示到我们的屏幕上:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 |
|
到这里编码完成!!!
测试疲劳检测器
运行指令:
1 |
|
运行结果:
检测到打瞌睡就会发出提示,并将提醒打印在视频上面
以上就是Python人脸检测实战之疲劳检测的详细内容。感谢关注,为你们准备了编程学习的一套资料,还有相应的代码,视频教程都可以获取,添加Q裙703046414即可获取。
Python人脸检测实战之疲劳检测相关推荐
- Python基于OpenCV的实时疲劳检测[源码&演示视频&部署教程]
1.图片演示 2.视频演示 [项目分享]Python基于OpenCV的实时疲劳检测[源码&演示视频&部署教程]_哔哩哔哩_bilibili 3.检测方法 1)方法 与用于计算眨眼的传统 ...
- 使用face_recognition:摄像头实时给人脸打马赛克、疲劳检测、活体检测(张嘴检测)、计算两张人脸之间的相似度、人脸校准
日萌社 人工智能AI:Keras PyTorch MXNet TensorFlow PaddlePaddle 深度学习实战(不定时更新) 使用face_recognition进行摄像头实时给人脸打马赛 ...
- 基于Matlab平台人脸面部表情识别的疲劳检测
基于面部特征识别的疲劳检测系统设计 1.研究背景与意义 -疲劳检测在现实生活中具有很大的意义和实用价值,也是一个值 得进一步完善研究的课题. 研究目标 本设计目标在于利用Matlab强大的图像 处理能 ...
- 【目标检测实战】目标检测实战之一--手把手教你LMDB格式数据集制作!
文章目录 1 目标检测简介 2 lmdb数据制作 2.1 VOC数据制作 2.2 lmdb文件生成 lmdb格式的数据是在使用caffe进行目标检测或分类时,使用的一种数据格式.这里我主要以目标检测为 ...
- Python | 人脸识别系统 — 活体检测
本博客为人脸识别系统的活体检测代码解释 人脸识别系统博客汇总:人脸识别系统-博客索引 项目GitHub地址:Su-Face-Recognition: A face recognition for us ...
- Python | 人脸识别系统(人脸识别、活体检测、背景模糊、关键点检测)
本博客为人脸识别系统项目简介 项目GitHub完整源代码地址:Su-Face-Recognition: A face recognition for user logining 一.运行环境 本系统能 ...
- 基于MATLAB的疲劳检测系统
基于MATLAB的疲劳检测系统 一.课题介绍 随着汽车工业的不断发展,随之而来的社会问题也愈加严重.交通事故给人们造成巨大伤害的同时,也给社会带来沉重的负担和影响.由于疲劳驾驶是引起交通事故的一个主要 ...
- 疲劳检测-眼睛,嘴巴
疲劳检测 EYE_AR_THRESH是眼睛的长宽比的阈值表示眨眼的阈值,我们默认它的值为 0.3,如果眼睛的长宽比小于了0.3则表示眨眼 EYE_AR_CONSEC_FRAMES常数:眼睛连续闭合的帧 ...
- 找不到opencv_world310.lib OpenCv 一次配置永久使用 基于OpenCv4.0 于仕琪算法 dlib的疲劳检测
第1次写博客 格式啥的还不是很好,前期配置了OpenCv4.0,然后因为OpenCv自身的人脸检测功能速度相比于仕琪老师自己写的库而言更慢一点,然后又配置了一下于仕琪老师的库.最后基本实现了人脸检测的 ...
- Python | 人脸识别系统 — 用户操作
本博客为人脸识别系统的摄像头画面展示代码解释 人脸识别系统博客汇总:人脸识别系统-博客索引 项目GitHub地址:Su-Face-Recognition: A face recognition for ...
最新文章
- 20165302第八周总结
- 使用优雅方式对参数验证进行处理
- python3.6.4安装教程-Python3.6.4官方版
- HLS-搭建Nginx流媒体服务器
- 【附10】kibana创建新的index patterns
- 数据结构与算法之顺序队列
- 计算机组成原理 唐朔飞 思维导图
- 怎么用计算机测试手速,魔兽争霸apm测试器-请问怎样测试自己的手速?(APM)需要专门 – 手机爱问...
- 硅谷之行 (21) 加州的天空
- 为什么4个反斜杠(\)输出1个反斜杠(\)?
- 【附白皮书下载】制造业数字化转型专家黄正杰:设备健康如何管理?
- 使用Struts2 开发一个简易的《B2C电子商务网站》 。续集(适合新手)
- 为什么程序员适合做自由职业者
- 经纬恒润天津研发总部项目开工奠基仪式圆满落幕
- 不要凡事在天,守株待兔
- 教师计算机基础知识培训简报,信息技术能力提升培训简报.doc
- 计算机网络第9章 无线网络和移动网络
- 免费制作证件照、一键换背景底色,不会PS也能轻松搞定各种证件照!
- 欧盟将启动超40亿欧元投资,提升数字经济领域竞争力
- 「津津乐道播客」#387 津津有味:挑食不是病,想治挑食才是病