干货 | 双目摄像头实现手势识别，完美还原人体运动手势

一直想做一款手势识别的东西，用双目摄像头自己做过，识别不是很好且不稳定，对环境的要求也比较高，背景稍微复杂点，识别极其差！干扰也比较大。

后面选用了一块别家公司做的双目识别的传感器，可以直接识别手势。

不多BB，直接看视频先。

▲ 手指各个识别

从视频中，黑色的方形就是最关键的传感器—LeapMotion体感控制器

其他的都是比较简单的东西，机械臂部分、手掌部分、控制器、通信等。

基本设计思路：

在个人PC上装载好LeapMotion体感传感器的驱动，利用C#设计上位机，利用官方提供的SDK二次开发，将传感器的数据提出，之后通过USB传递给下位机，也就是控制机械臂和手掌的控制器。控制器得到数据后，按照其手势数据进行控制处理。当然在这过程中，不乏要对数据做一些滤波防干扰处理。

主要的设计难点有2个：

第一，LeapMotion的数据如何传递给下位机？即，如何利用官方SDK编写C#软件，这是个难点~

第二，在下位机得到手势运动数据后，手指的俯仰和手臂的俯仰是存在干扰，两者的俯仰会相互重叠。人眼能分清，但机器不清楚，程序如何去除即如何滤波此种干扰。

关于此手势识别的控制系统，有朋友感兴趣的话，可以自行搜索，大致了解。

由于篇幅有限，大致先介绍到这里。后面将会写一篇详细的技术方案介绍。感兴趣的朋友记得关注~

往期好文合集

//end

若觉得文章不错，转发分享，也是我们继续更新的动力。

5T资源大放送！包括但不限于：C/C++，Linux，Python，Java，PHP，人工智能，PCB、FPGA、DSP、labview、单片机、等等！

在公众号内回复「更多资源」，即可免费获取，期待你的关注~

长按识别图中二维码关注

干货 | 双目摄像头实现手势识别，完美还原人体运动手势相关推荐

CV之API：利用Face++的人体识别接口，实现摄像头实时手势识别
CV之API:利用Face++的人体识别接口,实现摄像头实时手势识别目录测试图片实现代码(部分) 测试图片实现代码(部分) #利用Face++的人体识别接口,实现摄像头实时手势识别 impor ...
双目摄像头和单目摄像头_挑战激光雷达，MAXIEYE要重新定义单目摄像头？
周圣砚认为:以往业内对单目摄像头的顾虑更像是一种偏见,并非不能逾越的鸿沟,而偏见正是用来打破的. 作者 | 安琪自动驾驶的"唯激光雷达论"正在受到冲击. 前不久恩智浦的全球CTO ...
小觅双目摄像头标准彩色版发布为移动机器人视觉导航避障优化设计
2019年1月15日, 小觅智能发布了其双目深度相机系列旗下全新产品小觅双目摄像头标准彩色版(简称标准彩色版,下同). 小觅双目摄像头标准彩色版(MYNT EYE S Color)依然沿用" ...
双目摄像头构建点云_构建一个体现性的社会代理或疯狂的网络摄像头远程购物车...
双目摄像头构建点云 As a remote worker I'm always looking to find better ways to work with the team that don't ...
使用opencv标定双目摄像头
在https://blog.csdn.net/weixin_39266208/article/details/120917840中,制作了一个9x12的棋盘图片,打印到A4纸上,每个格子长度22mm, ...
使用python-opencv对双目摄像头进行立体视觉图像矫正，去畸变
准备 1.一张棋盘图可以直接从opencv官方github下载,这是一个拥有10*7个格子的棋盘,共有9*6个角点,每个格子24mm,本文所使用的就是这一个棋盘.你需要将它打印在A4纸上用于后续使用 ...
python怎么让摄像头图像暂停然后在启动_双目摄像头测量距离
前言在计算机视觉中,可以通过双目摄像头实现,常用的有BM 算法和SGBM 算法等,双目测距跟激光不同,双目测距不需要激光光源,是人眼安全的,只需要摄像头,成本非常底,也用于应用到大多数的项目中.本章 ...
vins中imu融合_双目版 VINS 项目发布，小觅双目摄像头作为双目惯导相机被推荐...
继 VINS-Mono 和 VINS-Mobile 之后,香港科技大学沈劭劼老师实验室正式发布了双目版 VINS 开源项目 VINS-Fusion .项目推荐了小觅双目摄像头标准版(MYNT EYE ...
[Windows][C#][.NET][WPF]基于ArcFace2.0+红外双目摄像头的活体检测
废话不多说直接上图这个是demo中用到的双目摄像头,一个是红外的,一个是正常的rgb摄像头两个usb接口,在电脑上呈现两路摄像头通道程序检测RGB输出图像,当检测到有人脸时,用RGB人脸的位置 ...

干货 | 双目摄像头实现手势识别，完美还原人体运动手势

干货 | 双目摄像头实现手势识别，完美还原人体运动手势相关推荐

最新文章

热门文章