【计算机视觉】深度相机(一)--TOF总结
1.1 TOF初探
TOF是Time of flight的简写,直译为飞行时间的意思。所谓飞行时间法3D成像,是通过给目标连续发送光脉冲,然后用传感器接收从物体返回的光,通过探测光脉冲的飞行(往返)时间来得到目标物距离。这种技术跟3D激光传感器原理基本类似,只不过3D激光传感器是逐点扫描,而TOF相机则是同时得到整幅图像的深度信息。TOF相机与普通机器视觉成像过程也有类似之处,都是由光源、光学部件、传感器、控制电路以及处理电路等几部单元组成。与同属于非侵入式三维探测、适用领域非常类似的双目测量系统相比,TOF相机具有根本不同3D成像机理。双目立体测量通过左右立体像对匹配后,再经过三角测量法来进行立体探测,而TOF相机是通过入、反射光探测来获取的目标距离获取。
TOF技术采用主动光探测方式,与一般光照需求不一样的是,TOF照射单元的目的不是照明,而是利用入射光信号与反射光信号的变化来进行距离测量,所以,TOF的照射单元都是对光进行高频调制之后再进行发射,比如下图所示的采用LED或激光二极管发射的脉冲光,脉冲可达到100MHz。与普通相机类似,TOF相机芯片前端需要一个搜集光线的镜头。不过与普通光学镜头不同的是这里需要加一个带通滤光片来保证只有与照明光源波长相同的光才能进入。同时由于光学成像系统具有透视效果,不同距离的场景为各个不同直径的同心球面,而非平行平面,所以在实际使用时,需要后续处理单元对这个误差进行校正。作为TOF的相机的核心,TOF芯片每一个像元对入射光往返相机与物体之间的相位分别进行纪录。该传感器结构与普通图像传感器类似,但比图像传感器更复杂,它包含2个或者更多快门,用来在不同时间采样反射光线。因为这种原因,TOF芯片像素比一般图像传感器像素尺寸要大得多,一般100um左右。照射单元和TOF传感器都需要高速信号控制,这样才能达到高的深度测量精度。比如,照射光与TOF传感器之间同步信号发生10ps的偏移,就相当于1.5mm的位移。而当前的CPU 可到3GHz,相应得时钟周期是300ps,则相应得深度分辨率为45mm。运算单元主要是完成数据校正和计算工作,通过计算入射光与反射光相对相移关系,即可求取距离信息。
TOF的优势:与立体相机或三角测量系统比,TOF相机体积小巧,跟一般相机大小相去无几,非常适合于一些需要轻便、小体积相机的场合。TOF相机能够实时快速的计算深度信息,达到几十到100fps。TOF的深度信息。而双目立体相机需要用到复杂的相关性算法,处理速度较慢。TOF的深度计算不受物体表面灰度和特征影响,可以非常准确的进行三维探测。而双目立体相机则需要目标具有良好的特征变化,否则会无法进行深度计算。TOF的深度计算精度不随距离改变而变化,基本能稳定在cm级,这对于一些大范围运动的应用场合非常有意义。
1.2 TOF研究机构
<1> Dynamic 3D Vision (2006-2010):
研究领域:多芯片2D/3D传感器, 动态场景重建, 目标位置识别和光场计算
官网:www.zess.uni-siegen.de/pmd-home/dyn3d
<2>ARTTS (2007-2010):
全称:“Action Recognition and Tracking based on Time-of-Flight Sensors”
官网:http://www.artts.eu
研究领域:开发更加小型更加便宜的新一代TOF相机;将HDTV与TOF技术相结合(iii) 基于动作跟踪和识别算法的多模式接口和交互系统
<3>Lynkeus (2006-2009):
官网:www.lynkeus-3d.de
研究领域:致力于工业应用领域的高分辨率和鲁棒性的TOF传感器,例如自动化和机器人导航
<4>3D4YOU(2008-2010):
官网:www.3d4you.eu
研究领域: 构建3D-TV产品线,从3电影中实时获取点云数据并且转换为3D显示到家庭电视中3D4YOU 应用ToF range cameras初始化估计多个高清晰度相机的深度以及初始化计算3D场景图像的深度。
<5>MOSES(2008-2012):
全称:“Multi-Modal Sensor Systems for Environmental Ex-ploration (MOSES)”
研究领域:基于传感器的多方面的应用,包括基于TOF的人机接口和多传感器融合
官网:www.zess.uni-siegen.de/ipp_home/moses
1.3 TOF之应用领域
TOF 相机目前的主要应用领域包括:
<1> 物流行业:通过 TOF 相机迅速获得包裹的抛重(即体积),来优化装箱和进行运费评估;
<2> 安防和监控:
进行 Peoplecounting 确定进入人数不超过上限;
通过对人流或复杂交通系统的counting,实现对安防系统的统计分析设计;
敏感地区的检测对象监视;
<3> 机器视觉:工业定位、工业引导和体积预估;
替代工位上占用大量空间的、基于红外光进行安全生产控制的设备;
<4> 机器人:
在自动驾驶领域提供更好的避障信息;
机器人在安装、质量控制、原料拣选应用上的引导;
<5>医疗和生物:足部矫形建模、病人活动/状态监控、手术辅助、面部3D 识别;
<6>互动娱乐:动作姿势探测、表情识别、娱乐广告
1.4TOF相机特点
<1>优点:
1.相对二维图像,可通过距离信息获取物体之间更加丰富的位置关系,即
区分前景与后景;
2.深度信息依旧可以完成对目标图像的分割、标记、识别、跟踪等传统应用;
3.经过进一步深化处理,可以完成三维建模等应用;
4.能够快速完成对目标的识别与追踪;
5.主要配件成本相对低廉,包括CCD和普通 LED 等,对今后的普及化生产及使用有利;
6.借助 CMOS 的特性,可获取大量数据及信息,对复杂物体的姿态判断极为有效;
7.无需扫描设备辅助工作
<2>缺点:
1.相对于普通数码相机,其造价仍然偏高,影响该产品目前的普及使用率;
2.相机本身仍然受到硬件发展的限制,更新换代速度较快;
3.测量距离较常规测量仪器短,一般不超过 10 米;
4.测量结果受被测物性质的影响;
5.大多数机器的测量结果受外界环境干扰较为明显,尤其是受外界光源干扰;
6.分辨率相对较低,本文研究的 PMD Camcube 2.0 型号相机,为目前分辨率最高的 3D 相机,其分辨率仅为 204×204像素(这个信息比较老了。没有实际意义);
7. 系统误差及随机误差对结果影响明显,需要进行后期数据处理。
2 深度相机比较
官网:http://www.fotonic.com/content/Company/Default.aspx
2.1 MESA系列介绍
2.2 PMD Tec系列
PMDTec 公司网址:http://www.pmdtec.com/
PMDTec Wiki:http://en.wikipedia.org/wiki/PMDTechnologies
2.4 primeSense
http://labs.manctl.com/rgbdemo/index.php/Main/Download RGBD标定 ,必看!!
http://www.ee.oulu.fi/~dherrera/kinect/ 最重要!!!
http://nicolas.burrus.name/index.php/Research/KinectCalibration ToF 标定
http://www.cnblogs.com/TracePlus/p/4136297.html
Kinect v1是采用结构光方案,Kinect v2采用TOF方案。
Kinect v1和Kinect v2预览版的传感器的配置比较在表1显示。
Kinect v1 | Kinect v2预览版 | ||
---|---|---|---|
颜色(Color) | 分辨率(Resolution) | 640×480 | 1920×1080 |
fps | 30fps | 30fps | |
深度(Depth) | 分辨率(Resolution) | 320×240 | 512×424 |
fps | 30fps | 30fps | |
人物数量(Player) | 6人 | 6人 | |
人物姿势(Skeleton) | 2人 | 6人 | |
関節(Joint) | 20関節/人 | 25関節/人 | |
手的開閉状態(Hand State) | △(Developer Toolkit) | ○(SDK) | |
检测範囲(Range of Detection) | 0.8~4.0m | 0.5~4.5m | |
角度(Angle)(Depth) | 水平(Horizontal) | 57度 | 70度 |
垂直(Vertical) | 43度 | 60度 | |
(Tilt Motor) | ○ | ×(手動) | |
複数的App | ×(単一的App) | ○ |
转载于:https://www.cnblogs.com/huty/p/8517687.html
【计算机视觉】深度相机(一)--TOF总结相关推荐
- 深度相机之TOF原理详解
/*************************************************************************************************** ...
- 深度相机之TOF初探
1.TOF技术研究 1.1 TOF初探 TOF是Time of flight的简写,直译为飞行时间的意思.所谓飞行时间法3D成像,是通过给目标连续发送光脉冲,然后用传感器接收从物体返回的光,通过探测光 ...
- 深度相机---(1)TOF总结
1.1 TOF初探 TOF是Time of flight的简写,直译为飞行时间的意思.所谓飞行时间法3D成像,是通过给目标连续发送光脉冲,然后用传感器接收从物体返回的光,通过探测光脉冲的飞行(往返)时 ...
- 深度相机(一)--TOF总结
这篇文章,网上转载了很多次,但我没找到原出处.实在不好意思(等找到了补充). 1.1 TOF初探 TOF是Time of flight的简写,直译为飞行时间的意思.所谓飞行时间法3D成像,是通过给 ...
- 深度相机(二)——飞行时间(TOF)
深度相机按照深度测量原理不同,一般分为:飞行时间法.结构光法.双目立体视觉法.本文就来说一说飞行时间法. 一.TOF简介 飞行时间是从Time of Flight直译过来的,简称TOF.其基本原理是通 ...
- 大盘点!国内外深度相机汇总
作者丨凳子花❀@CSDN 来源丨https://blog.csdn.net/qq_42759162/article/details/123519276 编辑丨3D视觉工坊 读前须知 本文只是学习笔记, ...
- 一文览尽ToF深度相机技术
点击上方"3D视觉工坊",选择"星标" 干货第一时间送达 摘要:现行专业级或消费级的3D相机所采用的三角法(Triangulation)和飞时法(Time-of ...
- TOF飞行时间深度相机介绍
点击下方卡片,关注"自动驾驶之心"公众号 ADAS巨卷干货,即可获取 点击进入→自动驾驶之心技术交流群 后台回复[数据集下载]获取计算机视觉近30种数据集! 什么是飞行时间(ToF ...
- 深度相机原理揭秘之飞行时间法(TOF)
版权声明:本文为博主原创文章,未经博主允许不得转载.违者必究. https://blog.csdn.net/electech6/article/details/78349107 </div> ...
最新文章
- ROS-Baxter抓取
- 移动端以刻度或尺度滑动方式选择年龄收入等
- 正确理解HTML,XHTML页面的头部doctype定义
- 基于python的随机森林回归实现_随机森林理论与python代码实现
- 20、mysql中触发器的使用
- centos配置c语言环境变量,CentOS7设置环境变量
- 「雕爷学编程」Arduino动手做(30)——光敏二极管模块
- for in for of区别_这个句型中用介词for还是of?来看看解题技巧
- 优秀的前端工程师任务目标和实践
- yii mysql 操作_YII 数据库相关操作
- 听说你在学Python?来点PEP吧
- UBUNTU安装,不建议最小安装,因为有很多问题
- 在Ubuntu 20.04部署SONIC testbed(topo 0)
- Java简单循环依赖的解决 —— spring_imitate(Spring的模仿)
- Alphabetic Removals(水题)
- 尚学堂Struts视频总结之一
- 面试时,HR问你职业规划,教你如何回答,得100分!
- 【php + MySQL + Android】本地实验环境搭建
- 圆桌共话:如何冲破数据高墙,连线“数智未来”?
- Tomat启动-源码跟踪
热门文章
- 基于Node.js自我展示博客网站-计算机毕设 附源码231547
- SCS【8】单细胞转录组之筛选标记基因 (Monocle 3)
- python win10 arm_树莓派3B+安装Windows 10 ARM
- SWAN之ikev2协议lookip配置测试
- 新阵容无惧大场面 中国冰壶女队压哨挺进世锦赛
- 解决Win10桌面Explorer.exe占用CPU过高的问题。
- 三分迷糊,十分精明”── 认清股价的涨跌趋势才能成为股市高手
- MTK6771 Android8.0 REE 指纹代码移植
- 商业WIFI——资本寒冬中炙手可热的创业领域
- 传统存储方式_海量非结构化数据存储方案