RGB-D对红外热像仪和毫米波雷达标定
RGB-D对红外热像仪和毫米波雷达标定
Extrinsic Calibration of Thermal IR Camera and mmWave Radar by Exploiting Depth from RGB-D Camera
摘要
尽管RGB相机和激光雷达用途广泛，但据报道，在低能见度的环境下容易受到火灾或烟雾的影响。为了解决这个问题，我们引入了一个由红外热像仪和毫米波雷达组成的传感器系统。在此过程中，需要在两个传感器之间进行外部标定，而雷达的14位温度和稀疏距离测量的标定是一个挑战。提出了一种利用RGB-D传感器作为深度优化中介的多模态标定方法。为了验证相对位姿估计的正确性，我们提出了将雷达深度投影到红外相机坐标系上的定性结果。
主要贡献:使用LM算法通过RGB-D的深度信息进行红外相机与毫米波雷达的外参标定。
图1 外参标定结果 （b）在红外热图像上投影深度图像（c）
利用估计的外部参数在红外图像上叠加毫米波雷达点。
K是红外相机的内参，u是像素点，下表t，c，r分别代表红外相机、RGBD相机以及毫米波雷达。
为了找到红外相机和毫米波雷达之间的外部标定参数，我们在红外图像上得到了N组数据在每个RGB-D相机和毫米波雷达深度点上最小值、最大值以及中间值。对N个元素的损失函数进行优化，如（2）所示。
相关技术，可以参考另外一篇文章
Robust Intrinsic and
Extrinsic Calibration of RGB-D Cameras
论文地址：https://arxiv.org/pdf/1701.05748.pdf
本文的主要贡献如下：
•一般和实验支持的测量错误模型，很好地描述了深度传感器类型统一。
•空间/参数不失真地图，一种紧凑有效的方法结构光深度传感器。
•一个新的优化框架，旨在估计摄像机深度传感器的刚性位移以及描述系统误差的参数模型关于深度测量。
•拟议方法的开源实现，集成在ROS（机器人操作系统）内框架[7]。
代码以及校准过程可在以下网站上获得：http://iaslab-unipd.github.io/rgbd校准
RGB-D对红外热像仪和毫米波雷达标定相关推荐
- 高速摄影与红外热像仪的简单用法
一.高速摄影 1. 高速摄影是指什么? 高速摄影,顾名思义就是用很高的速度进行影像的拍摄.高速二字的含义:拍摄频率高.曝光时间短.扫描速率快.而只要具有三者之一,就可以称为高速摄影.一般把曝光时间小于 ...
- 车载雷达（立体摄像头，毫米波雷达，激光雷达（LiDAR））比较
第一个主要区别是,立体摄像机是完全被动的. 毫米波雷达和LiDAR使用从测量仪器发射的电磁波或光,并从物体上反射. 它们被称为活动的,因为它们采取行动来测量距离. 只要是从物体上反射出来的距离就可以测 ...
- 红外倒车雷达原理图_汽车里的毫米波雷达你知多少？
雷达对我们来说并不陌生,它在生活的方方面面都会用到.如今它也出现在了汽车里面,随着智能驾驶不断发展,传感器已成为打造汽车生态的主要砝码之一,无论是激光雷达.毫米波雷达.摄像头等,都将成为日后必要的配件 ...
- 红外倒车雷达原理图_自动驾驶汽车传感器技术解析—毫米波雷达
毫米波雷达的优势在全天候工作,即不良天气.夜晚等环境下可以发挥作用,而激光雷达会受雨雪雾霾的影响:并且毫米波雷达测距远,200 米以上都轻易胜任,但是分辨率低.较难成像,无法识别图像. 由于毫米波雷达 ...
- 关于运用毫米波雷达图像自动检测高压线的调查研究
关于运用毫米波雷达图像自动检测高压线的调查研究 ◆电子科技大学格拉斯哥学院2017级沈晨(2017200601035) [摘要]为了保证直升机驾驶中的安全,我们迫切需要制造出一款直升机高压线自动侦测报 ...
- 摄像头与毫米波雷达（Radar）融合
摄像头与毫米波雷达(Radar)融合 Input: (1)图像视频分辨率(整型int) (2)图像视频格式 (RGB,YUV,MP4等) (3)毫米波雷达点云信息(点云坐标位置x,y,浮点型float ...
- 毫米波雷达、ADAS中的应用以及毫米波雷达的检测、测距、测速和角度测量
毫米波雷达的检测.测距.测速和角度测量 毫米波(Millimeter-Wave,缩写:MMW),是指长度在1~10mm的电磁波,对应的频率范围为30~300GHz．根据波的传播理论,频率越高,波长越短 ...
- 干货分享：自动驾驶核心技术进展之车用毫米波雷达
来源:智车科技 摘要:电动化.智能化.网联化.共享化是汽车未来发展的大势.伴随着这一趋势,自动驾驶汽车应用而生,且国内很多自动驾驶研发企业快速成长. "自动驾驶"等相关热词也一直是 ...
- 激光与红外线的区别？激光雷达与毫米波雷达区别？毫米波雷达无法感知行人吗？关于Intel Realsense D435有源红外技术猜想
文章目录 激光与红外线的区别是什么呢? 激光雷达和毫米波雷达区别 毫米波雷达无法感知行人吗? 关于Intel Realsense D435有源红外技术猜想 阅读Intel Realsense文档的时候 ...
最新文章
- 中美首份8000字长文解析全球热点脑机接口（重磅干货）
- 使用MYCAT作为Mysql HA的中间件（转）
- 做CEO，一定要有“江湖感”
- c语言两种加法,两个超长正整数的加法
- CM:How is the version of word installed in client returned to Application server
- 论文浅尝 | TEQUILA: 一种面向时间信息的知识问答方法
- 资源管理与调度系统-YARN的资源调度器
- echarts.init只能使用一个_气动球阀填料使用寿命怎样提高
- Linux运维之道（大量经典案例、问题分析，运维案头书，红帽推荐）
- 大数据技术笔记之数据采集和预处理
- 2018最新Jrebel激活服务，Jrebel激活，Jrebel激活码，Jrebel破解
- 计算机相关美文摘抄,唯美的散文段落摘抄
- 全国社会组织信用信息公式平台（试运行）爬虫记录
- 洛谷 P1378 油滴扩展
- html5+ mui框架 微信授权登录无响应，不回跳APP
- Android游戏开发+实战开发教程视频
- VIA和PAD的用法区分
- LINUX -SELL编程
- 如何一次通过CISSP考试
- 华为微博回应鸿蒙,果不其然，华为放出终极大招！鸿蒙操作系统下月正式推送。就在刚刚，华为开通了鸿蒙操作系统的官方微博，关注人数已接近八万。 ... - 雪球...