3D目标检测多模态融合算法综述
本篇文章主要想对目前处于探索阶段的3D目标检测中多模态融合的方法做一个简单的综述,主要内容为对目前几篇几篇研究工作的总结和对这个研究方面的一些思考。
在前面的一些文章中,笔者已经介绍到了多模态融合的含义是将多种传感器数据融合。在3D目标检测中,目前大都是将lidar和image信息做融合。在上一篇文章中,笔者介绍到了目前主要的几种融合方法,即early-fusion,deep-fusion和late-fusion,并介绍了一种基于Late-fusion的融合方法。但是在大多数研究工作中,都是以deep-fuion的方法为主要的融合策略。
1背景知识
1.1多模态融合的主要难点
难点一:传感器视角问题
3D-CVF(ECCV20)的研究提出的做fusion的对做融合工作最大的问题即是在视角上的问题,描述为如下图所示的问题,camera获取到的信息是“小孔成像”原理,是从一个视锥出发获取到的信息,而lidar是在真实的3D世界中获取到的信息。这使得在对同一个object的表征上存在很大的不同。
难点二 数据表征不一样</
3D目标检测多模态融合算法综述相关推荐
- 综述:3D目标检测多模态融合算法
点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达 导读 本文是一篇关于3D目标检测中多模态融合方法的综述,总结了多模 ...
- CLOCs:3D目标检测多模态融合之Late-Fusion
文章:CLOCs: Camera-LiDAR Object Candidates Fusion for 3D Object Detection 论文地址:在公众号「3D视觉工坊」,后台回复「Late- ...
- 【利用MMdetection3D框架进行单目3D目标检测(smoke算法】
利用MMdetection3D框架进行3D目标检测(smoke算法) 1.mmdetection3d 2.mmdetection3d安装 2.1 依赖 3.进行单目3D目标检测 1.mmdetecti ...
- 深度学习多模态融合_3D目标检测多模态融合综述
0前言 本篇文章主要想对目前处于探索阶段的3D目标检测中多模态融合的方法做一个简单的综述,主要内容为对目前几篇几篇研究工作的总结和对这个研究方面的一些思考. 在前面的一些文章中,笔者已经介绍到了多模态 ...
- 目标检测与识别算法综述:从传统算法到深度学习(二)
作 者:XJTU_Ironboy 时 间:2018年11月 联系方式:tzj19970116@163.com 本文结构: 摘要 介绍 2.1 大致框架 2.2 测试评价指标 2.3 相关比赛介 ...
- 多模态深度学习综述总结 与 目标检测多模态融合领域论文推荐
文章目录 一.多模态学习定义及应用 二.模态表示 2.1 单模态表示 2.1.1 语句模态表示 2.1.2 视觉模态表示 2.1.3 声音模态表示(略) 2.2 多模态表示 2.2.1 模态共作用语义 ...
- CLOCs:一种相机-激光雷达3D目标检测后融合方法
点击上方"3D视觉工坊",选择"星标" 干货第一时间送达 作者丨paopaoslam 来源丨泡泡机器人SLAM 标题: CLOCs: Camera-LiDAR ...
- 史上最全综述:3D目标检测算法汇总!
来源:自动驾驶之心 本文约16000字,建议阅读10+分钟 本文将演示如何通过阈值调优来提高模型的性能.本文的结构安排如下:首先,第2节中介绍了3D目标检测问题的定义.数据集和评价指标.然后,我们回顾 ...
- 收藏 | 3D目标检测综述:从数据集到2D和3D方法
点上方蓝字计算机视觉联盟获取更多干货 在右上方 ··· 设为星标 ★,与你不见不散 仅作学术分享,不代表本公众号立场,侵权联系删除 转载于:机器之心 AI博士笔记系列推荐 周志华<机器学习> ...
最新文章
- 解决RecyclerView在ScrollView中会置顶它上面的控件
- Servlet运行流程笔记
- 浅谈代码的执行效率(2):编译器的威力
- 针对双系统ubuntu16.04卡死及系统没有声音解决方法
- 操作对象_有进取心的机器人学习对象操作的基本原理
- hdu1257----贪心最长上升子序列(最少拦截系统)
- 极客大学架构师训练营 微服务架构 Service Mesh 服务网格 RPC 协议实现原理 Dubbo 通讯协议 第19课 听课总结
- RabbitMQ消息可靠性传输示例
- excel自定义功能区图标_自定义Excel条件格式图标
- Xposed框架Xposed安装器|Xposed for Android 5.0/5.1/6.0|详细安装教程
- linux防火墙黑白名单,iptables详解(9):iptables的黑白名单机制
- 阿里王坚受邀成为 TGO 鲲鹏会荣誉导师
- CSS实现当鼠标移入或者移出时实现动画过渡效果
- Ubuntu 安装企业版微信
- iOS 格式化输出 位数不足补0
- 搭建论坛discuz
- 文本匹配(语义相似度/行为相关性)技术综述
- 震惊!90%的简历,竟然都犯过这些错误……
- 我那迷途知返的小羊-linux修复DNS解析问题
- jquery寻找父子兄弟节点