0前言

本篇文章主要想对目前处于探索阶段的3D目标检测中多模态融合的方法做一个简单的综述,主要内容为对目前几篇几篇研究工作的总结和对这个研究方面的一些思考。
在前面的一些文章中,笔者已经介绍到了多模态融合的含义是将多种传感器数据融合。在3D目标检测中,目前大都是将lidar和image信息做融合。在上一篇文章中,笔者介绍到了目前主要的几种融合方法,即early-fusion,deep-fusion和late-fusion,并介绍了一种基于Late-fusion的融合方法。但是在大多数研究工作中,都是以deep-fuion的方法为主要的融合策略。

1背景知识

1.1多模态融合的主要难点

难点一:传感器视角问题

3D-CVF(ECCV20)的研究提出的做fusion的对做融合工作最大的问题即是在视角上的问题,描述为如下图所示的问题,camera获取到的信息是“小孔成像”原理,是从一个视锥出发获取到的信息,而lidar是在真实的3D世界中获取到的信息。这使得在对同一个object的表征上存在很大的不同。

难点二 数据表征不一样</

3D目标检测多模态融合算法综述相关推荐

  1. 综述:3D目标检测多模态融合算法

    点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达 导读 本文是一篇关于3D目标检测中多模态融合方法的综述,总结了多模 ...

  2. CLOCs:3D目标检测多模态融合之Late-Fusion

    文章:CLOCs: Camera-LiDAR Object Candidates Fusion for 3D Object Detection 论文地址:在公众号「3D视觉工坊」,后台回复「Late- ...

  3. 【利用MMdetection3D框架进行单目3D目标检测(smoke算法】

    利用MMdetection3D框架进行3D目标检测(smoke算法) 1.mmdetection3d 2.mmdetection3d安装 2.1 依赖 3.进行单目3D目标检测 1.mmdetecti ...

  4. 深度学习多模态融合_3D目标检测多模态融合综述

    0前言 本篇文章主要想对目前处于探索阶段的3D目标检测中多模态融合的方法做一个简单的综述,主要内容为对目前几篇几篇研究工作的总结和对这个研究方面的一些思考. 在前面的一些文章中,笔者已经介绍到了多模态 ...

  5. 目标检测与识别算法综述:从传统算法到深度学习(二)

    作   者:XJTU_Ironboy 时   间:2018年11月 联系方式:tzj19970116@163.com 本文结构: 摘要 介绍 2.1 大致框架 2.2 测试评价指标 2.3 相关比赛介 ...

  6. 多模态深度学习综述总结 与 目标检测多模态融合领域论文推荐

    文章目录 一.多模态学习定义及应用 二.模态表示 2.1 单模态表示 2.1.1 语句模态表示 2.1.2 视觉模态表示 2.1.3 声音模态表示(略) 2.2 多模态表示 2.2.1 模态共作用语义 ...

  7. CLOCs:一种相机-激光雷达3D目标检测后融合方法

    点击上方"3D视觉工坊",选择"星标" 干货第一时间送达 作者丨paopaoslam 来源丨泡泡机器人SLAM 标题: CLOCs: Camera-LiDAR ...

  8. 史上最全综述:3D目标检测算法汇总!

    来源:自动驾驶之心 本文约16000字,建议阅读10+分钟 本文将演示如何通过阈值调优来提高模型的性能.本文的结构安排如下:首先,第2节中介绍了3D目标检测问题的定义.数据集和评价指标.然后,我们回顾 ...

  9. 收藏 | 3D目标检测综述:从数据集到2D和3D方法

    点上方蓝字计算机视觉联盟获取更多干货 在右上方 ··· 设为星标 ★,与你不见不散 仅作学术分享,不代表本公众号立场,侵权联系删除 转载于:机器之心 AI博士笔记系列推荐 周志华<机器学习> ...

最新文章

  1. 解决RecyclerView在ScrollView中会置顶它上面的控件
  2. Servlet运行流程笔记
  3. 浅谈代码的执行效率(2):编译器的威力
  4. 针对双系统ubuntu16.04卡死及系统没有声音解决方法
  5. 操作对象_有进取心的机器人学习对象操作的基本原理
  6. hdu1257----贪心最长上升子序列(最少拦截系统)
  7. 极客大学架构师训练营 微服务架构 Service Mesh 服务网格 RPC 协议实现原理 Dubbo 通讯协议 第19课 听课总结
  8. RabbitMQ消息可靠性传输示例
  9. excel自定义功能区图标_自定义Excel条件格式图标
  10. Xposed框架Xposed安装器|Xposed for Android 5.0/5.1/6.0|详细安装教程
  11. linux防火墙黑白名单,iptables详解(9):iptables的黑白名单机制
  12. 阿里王坚受邀成为 TGO 鲲鹏会荣誉导师
  13. CSS实现当鼠标移入或者移出时实现动画过渡效果
  14. Ubuntu 安装企业版微信
  15. iOS 格式化输出 位数不足补0
  16. 搭建论坛discuz
  17. 文本匹配(语义相似度/行为相关性)技术综述
  18. 震惊!90%的简历,竟然都犯过这些错误……
  19. 我那迷途知返的小羊-linux修复DNS解析问题
  20. jquery寻找父子兄弟节点

热门文章

  1. 取消IE7以上版本 打印时缩小字体填充的方法
  2. ASA防火墙透明模式ACL总结
  3. 老赵的自然数分解——少侠之对象解
  4. 我是如何一步步让公司的MySQL支撑亿级流量的?
  5. 京东超大规模联邦学习探索实践
  6. 经典智力面试题:一家人过桥
  7. 本地缓存性能之王Caffeine
  8. 一个实用技巧,告别手动画图,自动生成数据库 ER 图|原创
  9. Code Review 是一场苦涩但有意思的修行
  10. 中国式巨婴,到底有多可怕?