Deep Manta：单目图像下2d到3d由粗到精的多任务网络车辆分析
原文首发于微信公众号「3D视觉工坊」——Deep Manta：单目图像下2d到3d由粗到精的多任务网络车辆分析
外文原文：Deep manta: A coarse-to-fine many-task network for joint 2d and 3d vehicle analysis from monocular image
1、算法思想
提出 Deep Many-Tasks 方法来对一个图片进行多任务车辆分析，包括车辆检测，部分定位，可见性描述和 3D维度估计。
论文的主要贡献包括三个方面：
1、使用图像车辆的特征点来编码 3D 车辆信息。因为车辆具有已知的形状，可以用单目图像重构 3D 车辆信息。我们的方法还可以在车辆部件被遮挡，截断等情况下定位到车辆部件，使用回归的方法而不是 part detector. 预测 hidden parts 的位置对 3D 信息的恢复很有帮助。我们使用一个 3D vehicle 数据集，由具有真实维度的 3D meshes 组成，即具有 3D 框的数据集。每一个 3D model 都有一些顶点，对应于车轮等部件，对每一个 model 来说，这些顶点组成了一个 3D shape. 这个方法的主要思想是在 input image 中恢复这些 3D points 的映射。2D/3D matching 在 2D shape 和选择的 3D shape进行，以恢复车辆的方向和 3D location.
2、Deep Coarse-to-fine Many-Task 网络。首先使用 RPN 网络产生 corase 2D bounding box，之后迭代产生精细化 bounding box. 六个任务共享特征向量
Deep Manta：单目图像下2d到3d由粗到精的多任务网络车辆分析相关推荐
- 【论文精读】使用深度卷积神经场从单目图像学习深度
使用深度卷积神经场从单目图像学习深度 Paper Information Abstract 1 Introduction 1.1 Related Work 2 DEEP CONVOLUTIONAL N ...
- 单目图像深度估计 - 入门篇
由于公司网站设置,基于git的Blog越来越难打开,所以把部分内容搬运到这里. 一转眼都是两年前的内容了,且大部分都是我的个人理解,现在看来也难免有些Bug.虽然后来由于项目安排的关系没有继续单目图像 ...
- 单目图像深度估计 - 深度篇：David Eigen的两篇研究
目录 入门篇:图像深度估计相关总结 应用篇:Learning to be a Depth Camera 尺度篇:Make3D 迁移篇:Depth Extraction from Video Using ...
- 单目图像3D物体的姿态检测
原文首发于微信公众号「3D视觉工坊」--单目图像3D物体的姿态检测 主要分成几个步骤: 1. 二维box的定位.类别判断.以及角度预测 2. 物体的3d box尺寸的预估,以及3d box在相机坐标系 ...
- 单目图像深度估计 - 迁移篇：Depth Extraction from Video Using Non-parametric Sampling
目录 入门篇:图像深度估计相关总结 应用篇:Learning to be a Depth Camera 尺度篇:Make3D 迁移篇:Depth Extraction from Video Using ...
- 单目图像深度估计——Monodepth2
深度估计方法及网络架构 深度估计方法 网络架构 深度网络 位姿网络 损失函数构建 深度估计方法 Monodepth2使用基于单目图像的无监督学习法完成深度估计的任务.根据SFM模型原理在卷积神经网络中 ...
- 单目图像深度估计 - 尺度篇：Make3D
目录 入门篇:图像深度估计相关总结 应用篇:Learning to be a Depth Camera 尺度篇:Make3D 迁移篇:Depth Extraction from Video Using ...
- 基于深度学习的单目图像深度估计总结
图像深度估计,是目前计算机视觉研究中的经典问题.深度图(Depth Map)表示每个像素在空间中的位置,是一种普遍的三维场景信息表达方式,广泛应用于自动驾驶.三维重建等方面. 基于深度学习的单目图像深 ...
- 单目图像深度估计 - 相对深度篇：Depth in the Wild Size to Depth
目录 入门篇:图像深度估计相关总结 应用篇:Learning to be a Depth Camera 尺度篇:Make3D 迁移篇:Depth Extraction from Video Using ...
最新文章
- 十四：桥接者模式（发送各类短信案例）
- 计算机作文1500字,作文1500字
- 小甲鱼 OllyDbg 教程系列 (五) ： 破解 PC Surgeon 之 查找字符串
- 判断java String中是否有汉字的方法
- iOS原生实现二维码扫描
- 一篇故事看懂从 session-cookie 到 JWT 的技术演变
- 那么多GAN哪个好？谷歌大脑泼来冷水：都和原版差不多 | 论文
- 手动测试是进入测试自动化之前的重要阶段
- IDEA报错 com.microsoft.sqlserver.jdbc.SQLServerException : 列名或所提供的数目与表定于不匹配
- JavaScript循环遍历对象的属性，只要对象内的Value
- 线性时间选择——寻找第k小的数
- sosoapi初次接触
- orcadcapture安装_电路原理图设计软件(OrCAD Capture CIS 中文版) 16.6 免费安装版
- 第二人生的源码分析(三十八)构造一个消息包并发送
- 南京计算机徐宪忠,nakaga
- java毕业生设计高考填报信息系统计算机源码+系统+mysql+调试部署+lw
- 【webstorm】webstorm官网中文破解版
- bootstrap table合并单元格
- OOAD 3 迭代、进化和敏捷（Iterative，Evolutionary，and Agile）
- Java Swing教程(基础)