留个笔记自用

PV-RCNN: Point-Voxel Feature Set Abstraction for 3D Object Detection

做什么

3D object detection。3维目标检测

对于输入的3D点云,像2D一样使用一个bounding box去将相应的物体包围起来,不过这里使用的bounding box也同样变成了3维的

做了什么


本文将=Voxel-based的方法和Point-based的方法优缺点结合了起来,包括体素到关键点的3D场景编码和关键点到网格的RoI特征提取

怎么做


整体结构分为三个部分, 3D Voxel CNN for Efficient Feature Encodingand Proposal Generation(EP)部分,Voxel-to-keypoint Scene Encoding via Voxel Set Abstraction(VTK)部分,Keypoint-to-grid RoI Feature Abstraction for Proposal Refinement(KTG)部分
首先是EP部分
输入的原始点云定义为P,这里首先是老样子需要一个feature extractor。首先先将P分割成多个小的voxel,voxel的分辨率是L×W×H,非空的voxel的特征就由该voxel内所有的平均得到。

这里的feature extractor由多个3×3×3的3D sparse卷积组成就是稀疏卷积,前一篇了解过
稀疏卷积
然后就是将3D特征映射成2D特征鸟瞰图,高度变为通道,然后使用每个cell每个类别设置两个anchor,角度分别为0和90度。

在这里通常就使用3D特征和2Dgrid合并ROI特征,但这里存在一个问题,3D特征的分辨率往往都比较低,最多只能支持下采样8次,不然整体的分辨率较低会影响定位
于是这里就提出了最主要的两个步骤,首先将整个场景不同层的voxel编码为关键点,然后将关键点特征聚合到ROI网格中进行框优化
所以接下来就是VTK部分
首先是第一步骤,关键点采样,这里采用的是 Furthest Point-Sampling(FPS)采样的方法

简单来说就是很简单,取一个随机点,然后取与这个点距离最远的点,以此进行迭代
在这里也展示了FPS的结果

《论文阅读》PV-RCNN: Point-Voxel Feature Set Abstraction for 3D Object Detection相关推荐

  1. 三维目标检测论文阅读:VoxelNet: End-to-End Learning for Point Cloud Based 3D Object Detection

    VoxelNet: End-to-End Learning for Point Cloud Based 3D Object Detection 理解了PointPillars这篇文章后,看这篇文章就清 ...

  2. (CVPR 2020) PV-RCNN: Point-Voxel Feature Set Abstraction for 3D Object Detection

    Abstract 我们提出了一种新颖的高性能3D目标检测框架,名为PointVoxel-RCNN(PV-RCNN),用于从点云进行准确的3D目标检测.我们提出的方法深度集成了3D体素卷积神经网络(CN ...

  3. 论文阅读:BPFINet: Boundary-aware progressive feature integration network for salient object detection

    论文地址:https://doi.org/10.1016/j.neucom.2021.04.078 代码地址:https://github.com/clelouch/BPFINet 发表于:Neuro ...

  4. 【论文阅读】【三维目标检测】BirdNet: a 3D Object Detection Framework from LiDAR Information

    文章目录 BirdNet 数据预处理 处理网络 后处理 实验 评价 BirdNet: a 3D Object Detection Framework from LiDAR Information 西班 ...

  5. 详解两阶段3D目标检测网络PVRCNN:Point-Voxel Feature Set Abstraction for 3D Object Detection

    在<动手学无人驾驶(4):基于激光雷达点云数据3D目标检测>一文中介绍了3D目标检测网络PointRCNN.今天介绍该作者新提出的3D检测模型:PVRCNN,论文已收录于CVPR2020. ...

  6. PV-RCNN: Point-Voxel Feature Set Abstraction for 3D Object Detection(group的是关键点周围的体素,而不是周围的点)

    1.动机 为了学习更区别的点云特征,我们将3D体素卷积网络和基于PointNet的方法提取特征相结合.既可以利用3D体素卷积网络高效的学习和高质量的建议,又利用了基于PointNet的网络的灵活感受野 ...

  7. 论文精读《OFT: Orthographic Feature Transform for Monocular 3D Object Detection》

    OFT: Orthographic Feature Transform for Monocular 3D Object Detection 文章目录 OFT: Orthographic Feature ...

  8. 【论文翻译】Orthographic Feature Transform for Monocular 3D Object Detection

    标题:<Orthographic Feature Transform for Monocular 3D Object Detection> 作者:Thomas Roddick, Alex ...

  9. 论文精读 ——《BEVDepth: Acquisition of Reliable Depth for Multi-view 3D Object Detection》

    文章目录 BEVDepth: Acquisition of Reliable Depth for Multi-view 3D Object Detection 论文精读 摘要(Abstract·) 1 ...

  10. 论文精读 《CaDNN: Categorical Depth Distribution Network for Monocular 3D Object Detection》

    CaDNN: Categorical Depth Distribution Network for Monocular 3D Object Detection 文章目录 CaDNN: Categori ...

最新文章

  1. JS实现表格列宽拖动
  2. AB1601蓝牙初始化注意事项
  3. Python的enumerater
  4. [scala-spark]3. 变量 数据类型 分支与循环
  5. java从键盘输入一个数,并将其倒序输出
  6. vertical-align和line-height的深入应用
  7. 【转】eclipse 查看原始类出现The jar file rt.jar has no source attachment解决方法
  8. 手机操作系统学习总结
  9. janusgraph源码分析1-下载编译启动
  10. w7系统关闭打印服务器,w7打印后台处理程序服务总是自动停止如何解决【照片】...
  11. python计算机视觉pdf百度云下载_Python计算机视觉编程(pdf+epub+mobi+txt+azw3)
  12. Linux media子系统
  13. linux下计算时间,linux 日期时间计算
  14. 中标麒麟linux操作系统下Chrome/Chromium的安装
  15. oracle年份超出范围,SQL错误17268:年份超出范围(Java / Spring)
  16. 工程(二)——DeeplabV3+语义分割训练自制数据集
  17. 利用计算机设计比率分析模型,计算机财务管理.pdf
  18. vue的项目demo(asp.net mvc5+vue2.5)
  19. c语言中的头文件stdlib.h的作用,c语言中includestdlib.h的意思是什么
  20. 阿里云PolarDB-X荣获“2022 OSCAR 尖峰开源项目及开源社区”奖

热门文章

  1. 微软拼音变成繁体,如何修改为简体
  2. 360浏览器打不开html5文件,电脑360浏览器打不开网页原因-浏览器打不开解决方法 - 系统家园...
  3. 修改bios密码 服务器,为BIOS设置密码让我们的系统更加安全
  4. Microsoft visual studio关闭安全检查的几种方法
  5. bootstrap4-Collapse 折叠 酷炫特效
  6. win 11 博通网卡解决蓝牙驱动问题 黑苹果在win11系统中
  7. ABAQUS软件实训(一):ABAQUS介绍
  8. 深夜给这个世界添加一点佐料
  9. centos6添加系统服务
  10. cannot find zipfile directory