PV-RAFT：用于点云场景流估计的点体素相关场（CVPR2021）

在2019和2020年的CVPR上均有关于点云场景流的相关工作，今天介绍的是2021年CVPR上最新的关于点云场景流的工作。机器人和人机交互中的许多应用都可以从理解动态环境中点的三维运动中获益，这种运动被广泛称为场景流。相较于静态的点云，点云场景流估计更侧重于计算两个连续帧之间的3D运动场，这为场景提供了重要的动态信息。以往的方法大多以立体图像和RGB-D图像作为输入，很少有直接从点云估计场景流的方法。随着3D数据变得更容易获得，许多工作最近开始关注点云的场景流估计。

在本文中，作者提出了一种Point-Voxel Recurrent All-Pairs Field Transforms (PV-RAFT)方法来估计来自点云的场景流。由于点云是不规则且无序的，因此从3D空间中的所有对（all-pairs）场中有效提取特征十分具有挑战性，其中所有对相关性在场景流估计中起着重要作用。

为了解决这个问题，作者提出了点体素相关场(PV-RAFT)，其核心有以下2点：

1）PV-RAFT通过学习点对的局部和全局的依赖关系，从而实现捕获基于点的相关性，同时采用K-Nearest Neighbors搜索来保留局部区域中的细节信息。

2）通过以多尺度方式对点云进行体素化，作者构建了金字塔相关体素来模拟大尺度上的对应关系。然后利用PV-RAFT融合处理这两种类型的相关性。

作者最后在FlyingThings3D和KITTI Scene Flow 2015数据集上取得了不错的结果。

作者的出发点是认为与从粗到细的策略相比，all-pairs场同时保留了局部相关性和远距离的全局关系。但考虑到点云的不规则性，在3D空间构建结构化的all-pairs相关场仍然十分困难，为了解决这

PV-RAFT：用于点云场景流估计的点体素相关场（CVPR2021）相关推荐

RAFT-3D: 基于刚体变换的场景流估计（ICCV 2021）
点击上方"3D视觉工坊",选择"星标" 干货第一时间送达作者丨泡泡图灵智库来源丨泡泡机器人SLAM 标题:RAFT-3D: Scene Flow usin ...
SLIM：自监督点云场景流与运动估计（ICCV 2021）
点击上方"3D视觉工坊",选择"星标" 干货第一时间送达作者丨泡泡机器人来源丨泡泡机器人SLAM 标题:SLIM: Self-Supervised LiD ...
IROS2022 | 4D车载雷达自监督场景流估计（上汽、爱丁堡大学）
点击下方卡片,关注"自动驾驶之心"公众号 ADAS巨卷干货,即可获取点击进入→自动驾驶之心技术交流群后台回复[IROS2022]获取IROS2022所有自动驾驶方向论文! 作者 ...
multi-mono-sf:自监督多帧单目场景流估计
点击上方"3D视觉工坊",选择"星标" 干货第一时间送达标题:Self-Supervised Multi-Frame Monocular Scene Flow ...
干货！用神经网络来表达隐式场景流
点击蓝字关注我们 AI TIME欢迎每一位AI爱好者的加入! 在深度学习革命之前,许多感知算法(perception algorithm) 直接运行时优化(runtime optimization) ...
ICCV2021|一种用于解决点云场景中同类对象分割的网络
首次提出:一种用于解决点云场景中同类对象分割的端到端网络融合协同对比学习和相互注意采样机制进行无监督点云对象的同类分割 Unsupervised Point Cloud Object Co-segm ...
华为诺亚方舟加拿大实验室提出BANet，双向视觉注意力机制用于单目相机深度估计...
点击上方"3D视觉工坊",选择"星标" 干货第一时间送达这篇文章的作者是华为加拿大诺亚方舟实验室,是一篇将双向注意力机制用于弹幕深度估计的工作.主要的创新点在 ...
云场景实践研究第85期：墨迹天气
更多云场景实践研究案例,点击这里:[云场景实践研究合集]联合不是简单的加法,而是无限的生态,谁会是下一个独角兽墨迹运营团队每天最关心的是用户正在如何使用墨迹,在他们操作中透露了哪些个性化需求.这些数 ...
pcl点云特征提取法线估计 PFH FPFH NARF 惯量偏心矩 RoPs特征视点特征直方图VFH GASD特征
pcl点云特征提取法线估计 PFH FPFH NARF 惯量偏心矩 RoPs特征视点特征直方图VFH GASD特征博文末尾支持二维码赞赏哦 _ 如果要对一个三维点云进行描述,光有点云的位置是 ...

PV-RAFT：用于点云场景流估计的点体素相关场（CVPR2021）

PV-RAFT：用于点云场景流估计的点体素相关场（CVPR2021）相关推荐

最新文章

热门文章