arXiv今年10月刚刚上传论文“LiRaNet: End-to-End Trajectory Prediction using Spatio-Temporal Radar Fusion“。

其特色在于,除了激光雷达和HD Map之外,该轨迹预测方法采用了雷达传感器的信息。雷达和激光雷达融合是有挑战性的,因为前者的低角分辨率缺陷,而且数据稀疏,和激光雷达同步也很难。为此,本文提出一个有效的时空雷达特征提取方法。


如图所示是雷达的挑战和益处的示意图:一个鸟瞰示例场景,其中当前、过去和将来帧中激光雷达点(浅蓝色)和雷达点速度(橙色)通过标签(白色)可视化。 车辆A是转弯公交车,在整个车架上有多个雷达点。 在空间和时间有效地组合这些信息,可以恢复完整的2D速度和转速。 车辆B显示出雷达固有的高位置噪声。 车辆C显示一个稀疏的激光雷达点情况,这时候时域隐式关联可能是一个挑战。 但是,C周围存在的雷达点可以为模型添加上下文信息,方便检测和预测轨迹。

融合多传感器的信息,可采用BEV格点,这里提出的是一个采用雷达数据学习BEV网格单元的时空特征方法。最后这些特征用于目标检测和预测的应用。

下图是LiRaNet纵览图:雷达特征提取网络(A)分两步从原始雷达点提取时空特征:(1)对于每帧,在BEV网格单元和雷达点之间创建一个图,用非刚性卷积学习空域特征,(2)这些空间特征在时域进一步融合,即沿通道维堆叠并使用MLP获得雷达特征体(feature volume)。 然后将此特征体与其他传感器的特征体融合,并馈入检测和未来轨迹预测的联合感知-预测网络(B)。 最后可以看到一个场景预测示例(C)。

雷达特征的计算如


激光雷达和HD Map的特征学习类似,其中HD Map表示为一个包括车道线几何信息的图像。

整个网络主干类似于以前Uber的工作,即CVPR论文【38】PnPNet。整个网络架构图如下所示:

如下是一些实验结果:

下表分析三个影响因素。

两步路轨迹文件位置_最新Uber ATG的轨迹预测方法LiRaNet介绍相关推荐

  1. 两步路轨迹文件位置_#APP功能#两步路轨迹路网,户外导航不迷路!

    亲爱的驴友! 你是否曾在登山过程中,因为天气等原因导致前路受阻,绕道后却又迷路? 你是否为了尽快与前队队友集合,一路狂奔埋头往前冲,最终搞得筋疲力尽? 你又是否为了护送受伤的队员就医,必须半途返程,却 ...

  2. 两步路轨迹文件位置_两步路户外助手新手使用指南

    1 主界面介绍: 2 功能介绍 ★ 支持多种户外地图:谷歌卫星地图.等高线地图.高德矢量地图.高德卫星地图.谷歌城市交通地图.谷歌地形图.OCM+Landscape地形图等,支持等高线地图叠加,并可下 ...

  3. 两步路轨迹文件位置_“两步路·户外助手”,被拟入北京高中地理活动教材

    好消息传来!"两步路·户外助手"被拟入北京市房山区高中学生的地理综合实践活动设计教材--<房山区高中地理综合实践活动设计>.地质出版社的邮件里如是说:'让房山区的所有高 ...

  4. 两步路轨迹文件位置_两步路图源文件技术说明与制作教程

    下文的阅读需要一定的代码方面的基础,但胜在浅显易懂. 重要知识1:两步路的图源文件的后缀为.xms. 重要知识2:点击两步路图源文件,选择用两步路户外助手打开,按照提示就能够完成导入. 重要知识3:一 ...

  5. 2023年户外助手两步路、奥维地图等自定义加载2023最新谷歌地图、高清地图等协议分析

    两步路协议分析: <?xml version='1.0' encoding='UTF-8' standalone='yes' ?><mapSource><name> ...

  6. 户外软件推荐与介绍——奥维和两步路

    文章目录 (一)记录坐标的网站 1.奥维互动地图注册 2.记录坐标 3.如何导出坐标点到ArcGIS 4.导航 5.记录轨迹 6.下载离线地图 (二)记录轨迹的软件 (三)离线地图的下载 (四)如何使 ...

  7. 距测试软件,两步路怎么测量距离 测距工具使用方法介绍

    两步路户外助手是专门为户外运动爱好者打造的一款手机户外运动助手软件,用户通过它可以记录自己的每一条轨迹以及出行方式,这样可以很好的为大家记录各种户外出行的数据,还能参加各种活动和比赛.此外软件自带的地 ...

  8. 两步路加载自定义图源谷歌等协议解析

    直接丢出代码,两步路采取的是xml格式 保存的为XMS <?xml version='1.0' encoding='UTF-8' standalone='yes' ?><mapSou ...

  9. python定位文件位置_在Python中定位文件位置

    tell()方法告诉您文件中的当前位置:换句话说,下一次读取或写入将发生在从文件开头开始的那么多个字节处. seek(offset [,from])方法更改当前文件位置.offset参数指示要移动的字 ...

最新文章

  1. 实战:遇到HTM的文件图标丢失的问题
  2. flowjo软件使用方法_管家婆软件使用方法出库教程,管家婆软件做账流程视频_双全科技...
  3. python读取大文件的坑_如何在Python中读取大文件的特定部分
  4. SQL笔记-Oracle中varchar和varchar2的区别
  5. 批处理作业调度问题 ——回溯法详解
  6. Oracle对表空间、用户、用户权限的操作
  7. cuSPAESE库:(五)零基索引和一基索引
  8. 继续教育自动听课软件_绵阳继续教育 自动挂机学习软件 v2019.5.31
  9. 关于CodeSmith生成CSLA代码的联想
  10. Android SDK 开发——发布使用踩坑之路
  11. Tensor的数据统计
  12. 微信小程序启动过程分析
  13. 全国中小学信息技术创新与实践大赛:软件创意编程赛道
  14. 西门子PLC 1200和V20变频器USS通讯
  15. android iphone 短信中心号码,iPhone设置短信中心号码失败
  16. Ubuntu 更换阿里云软件源
  17. 从云到「链」,京东云成为中国第四朵云背后
  18. 实现win 10 电脑版微信双开
  19. [JZOJ5666]【GDOI2018Day2模拟4.18】法力风暴(分治NTT 模板)
  20. 何钦铭版C语言第3章答案,何钦铭版C语言第3章答案

热门文章

  1. deebot扫地机器人使用_完美主义的双子座也选这款扫地机——小米米家扫地机器人使用心得...
  2. SpringBoot使用jasypt加解密密码
  3. 学生学籍管理系统python_使用Python实现 学生学籍管理系统
  4. ES6 Symbol 数据类型
  5. Flink官网自学笔记
  6. 我的世界服务器的文件名叫什么,我的世界 外国服务器叫什么名字 | 手游网游页游攻略大全...
  7. pbs 写matlab作业,pbs提交作业
  8. 客户端连接mysql 自动断开_MySql连接空闲8小时自动断开的原因及连接池配置方法...
  9. Java8 函数式对齐约定————Eclipse自定义代码风格
  10. react 怎么获取表格_react学习之js-xlsx导入和导出excel表格