Robotics Today: Andrew Davison on “From SLAM to Spatial AI”

这篇仅仅是talk的观看记录

Abstract: To enable the next generation of smart robots and devices which can truly interact with their environments, Simultaneous Localisation and Mapping (SLAM) will progressively develop into a general real-time geometric and semantic ‘Spatial AI’ perception capability. I will give many examples from our work on gradually increasing visual SLAM capability over the years. However, much research must still be done to achieve true Spatial AI performance. A key issue is how estimation and machine learning components can be used and trained together as we continue to search for the best long-term scene representations to enable intelligent interaction. Further, to enable the performance and efficiency required by real products, computer vision algorithms must be developed together with the sensors and processors which form full systems, and I will cover research on vision algorithms for non-standard visual sensors and graph-based computing architectures



上幅图是slamcore中的相关内容,slam系统的内容越来越庞大。
空间AI未来的应用场景之一。

intelligence augmentation(IA)的应用场景之一
这些产品还没有出现的原因是现在技术还达不到需求。


一个实时运行的3d定位系统。


这时,在空间定位一个camera已经有些进步,所以探索了更多的环境理解方面的内容。所以转向dense slam system。


这是5年前 ice robotics lab tom whelan的一个工作

有很多方法表示一个三维场景 这个工作使用一系列的disk 创建了三维场景。使用disk 比较高效 可以做到闭环检测 ,这在kinectFusion中是做不到的。
下一个阶段的工作就是尝试在地图中添加语义层了。这时候有了深度学习这种工具


比较有吸引力的两种labelling角度:
一是view based labeling
另一个是对整个3dmap惊醒 labelling


系统越来越复杂 计算量越来越大
如何把这些计算量放到我们想要的设备上
或者如何把系统编程我们能够处理的计算量层面上。
有两个我们比较关注的地方
representation,地图表示方法,如何把地图表示的更简单
Hardware

这是已经做过的一些工作。


2013的工作 slam中的object


使用深度学习预测object形状


未来可能会有可编程的camera 出现。





极快的提高BA的速度,是普通CPU上速度的20倍
空间AI一直是很吸引我的方向,欢迎交流。
大佬讲的内容很丰富。
RL可能是我以前没有接触的方面。
最后赞叹一下,大佬厉害。

相关

https://engineering.stanford.edu/events/robotics-today-andrew-davison-slam-spatial-ai
https://www.bilibili.com/video/BV1Qk4y167xF?from=search&seid=12815820081790015855
https://www.edge-ai-vision.com/2020/05/slamcore-debuts-full-stack-spatial-ai-sdk-in-industry-competition/

Spatial AI相关推荐

  1. OpenCV 发起 Spatial AI挑战赛

    由Intel赞助的OpenCV Spatial AI竞赛日前已经开始报名,获胜的前三支队伍将获得6000美元的奖金. 本次竞赛的主题是在嵌入式系统上完成一个自定义的Spatial AI项目. 如何参加 ...

  2. 2022 OpenCV AI 竞赛来啦!详细介绍Spatial AI赛道!

    消息快播:OpenCV众筹了一款ROS2机器人rae,开源.功能强.上手简单.来瞅瞅~ 编辑:OAK中国 首发:oakchina.cn 喜欢的话,请多多

  3. opencv图像深度-1_OpenCV空间AI竞赛之旅(第1部分-初始设置+深度)

    opencv图像深度-1 OpenCV空间AI竞赛 (OpenCV Spatial AI Competition) Recently, the people at OpenCV launched th ...

  4. OpenCV AI Kit (OAK) 创始人Brandon Gilles访谈全记录

    本文中,我们采访了PyImageSearch的忠实读者.OpenCV AI Kit (OAK)创始人--Brandon Gilles,他带来的OAK彻底颠覆了人们应用嵌入式计算机视觉和深度学习的方式. ...

  5. OpenCV之AI工具包介绍(OAK-1和OAK-D)

    这个小工具适用于不断发展的计算机视觉和三维感知领域,它将许多功能集成到一个小单元中. 我开始探索OpenCV AI Kit D(OAK-D)是因为OpenCV AI的竞赛.这是一个庆祝OpenCV成立 ...

  6. ChatGPT加持的AIGC时代,600多个AI工具助力超级个体的崛起

    0. ChatGPT脑洞 类目:社群 网址:707748831 介绍:关于AIGC的一切 1. Masterpiece Studio  类目:3D 网址:https://masterpiecestud ...

  7. AI工具合集!一共600+覆盖全行业,除了ChatGPT,那你也会喜欢这些其他的AI工具

    如果你喜欢ChatGPT,那你也会喜欢这些其他的AI工具. AI正在改变我们的工作方式,我不想错过充分利用它的机会,所以我尝试了一系列AI工具来节省时间,提高我的工作效率. 这里有个集合了600+ai ...

  8. 全站最详细OpenCV AI开发套件OAK(OpenCV AI Kit)介绍

    消息快播:OpenCV众筹了一款ROS2机器人rae,开源.功能强.上手简单.来瞅瞅~ 编辑:OAK中国 来源:oakchina.cn 内容可能会不定期更新,最新内容请参考源地址. 前言 Hello, ...

  9. 今晚 8 点直播 | OpenCV 20 年,首款开源软硬一体的 OAK 套件来了!

    从 2000 年首个开源 OpenCV Alpha 版本,到不久前刚刚发布的 OpenCV 4.4,跨平台计算机视觉库 OpenCV 在不知不觉间已经走过了 20 个年头. 相信不少 IT.AI 的从 ...

最新文章

  1. Java是如何加载资源文件的?(源码解毒)
  2. php实现隐藏字符串的功能
  3. C# 三种方式实现Socket数据接收(经典)
  4. 利用tabluea分析数据的案例_利用德温特分析Dartsip的案例检索结果
  5. java 调用linux 脚本并获取返回值
  6. TCL 中upvar 用法 (摘自http://www.cnblogs.com/kane1990/archive/2011/12/19/2293981.html)
  7. [Leedcode][JAVA][第1248题][统计「优美子数组][找规律]
  8. gatsby_将Gatsby默认启动程序转换为使用样式化组件
  9. 新闻列表页flex_C端列表页如何设计?
  10. continue 与break 的区别
  11. net.sf.hibernate.util 总结
  12. 理解伪元素:before和:after
  13. android组件不能加适配器,Android 针对继承BaseAdapter的自定义适配器应注意的几个地方...
  14. C++模板编程(18)---模板实例化instantiation
  15. 鱼眼镜头的成像原理到畸变矫正(完整版)
  16. opencv imwrite()保存图片崩溃
  17. summernote 添加emoji表情包
  18. python: 打包并生成可执行文件 exe
  19. 计算机阴影字 操作步骤,计算机一级Photoshop操作辅导:阴影字
  20. 自动化测试之selenium介绍

热门文章

  1. 网吧无盘服务器2021,云更新无盘客户端
  2. Html5实现iPhone开机界面
  3. OSChina 周二乱弹 ——同桌男孩子动手动脚,我该怎么办
  4. Fusion360显示模糊怎么办?
  5. 前端背景图放置_如何在css中添加背景图?
  6. 如何在线将PDF文档压缩到最小?
  7. word批注怎么删除计算机名字,【2人回答】Word批注中的名字怎么删除?-3D溜溜网...
  8. Java SPI机制详解
  9. 根据 Excel 中的数据批量修改文件的扩展名
  10. 观看:使用治具和工厂管理样本数据