全球范围内首次全程云端开展,主办方希望将比赛打造成「机器人抓取技术领域的 ImageNet」。

日前,由阿里巴巴联合主办的全球首个机器人抓取云竞赛落幕,59 个顶级研究团队经过角逐,最终华中科技大学夺冠。

机器人抓取一直以来都被认为是机器人领域中的典型任务,其实际应用面广、但需要复杂的研究过程并实现软硬件一体化。

近年来,这一领域的研究有非常大的突破。目前主流服务机器人的全自动行驶功能解决的是移动问题,只有配置了机械臂,才能执行更复杂、更贴近人类需求的任务。

其中的一个典型应用场景就是机房运维:阿里巴巴达摩院人工智能实验室与阿里云基础设施部门联合开发了全球首个可以在数据中心自动化运维的智能机器人「天巡」。它的技能是「更换硬盘」:在五分钟内完成故障硬盘的更换,并且全天候 24 小时执行机房自动巡检和故障硬盘更换工作。

当然,运行这样一套系统需要很强的综合技术实力,包括软件开发、感知算法、机械臂 / 执行器控制算法、模拟器等一系列技术能力。如何在充满不确定性的复杂场景内生成有效的机械臂控制轨迹,并成功抓取未知形状的物体是相当具有挑战性的工作。

这需要全球学界和业界共同探索。在 10 月 24 举行的 IROS 2020 上,OCRTOC 机器人挑战赛应运而生。

它是世界首次机器人抓取云竞赛,由阿里巴巴人工智能实验室与美国南佛罗里达大学、加州大学圣地亚哥分校、伍斯特理工学院、德国航空航天中心、加拿大西蒙菲沙大学等共同举办。

最终,共计 59 支队伍报名参加了竞赛,包括清华大学、香港科技大学、慕尼黑工业大学、卡耐基梅隆大学、普林斯顿大学、印度理工学院等研究机构。

他们想打造「机器人抓取技术领域的 ImageNet」

这项竞赛聚焦机器人抓取能力以及桌面物品整理的应用场景,旨在成为「机器人抓取技术领域的 ImageNet」

竞赛官网:http://www.ocrtoc.org/#/

OCRTOC 竞赛获得了国际电气电子工程师协会两大技术委员会的大力支持(IEEE RAS Technical Committee on Robotic Hands, Grasping and Manipulation 以及 IEEE RAS Technical Committee on Mobile Manipulation),并成为国际机器人顶会 IROS 2020 的正式官方赛事。竞赛由阿里云天池平台提供云上竞赛环境,并链接开发者深度参与,高质量运作。

云端竞赛 OCRTOC,包含这些任务

OCRTOC 竞赛的主要任务是整理物体:参赛者会拿到一个包含 5 至 10 个物体的清单,以及每个物体被期望放置的位置和姿态;参赛者需要在规定时间内,正确识别出需要被抓取的物体,将其移动到指定位置,并按照指定的姿态摆放物体。根据物体的数量和放置要求,任务一共分为 5 个难度等级,主办方为每个等级提供了数百个模拟器场景供参赛者练习。

竞赛全程采用云上模式开展,分为仿真阶段和真机阶段两部分,阿里云天池平台为竞赛的仿真阶段提供了提交系统和计算资源,竞赛的真机阶段在阿里巴巴人工智能实验室提供的多套标准硬件系统上进行。

在仿真阶段,主办方提供了 Gazebo 与 Sapien 两种仿真器来模拟真实环境,参赛团队可以在任一仿真器中开发自己的参赛方案,并在仿真阶段末尾将参赛方案提交到天池平台。仿真阶段中取得优异成绩的团队将被邀请进入真机阶段。

在真机阶段,主办方提供了多套标准化硬件设备,并为每个参赛团队提供远程调试时间。参赛团队可以在主办方工作人员的协助下,在标准化的硬件平台上远程调试他们的参赛方案。真机阶段结束后,由主办方使用一组相同的任务评价各个团队的解决方案并决出前三名。

与传统的单任务竞赛不同,OCRTOC 竞赛需要多个算法模块共同协作才能得到好的结果,在实际应用方面的参考性很强。在评价指标的设置上,主办方直接评估最终物体姿态和目标姿态之间的偏差。

总体来看,参赛团队的解决方案基本按照「采集数据、识别物体、抓取位姿生成」的逻辑主线,技术模块主要分为「感知」与「规划控制」。

「感知模块」负责识别要抓取的物体并生成抓取位姿,主要方法有三类:

  • 第一类:直接对点云数据做分割,聚类,通过 KNN 等算法对物体进行分类,再利用一些二指夹爪的抓取点生成算法继续处理;
  • 第二类:利用深度学习的算法获取物体的 6D Pose,例如 PVN3D、PoseCNN 等算法,再利用一些二指夹爪的抓取点生成算法继续处理;
  • 第三类:利用一些 End-to-End 的方法直接从图像生成抓取点,例如 GQ-CNN 等算法。

「规划控制模块」,参赛者主要的方案有两类。一类是使用 Moive-It 做规划控制,另外一类是直接使用 UR 的 pos_traj_controller 做规划控制。

华科夺冠,港科大、清华团队位列第二、第三

经过两个多月的激烈角逐,三名获胜者脱颖而出,分别是来自华中科技大学的 iRobotCNC 团队、来自香港科技大学的 PHAI_robotics 团队和来自清华大学的 THU-ROBOT 团队。

为什么要举办这一次的机器人桌面物品整理云竞赛?对于活动主办方阿里巴巴人工智能实验室来说,举办竞赛的其中一个目标是将整套技术方案能应用在实际场景中

阿里巴巴人工智能实验室研发团队主要涵盖定位及建图、视觉感知、导航及规划、硬件设计、云端一体化工程配套研发五个方面,除了天巡机器人之外,实验室已经在多个业务场景落地了机器人技术,比如阿里巴巴未来酒店(菲住不渴)的酒店配送机器人,以及负责住宅小区的物流小车等。

OCRTOC 组委会主席、阿里巴巴人工智能实验室负责人谭平教授介绍道:「机器人是人工智能的终极应用场景。最近在学术界大家也越来越受关注embodied AI(实体化的人工智能)。我们希望通过竞赛的方式来吸引更多的人投入到这个方向的研究中来。

OCRTOC 竞赛是全球范围内首个全程云端开展的机器人抓取大赛。本项赛事聚焦机器人抓取能力以及桌面物品整理的应用场景,提供标准化的硬件和竞赛任务,公平地横向比较各参赛团队的算法水平。阿里云天池平台为本次大赛提供了云竞赛支持平台,参赛者即使没有机器人硬件也可以参赛,这为广大科研工作者提供了便利的实验环境。借此,大赛主办方希望通过降低该领域的硬件门槛来鼓励更多的科研工作者投入到该领域的研究工作中,从而推进整个技术领域的发展。」

参赛方案地址:

  1. https://tianchi.aliyun.com/forum/postDetail?spm=5176.12282027.0.0.13f71580y6pkp6&postId=143971
  2. https://tianchi.aliyun.com/forum/postDetail?spm=5176.12282027.0.0.db051580YJpuLA&postId=144088
  3. https://tianchi.aliyun.com/forum/postDetail?spm=5176.12282027.0.0.13f71580y6pkp6&postId=144750

​全球首个机器人抓取云竞赛落幕,华科夺冠,中国团队包揽前三相关推荐

  1. 全球首个机器人抓取云竞赛落幕,华科夺冠,中国团队包揽前三

    来源:机器之心 本文约2300字,建议阅读5分钟. 全球范围内首次全程云端开展,主办方希望将比赛打造成"机器人抓取技术领域的 ImageNet". 日前,由阿里巴巴联合主办的全球首 ...

  2. 基于点云的机器人抓取识别综述

    机器人作为面向未来的智能制造重点技术,其具有可控性强.灵活性高以及配置柔性等优势,被广泛的应用于零件加工.协同搬运.物体抓取与部件装配等领域,如图1-1所示.然而,传统机器人系统大多都是在结构化环境中 ...

  3. 基于视觉的机器人抓取:从物体定位、物体姿态估计到平行抓取器抓取估计

    编者荐语 抓取综合方法是机器人抓取问题的核心,本文从抓取检测.视觉伺服和动态抓取等角度进行讨论,提出了多种抓取方法. 转载自丨3D视觉开发者社区 目 录 / contents 1. 引言 1.1  抓 ...

  4. 谷歌X最新开源任务驱动的类级别机器人抓取CaTGrasp!

    点击上方"3D视觉工坊",选择"星标" 干货第一时间送达 作者丨bowen 来源丨计算机视觉life 大家好,今天给大家介绍谷歌X最新开源任务驱动的类级别机器人 ...

  5. 大盘点|基于RGB图像下的机器人抓取

    点击上方"3D视觉工坊",选择"星标" 干货第一时间送达 前言 近期读取了一些最新基于RGB图像下的机器人抓取论文,在这里分享下思路. 1.Optimizing ...

  6. 机器人抓取领域相关数据集

    点击上方"3D视觉工坊",选择"星标" 干货第一时间送达 前言 针对机器人抓取中的检测.分割.姿态识别.抓取点检测.路径规划等任务,总结了对应的数据集,在这里分 ...

  7. 【科普】3D视觉技术在机器人抓取作业中的应用

    点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达 摘要 本文主要研究3D视觉技术在机器人抓取作业中的应用,总 结了3 ...

  8. 机器人抓取方式,值得研究。

    1 智能抓取 有人跟机器人说: "嗨,机器人,我想要吃东西."机器人去桌上拿起一个水果. "嗨,机器人,我想要看书."机器人又拿来一本书. "嗨,机器 ...

  9. 深度学习 autoencoder_笔记:李淼博士-基于模仿学习的机器人抓取与操控

    说明:本文是Techbeat平台上李淼博士的讲座:"基于模仿学习的机器人抓取与操控"的总结笔记. 原视频: TechBeat - 让AI大有可为​www.techbeat.net ...

  10. 物体抓取位姿估計算法綜述_3D视觉技术在机器人抓取作业中的应用

    摘要本文主要研究3D视觉技术在机器人抓取作业中的应用,总 结了3D视觉技术在识别.定位物体时面临的挑战,给出了抓取作业机器 人3D视觉系统的设计方法,归纳了现有的3D表面成像方法和视觉处理算 法,最后 ...

最新文章

  1. termux pythonlxml安装_将安卓手机打造成你的python全栈开发利器
  2. MySQL索引类型 btree索引和hash索引的区别
  3. Render errors:One or more layouts are missing the layout_width or layout_height attributes
  4. 接口测试怎么进行,如何做好接口测试
  5. carbon安装win7 thinkpad x1_联想ThinkPad X1 Carbon 2018笔记本win10怎么改win7
  6. qt-opensource-windows-x86-vs2010-4.8.6 + qt-creator-windows-opensource-2.8.0
  7. 窗口操作-关闭,最小化
  8. oraccle 索引管理
  9. 【java笔记】包装类
  10. SCI论文编辑教你如何准备SCI论文和写作
  11. 终于实现不同站点间list共享了!哈哈
  12. Hbase启动hbase shell运行命令报Class path contains multiple SLF4J bindings.错误
  13. 黑群晖XPEnoboot for DSM 5.2-5967.1
  14. 深度学习---之显存单位,KiB,MiB与MB区别
  15. Android解决Could not find manifest-merger.jar问题
  16. 4-11 Isomorphic (10分)
  17. 多模态情感分析论文解读——CTFN模型
  18. 企业成功的秘密:成为独角兽
  19. To B业务与To C业务(产品),用户需求,产品文档,技术和业务
  20. 【单片机基础】ADC0832详解

热门文章

  1. 华为鸿蒙用不用清理内存卡,华为这6个设置必须要关,否则天天清理内存也没用,关了再用5年...
  2. 如何带移动技术团队?
  3. LaTex 插入超链接
  4. 阿兰图灵和冯诺依曼,谁才是可称得起计算机之父呢?
  5. numpy.asarray()函数
  6. word文档怎样删除最后一页空白页
  7. 什么是数据可视化大屏?有哪些优点
  8. 涡扇发动机的预测性维护
  9. moments音标_moments是什么意思_moments的翻译_音标_读音_用法_例句_爱词霸在线词典...
  10. python断言语句_Python断言assert的用法代码解析