带有ResNet-101的YolactEdge在Jetson AGX Xavier上的速度高达30.8 FPS,在RTX 2080 Ti上的速度为172.7 FPS,AP性能超强!速度是目前主流方法的3-5倍,代码于1小时前刚刚开源!

注:文末附【图像分割】学习交流群

YolactEdge: Real-time Instance Segmentation on the Edge (Jetson AGX Xavier: 30 FPS, RTX 2080 Ti: 170 FPS)

  • 作者单位:UC Davis, 亚马逊(算是原YOLACT团队了)
  • 代码:https://github.com/haotian-liu/yolact_edge
  • 论文:https://arxiv.org/abs/2012.12259

我们提出了YolactEdge,这是第一种竞争性实例分割方法,可以在小型边缘设备上以实时速度运行。具体来说,在550x550分辨率的图像上,带有ResNet-101主干的YolactEdge在Jetson AGX Xavier上的运行速度高达30.8 FPS(在RTX 2080 Ti上的运行速度为172.7 FPS)。

为了实现这一目标,我们对基于图像的最新实时方法YOLACT进行了两项改进:

(1)TensorRT 优化,同时谨慎权衡速度和准确性


(2)利用新的特征warping模块视频中的Temporal Redundancy。


实验结果

在YouTube VIS和MS COCO数据集上进行的实验表明,与现有的实时方法相比,YolactEdge的速度提高了3-5倍,同时具有极好的mask和box检测精度。 我们还进行消融研究,以剖析我们的设计选择和模块。

图像分割交流群

建了CVer-图像分割交流群!想要进分割学习交流群的同学,可以直接加微信号:CVer5555。加的时候备注一下:图像分割+学校+昵称,即可。然后就可以拉你进群了。

强烈推荐大家关注CVer知乎账号和CVer微信公众号,可以快速了解到最新优质的CV论文。

YolactEdge:边缘设备上的实时实例分割(Xavier: 30 FPS, RTX 2080 Ti:170 FPS)相关推荐

  1. YolactEdge:首个开源边缘设备上的实时实例分割(Jetson AGX Xavier: 30 FPS)

    YolactEdge 是第一个可在小型边缘设备上以实时速度运行的有竞争力的实例分割方法. 在550x550分辨率的图像上,以ResNet-101为主干网的YolactEdge 在Jetson AGX ...

  2. 170 FPS!YolactEdge:边缘设备上的实时实例分割,已开源!

    点击上方"CVer",选择加"星标"置顶 重磅干货,第一时间送达 本文转载自:AI人工智能初学者 论文:https://arxiv.org/abs/2012.1 ...

  3. YolactEdge: Real-time Instance Segmentation on the Edge (Jetson AGX Xavier: 30 FPS, RTX 2080 Ti: 170

    带有ResNet-101的YolactEdge在Jetson AGX Xavier上的速度高达30.8 FPS,在RTX 2080 Ti上的速度为172.7 FPS,AP性能超强!速度是目前主流方法的 ...

  4. 边缘设备上的实时AI人员检测:以实时模式检测视频中的人员

    下载数据-19.3 MB 下载模型-43.5 MB 下载结果-36.66 MB 这是七篇系列文章中的最后一篇.到目前为止,我们已经有了用于人员检测的DNN模型和用于在Raspberry Pi设备上启动 ...

  5. 边缘设备上的实时AI人员检测:检测视频中的人员

    下载数据-19.3 MB 下载模型-43.5 MB 下载结果-36.66 MB 从本系列的前几篇文章中,我们获得了使用SSD DNN模型检测图像中人物的Python代码.而且我们已经展示了该代码可以在 ...

  6. 边缘设备上的实时AI虫害消除:入门

    目录 介绍 选择器与检测器 实时性呢? 下一步 在这里,我们从使用AI和DNN的角度阐述了害虫消除的问题.然后,我们提出两种可能的解决方案:1--使用预训练的SSD模型检测猫.羊和其他动物:2--使用 ...

  7. 边缘设备上的实时AI人员检测:入门

    下载数据-19.3 MB 下载模型-43.5 MB 下载结果-36.66 MB 得益于深度学习(DL),实时视频流中的人的实时检测几年前就已经解决了.但是,在边缘和物联网设备上并不总是那么容易,因为它 ...

  8. 边缘设备上的实时AI人员检测:在Raspberry Pi上启动SSD

    下载数据-19.3 MB 下载模型-43.5 MB 下载结果-36.66 MB 在本系列的最后一篇文章中,我们编写了Python代码,用于使用SSD模型检测图像中的人物.在本文中,我们将介绍在Rasp ...

  9. 边缘设备上的实时AI人员检测:在Raspberry Pi上测试SSD模型

    下载数据-19.3 MB 下载模型-43.5 MB 下载结果-36.66 MB 在本系列的上一篇文章中,我们已经在Raspberry Pi设备上启动了人体检测软件.在这一本文中,我们将比较Raspbe ...

最新文章

  1. 服务器比普通电脑响应速度快吗,云服务器比普通的快吗
  2. python transformer category_Python 生成VOC格式的标签实例
  3. Centos7 编译安装 Nginx、MariaDB、PHP
  4. Atitit.upnp SSDP 查找nas的原理与实现java php c#.net c++
  5. php 的函数参数值类型限定
  6. halcon初学者知识【16】如何将Image图象的区域拷贝出来?
  7. dao传递类参数 mybatis_MyBatis DAO层传递参数到mapping.xml 几种方式
  8. iis服务器建立动态网站,09-IIS添加动态网站
  9. Windows下Core Audio APIs的使用简介
  10. TiDB 在金融关键业务场景的实践
  11. [SQL Server]重命名数据库【转】
  12. mysql题目_MySQL练习题
  13. Eclipse无提示的解决办法 和 内容辅助技巧
  14. python 日期格式打印_Python打印格式
  15. 最大似然估计、MAP及贝叶斯估计
  16. 设计模式详解(链接)
  17. vmware 无人参与应答文件包含的产品密钥无效
  18. esxi 部署模板_vSphere通过模板批量部署虚拟机
  19. 淘宝天猫返利,是怎么一种运作模式?
  20. python使用126发邮件代码

热门文章

  1. 计算机系老师带教记录册,学业导师指导记录
  2. 发那科 CNC 模拟器 虚拟机 FAUNC GUI Focas开发必备
  3. 八、 Excell二级下拉菜单制作和回归分析
  4. Center-based 3D Object Detection and Tracking
  5. 多数CEO预计受疫情影响未来半年收入将下降;上海国际酒店投资加盟展将延期 | 美通企业日报...
  6. 程序员简历如何脱颖而出
  7. java集成微信支付(完整流程)
  8. 什么人不在生死簿_人在做,天在看:阎王爷“生死簿”上到底写了什么?
  9. 手机APP商城定制开发对于企业有哪些好处
  10. 在blender中使用python脚本批量复制平移生成模型