点击上方“3D视觉工坊”,选择“星标”

干货第一时间送达

Magic Leap研究人员提出了一种基于AI的方法,只需一个RGB相机即可捕获3D场景。

该方法称为Atlas,主要有两步AI过程,该过程从平面2D图像生成3D环,无需另使用立体摄像机或特殊的雷达系统对环境进行先前的3D分析。研究人员认为,基于AI的2D图像的重建比基于3D数据的方法更有效。

在左侧,你可以看到完整的3D模型,在图集重建的中间,正3D模型是使用MVDepthNet创建的。

为图像分析而优化的神经网络将各个2D图像彼此独立地分割,并基于相机数据创建简单的3D模型。AI重建:比3D扫描仪更好?神经网络可以完善和补充3D模型,这使研究人员可以更好的完整创建场景的3D模型,甚至可以创建一些在扫描过程中隐藏的区域。

关于ScanNet:ScanNet是一个RGB-D视频数据集,在超过1500次扫描中可包含250万次浏览,带有3D相机姿态、表面重构和实例级语义分割的注释。为了收集这些数据,设计了一个易于使用和可扩展的RGB-D捕获系统,包括自动表面重建和众包语义标注。使用这些数据有助于在一些3D场景理解任务中实现最先进的性能,包括3D对象分类和CAD模型检索。链接地址:http://www.scan-net.org/

根据研究人员的说法,他们的AI支持的2D-3D重建方法击败了定量和定性的常见且更复杂的方法,后者依赖于基于硬件的环境3D分析。

但是,需要快速的PC硬件:在Nvidia Titan RTX上,重建当前以每秒约14帧的速度运行。因此,3D重建的应用(例如AR眼镜)可以实时地以3D方式测量房间并在其中精确放置数字对象。

相关论文地址:

https://arxiv.org/abs/2003.10432

Githubu项目地址:

https://github.com/magicleap/Atlas

参考链接:

https://mixed.de/atlas-ki-basierte-3d-rekonstruktion-mit-nur-einer-kamera/

本文仅做学术分享,如有侵权,请联系删文。

下载1

在「3D视觉工坊」公众号后台回复:3D视觉即可下载 3D视觉相关资料干货,涉及相机标定、三维重建、立体视觉、SLAM、深度学习、点云后处理、多视图几何等方向。

下载2

在「3D视觉工坊」公众号后台回复:3D视觉优质源码即可下载包括结构光、标定源码、缺陷检测源码、深度估计与深度补全源码、点云处理相关源码、立体匹配源码、单目、双目3D检测、基于点云的3D检测、6D姿态估计源码汇总等。

下载3

在「3D视觉工坊」公众号后台回复:相机标定即可下载独家相机标定学习课件与视频网址;后台回复:立体匹配即可下载独家立体匹配学习课件与视频网址。

重磅!3DCVer-学术论文写作投稿 交流群已成立

扫码添加小助手微信,可申请加入3D视觉工坊-学术论文写作与投稿 微信交流群,旨在交流顶会、顶刊、SCI、EI等写作与投稿事宜。

同时也可申请加入我们的细分方向交流群,目前主要有3D视觉CV&深度学习SLAM三维重建点云后处理自动驾驶、CV入门、三维测量、VR/AR、3D人脸识别、医疗影像、缺陷检测、行人重识别、目标跟踪、视觉产品落地、视觉竞赛、车牌识别、硬件选型、学术交流、求职交流等微信群。

一定要备注:研究方向+学校/公司+昵称,例如:”3D视觉 + 上海交大 + 静静“。请按照格式备注,可快速被通过且邀请进群。原创投稿也请联系。

▲长按加微信群或投稿

▲长按关注公众号

3D视觉从入门到精通知识星球:针对3D视觉领域的知识点汇总、入门进阶学习路线、最新paper分享、疑问解答四个方面进行深耕,更有各类大厂的算法工程人员进行技术指导。与此同时,星球将联合知名企业发布3D视觉相关算法开发岗位以及项目对接信息,打造成集技术与就业为一体的铁杆粉丝聚集区,近2000星球成员为创造更好的AI世界共同进步,知识星球入口:

学习3D视觉核心技术,扫描查看介绍,3天内无条件退款

圈里有高质量教程资料、可答疑解惑、助你高效解决问题

整理不易,请给工坊点赞和在看

仅需一部摄像机即可实现基于AI的3D重建相关推荐

  1. 基于飞桨PaddlePaddle实现素描线稿提取——仅需一行代码即可实现模型调用

    一行代码实现从彩色图提取素描线稿 一.前言:初识PaddleHub 预训练模型(Pre-Trained Models) 二.构建Module的大框架 1.将模型文件存放在infer_model下 2. ...

  2. 网页图片下载不了?不,仅需三步即可

    在浏览网页时,我们会发现一些自己喜欢的图片.当要下载时,却发现下载不了. 别急,仅需简单的三步即可. 一. 鼠标放在要下载的图片上(注意:一定要把鼠标放在要下载的图片上,不然,下一步会定位不到图片目录 ...

  3. GitHub 标星 119K+!这些神器仅需一行代码即可下载全网视频!

    作者 | JackTian 来源 | 杰哥的IT之旅(ID:Jake_Internet) 头图 |  CSDN 下载自东方IC 大家好,我是 JackTian. 今天这篇文章的内容对于经常浏览各大视频 ...

  4. 【效率】GitHub 标星 119K+!这些神器仅需一行代码即可下载全网视频!

    作者 | JackTian 来源 | 杰哥的IT之旅(ID:Jake_Internet) 转载请联系授权(微信ID:Hc220066) 大家好,我是 JackTian. 今天这篇文章的内容对于经常浏览 ...

  5. 牛气!GitHub 标星 119K+!这些神器仅需一行代码即可下载全网视频!

    作者 | JackTian 来源 | 杰哥的IT之旅(ID:Jake_Internet) 今天这篇文章的内容对于经常浏览各大视频网站的同学来说,是一大神器工具.当你看到自己目前所需的视频时想尽各种办法 ...

  6. GitHub 标星 120K+!这些神器仅需一行代码即可下载全网视频!

    大家好,我是 JackTian. 今天这篇文章的内容对于经常浏览各大视频网站的同学来说,是一大神器工具.当你看到自己目前所需的视频时想尽各种办法保存至本地,方便后期再次回看.恰巧有些视频可能需要会员才 ...

  7. 喜马拉雅小雅Nano首发,仅需1元即可预约限量抢购

    文|曾响铃 来源|科技向令说 ​ 今天,喜马拉雅上线首发小雅Nano,喜欢智能音箱的粉丝们又有福利了.小雅Nano是一款能免费听喜马拉雅会员精品的AI音箱产品.想要第一时间尝鲜的话很简单,只要在喜马拉 ...

  8. 仅一台摄像机即可进行3D身体重建

    点击上方"3D视觉工坊",选择"星标" 干货第一时间送达 在计算机视觉会议CVPR上,Facebook展示了一种算法,该算法可以仅通过一个摄像头就可以为穿着衣服 ...

  9. win10 anaconda3环境下安装tensorflow-GPU(仅需两行代码即可)

    教程最好的地方在于不是纯粹的安装固定版本的 tensorflow 某个版本,而是提供了一个安装的方法,利用本教程的安装理念, tensorflow的任何版本随心所欲安装,再也不用复制.粘贴 别人的版本 ...

最新文章

  1. 图解windbg查看Win7结构体
  2. P3338-[ZJOI2014]力【FFT】
  3. properties随机数与配置文件占位符
  4. react hoc_如何使用HOC模式开发React超能力
  5. [Vue.js] 基础 -- Vue实例
  6. 阻塞和非阻塞、同步和异步 、五种IO模型
  7. JSP中URL路径获取问题
  8. 前端实现红包雨功能_微信隐藏的7个实用功能,你都知道吗?真的白玩这么久微信...
  9. 【剑指offer】之字形打印二叉树,C++实现
  10. Object.prototype.toString方法
  11. 在线教育技术方案,究竟哪种好?
  12. 我的世界java平台缺少证书_解决https安全证书缺少的问题
  13. iphone android 传照片,教你如何在两台iPhone之间传照片
  14. 获取本地视频文件的缩略图
  15. han_attention(双向GRU+attention)(imdb数据集---文档分类)
  16. Chrome 66之后禁止网页声音自动播放问题解决
  17. linux密码配置文件详解,用户配置文件与密码配置文件
  18. 计算机学院青年教师讲课,计算机学院第六届青年教师讲课比赛成功举行
  19. 微型计算机实验报告温度控制,温度控制实验报告.doc
  20. 阿里云RRpc请求消息普适发送端

热门文章

  1. 教你五分钟入门使用html5 svg绘制图形
  2. Java_JAVA6动态编译的问题
  3. 外网主机访问虚拟机下的Web服务器_服务器应用_Linux公社-Linux系统门户网站
  4. 女朋友让我给她讲讲什么是比特币,她想买两个。
  5. 9月8日凌晨,字节跳动全员收到邮件!因为这件事,所有人多发半个月工资!字节沸腾!网友酸了!...
  6. 一篇与众不同的 String、StringBuilder 和 StringBuffer 详解
  7. Java是如何实现自己的SPI机制的? JDK源码(一)
  8. 就在几天前,听说用了 YYYY-MM-dd 的程序员,都在加班改 Bug !
  9. 从苦逼撸代码到年入上百亿,成为商界领袖,IT从业者想要通过自己的努力改变现状,只靠单纯写代码远远不够...
  10. C++模拟游戏中鼠标点击和键盘按键