在线可玩 | 给AI一张高清照片,分分钟还你细节满满的3D人体模型,GitHub标星3.6k...
本文经AI新媒体量子位(公众号 ID: QbitAI)授权转载,转载请联系出处
本文长度为800字,建议阅读5分钟
网友们都玩出花儿了。
手动对人体进行3D建模并非易事。
但现在,只给AI一张高清照片,它还真就能分分钟搞定这件事。
甚至还挺高清,衣服褶皱、面部表情,细节一点不少。
这项新研究来自南加州大学和Facebook,中选CVPR 2020。
并且已经在GitHub上开源,标星3.6k,还在一天内就涨了207颗星,登上GitHub热榜。
一起来看看,这究竟是如何实现的。
多级像素对齐隐式函数
这只AI名叫PIFuHD,其基础框架是ICCV 2019上已经登场的像素对齐隐式函数PIFu。不过,PIFu以分辨率为512×512的图像作为输入,输出的3D模型分辨率不高。
为了得到高分辨率的输出,在这项研究中,研究人员在PIFu的基础之上,额外叠加了一个像素对齐的预测模块。
如图所示,顶部粗层次像素对齐预测器捕捉全局的3D结构。高分辨率的细节则由下面的Fine模块添加。
具体而言,fine模块将1024×1024的图像作为输入,并将其编码成高分辨率的图像特征(512×512)。
此后,高分辨率特征嵌入和第一个模块中得到的3D嵌入被结合起来,用以预测占位概率场。
为了进一步提高重建的质量和保真度,该方法还会在图像空间中预测正反两面的法线图,并将其作为额外的输入反馈给网络。
细节捕捉高手
所以,跟前辈们相比,PIFuHD究竟进步了多少?
研究人员在People Snapshot dataset数据集上将其与此前的SOTA方法进行了定性比较。
可以明显看出,由于PIFuHD充分利用了基础形状和精细形状,能够直接在像素级别上预测3D几何形状,它对输入图像的细节把握更加精准,重建出来的3D人体模型分辨率更高。
Demo可玩
论文代码已经开源,并且,研究团队还在Colab上提供了在线试玩。
输入一张你自己的照片,几分钟之内就能收获一个数字3D的你。
真·3D建模师福音。
结合可以让3D模型动起来的Mixamo食用,网友们都玩嗨了。
赶快上手玩起来吧~
作者简介
论文一作斋藤俊辅(Shunsuke Saito),目前在Facebook Reality Labs担任研究科学家,致力于深度人类数字化的有效数据表征研究。
他在南加州大学工作期间,曾与计算机图形学领域知名华人教授黎颢合作。
传送门
GitHub地址:
https://github.com/facebookresearch/pifuhd
Demo地址:
https://colab.research.google.com/drive/11z58bl3meSzo6kFqkahMa35G5jmh2Wgt?usp=sharing#scrollTo=afwL_-ROCmDf
在线可玩 | 给AI一张高清照片,分分钟还你细节满满的3D人体模型,GitHub标星3.6k...相关推荐
- 给AI一张高清照片,分分钟还你细节满满的3D人体模型,GitHub标星3.6k | 在线可玩...
点击上方,选择星标或置顶,不定期资源大放送! 阅读大概需要15分钟 Follow小博主,每天更新前沿干货 手动对人体进行3D建模并非易事. 但现在,只给AI一张高清照片,它还真就能分分钟搞定这件事. ...
- 【CV】给AI一张高清照片,分分钟还你细节满满的3D人体模型,GitHub标星4.4k | 在线可玩...
继上次分享的中科院博士用一张"静态图"就能实现人脸3D建模新研究,又一重要力作. 手动对人体进行3D建模并非易事. 但现在,只给AI一张高清照片,它还真就能分分钟搞定这件事. 甚至 ...
- GitHub标星3.6k | 给AI一张高清照片,分分钟还你3D人体模型
点上方蓝字计算机视觉联盟获取更多干货 在右上方 ··· 设为星标 ★,与你不见不散 仅作学术分享,不代表本公众号立场,侵权联系删除 转载于:量子位 AI博士笔记系列推荐 周志华<机器学习> ...
- 火到海外破圈!这个国产AI项目GitHub标星8.6k,价值千万
Q:最顶尖的AI技术到底离我们有多远? A:三行Python代码的距离. 导读 今天小编为大家推荐一个AI领域相当优秀的项目, 粗略估计,这个项目价值超过千万, 当前star 8.6k,大胆预判,这个 ...
- 神漏洞!一张高清照片,破解三星Galaxy S8虹膜识别
本文讲的是 神漏洞!一张高清照片,破解三星Galaxy S8虹膜识别, 生物识别技术再次表现出不靠谱的一面. 就在昨天,三星最新旗舰设备Galaxy S8上的虹膜识别技术被混沌计算机俱乐部(CCC)破 ...
- 新建网站了!Github标星过万的吴恩达机器学习、深度学习课程笔记,《统计学习方法》代码实现,可以在线阅读了!...
吴恩达机器学习.深度学习,李航老师<统计学习方法>,可以说是机器学习入门的宝典.本文推荐一个网站"机器学习初学者",把以上资源的笔记.代码实现做成了网页版,可以在线阅读 ...
- GitHub 标星 2.3k+,比个手势,AI 自动识别 Emoji!
关注 "GitHubDaily" 设为 "星标",每天带你逛 GitHub! 转自量子位,作者圆栗子 一只手势识别 AI,怎样才算得上 (优) 秀啊? 不停地变 ...
- AI说,它可以把你变成个游戏 | 3D人体模型 · CVPR
三维栗子 发自 凹非寺 量子位 报道 | 公众号 QbitAI △ 死亡效应2 搭建3D人体模型,早已是AI驾(le)轻(bu)就(si)熟(shu)的一项工作,不论是在VR里,电影里,还是时尚圈. ...
- 免费在线制图神器!内置13个类别上百个模板,不上水印支持中文版,GitHub标星已破1万2...
乾明 发自 凹非寺 量子位 报道 | 公众号 QbitAI 又一免费制图神器来袭! 名为draw.io,打开网页就能使用,支持中文版,也不会给你上水印. 不只是能让你创建空白图,官方还提供了133个 ...
最新文章
- linux共享文件丢失,【干货分享】linux平台下数据文件被误删后,如何及时得知并进行恢复...
- linux搭建Nexus初次体验
- baidu的服务器数据里面装的都是垃圾!
- PIL.Image convert to numpy array
- [转载]C#中,让组合框(ComboBox)支持拼音首字母检索筛选
- android ProgressBar实现扫描SD卡文件 + SimpleAdapter绑定ListView
- qt release打包发布_几种解决Qt程序打包后无法连接数据库问题的方法
- 阿里巴巴测试相关内容
- Two-Stream RNN/CNN for Action Recognition in 3D Videos-阅读笔记
- VS2010与Windows7共舞:对库进行编程
- 自学编程的12个网站
- 常见路由adsl猫默认密码
- 收银怎样挂单和取单_挂单取单(PC收银)
- Java GUI——Java图形用户界面
- godot引擎学习10
- git Bash 命令行大全
- ROS可以不扫描地图,自己制作地图
- 物联网通信技术|课堂笔记|week8|网络安全学习|加密逻辑|加密算法
- Linux下程序中如何使用mkdir建立文件夹
- 公布一下各类学术杂志的审稿费、版面费
热门文章
- linux+传输文件时卡住,linux - rsync 同步文件时卡住不动
- Spring学习(23)--- AOP之Introductions应用
- Velocity Toolbox
- 数据库名、数据库实例、全局数据库名、服务名、SID等的区别
- SDK与IDE的选择(附上设置默认SDK)
- nginx重新编译安装mysql_Centos 6.5编译安装Nginx+php+Mysql
- MATLAB寻址访问按什么优先,matlab笔记
- mysql 内连接查询慢_MySQL慢查询有2个内连接
- 用大顶堆实现最大优先队列
- 决策树剪枝的方法与必要性