欢迎来到《每周CV论文推荐》。在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的。

基于图像的人脸三维重建在人脸分析与娱乐领域里有巨大的应用场景,本文来介绍初学深度学习单张图像人脸三维重建必须要读的文章。

作者&编辑 | 言有三

1 3DMM与数据集

虽然这里推荐的是深度学习三维人脸重建需要读的文章,但是因为经常需要用到经典的3DMM模型以及一些数据集,包括最著名的中性表情BFM模型及其2017年新增表情的版本,国内浙大开源的带表情的FareWareHouse数据集。

文章引用量:4000+

推荐指数:✦✦✦✦✦


[1] Blanz V, Vetter T. A morphable model for the synthesis of 3D faces[C]//Siggraph. 1999, 99(1999): 187-194.

[2] Cao C, Weng Y, Zhou S, et al. Facewarehouse: A 3d facial expression database for visual computing[J]. IEEE Transactions on Visualization and Computer Graphics, 2013, 20(3): 413-425.

2 3DMM CNN系列

3DMM CNN是早期使用CNN直接估计3DMM模型形状系数的方法,模型简单有效,使用了非对称损失提升性能。

在此之后,3DMM CNN的作者又水了姿态和表情系数的论文。

文章引用量:160+

推荐指数:✦✦✦✦✦


[3] Tuan Tran A, Hassner T, Masi I, et al. Regressing robust and discriminative 3D morphable models with a very deep neural network[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition. 2017: 5163-5172.

[4] Chang F J, Tuan Tran A, Hassner T, et al. Faceposenet: Making a case for landmark-free face alignment[C]//Proceedings of the IEEE International Conference on Computer Vision. 2017: 1599-1608.

[5] Chang F J, Tran A T, Hassner T, et al. ExpNet: Landmark-free, deep, 3D facial expressions[C]//2018 13th IEEE International Conference on Automatic Face & Gesture Recognition (FG 2018). IEEE, 2018: 122-129.

3 Volumetric CNN 

既然CNN这么强大,为什么不直接预测3D坐标呢?Volumetric CNN就是这样的思路,简单直接预测每一个像素,将3D重建当作了一个图像分割问题。

文章引用量:140+

推荐指数:✦✦✦✦✦


[6] Jackson A S, Bulat A, Argyriou V, et al. Large pose 3D face reconstruction from a single image via direct volumetric CNN regression[C]//Proceedings of the IEEE International Conference on Computer Vision. 2017: 1031-1039.

4 PRNet

三维重建需要预测mesh的顶点坐标,但是直接预测是有困难的,PRNet通过一个UV position map来进行表征,方法简单有效,UVMap对于一些其他的应用也是有启示的。

文章引用量:80+

推荐指数:✦✦✦✦✧


[7] Feng Y, Wu F, Shao X, et al. Joint 3d face reconstruction and dense alignment with position map regression network[C]//Proceedings of the European Conference on Computer Vision (ECCV). 2018: 534-551.

MoFa

真实的3D数据集获取成本非常高,因此研究人员常常采用仿真的数据集,但是仿真数据集精度不够。以MoFa为代表的这一类方法不依赖于现在的数据集,它通过将二维图像重建到3维,再反投影回2D图的方案,是非常值得研究的自监督重建方法。

文章引用量:160+

推荐指数:✦✦✦✦✦


[8] Tewari A, Zollhofer M, Kim H, et al. Mofa: Model-based deep convolutional face autoencoder for unsupervised monocular reconstruction[C]//Proceedings of the IEEE International Conference on Computer Vision. 2017: 1274-1283.

6 Survey

最后给大家推荐一个2019年关于3DMM模型的综述文章,作为一周的论文阅读来说,上面的内容已经足够多了。

三维人脸重建是一个很大的坑,Shape from Shading以及Structure from Motion等方法这一次没有介绍,后面再说。关于3DMM模型的基础公众号几年前有过简单的解读,之前的一个计算机视觉大综述也有介绍,大家可以快速参考。

三维人脸重建入门

VR来了,3D人脸重建跟上->《三维人脸重建-3DMM》

【AI白身境】一文览尽计算机视觉研究方向

文章引用量:很新

推荐指数:✦✦✦✦✦


[9] Zheng X, Guo Y, Huang H, et al. A Survey to Deep Facial Attribute Analysis[J]. arXiv preprint arXiv:1812.10265, 2018.

7 如何获取文章与交流

找到有三AI开源项目即可获取。

https://github.com/longpeng2008/yousan.ai


文章细节众多,相关的人脸数据集在以及论文阅读交流在有三AI知识星球中进行,感兴趣可以加入。


总结

三维人脸重建的难点在于数据集的缺乏以及遮挡恢复和细节精度的提升,后续还会推荐一系列研究供大家学习。

有三AI秋季划


有三AI秋季划已经正式启动报名,模型优化,人脸算法,图像质量共24个项目,助力提升深度学习计算机视觉算法和工程项目能力。

转载文章请后台联系

侵权必究




往期精选

  • 【每周论文推荐】 初入深度学习CV领域必读的几篇文章

  • 【每周CV论文推荐】 掌握残差网络必读的10多篇文章

  • 【每周CV论文推荐】 初学者必须精读的5篇深度学习优化相关文章

  • 【每周CV论文推荐】 CV领域中数据增强相关的论文推荐

  • 【每周CV论文推荐】 初学高效率CNN模型设计应该读的文章

  • 【每周CV论文推荐】 初学目标检测必须要读的文章

  • 【每周CV论文推荐】 初学深度学习图像分割必须要读的文章

  • 【每周CV论文推荐】 初学GAN必须要读的文章

  • 【每周CV论文推荐】 深度学习人脸检测入门必读文章

  • 【每周CV论文推荐】 初学深度学习人脸关键点检测必读文章

  • 【每周CV论文推荐】 初学深度学习人脸识别和验证必读文章

  • 【每周CV论文推荐】 初学深度学习人脸属性分析必读的文章

  • 【每周CV论文推荐】 初学活体检测与伪造人脸检测必读的文章

【每周CV论文推荐】 初学深度学习单张图像三维人脸重建需要读的文章相关推荐

  1. 【每周CV论文】初学深度学习图像风格化要读的文章

    欢迎来到<每周CV论文>.在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的. 图像风格化的研究由来以久,这是一个艺术和科学相结 ...

  2. 【每周CV论文】初学深度学习图像修复应该要读的文章

    欢迎来到<每周CV论文>.在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的. 图像修复(image inpainting)或补 ...

  3. 【每周CV论文】初学深度学习图像对比度增强应该要读的文章

    欢迎来到<每周CV论文>.在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的. 图像对比度增强,即增强图像中的有用信息,抑制无用 ...

  4. 【每周CV论文】初学深度学习图像超分辨应该要读的文章

    欢迎来到<每周CV论文>.在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的. 图像超分辨是一个非常实际应用价值的方向,今天给大 ...

  5. 【每周CV论文推荐】 深度学习人脸检测入门必读文章

    欢迎来到<每周CV论文推荐>.在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的. 人脸图像是整个图像处理领域里面研究时间最长, ...

  6. fasterrcnn论文_【每周CV论文推荐】 深度学习人脸检测入门必读文章

    我的新书<深度学习之人脸图像算法>市了,欢迎大家关注! 言有三新书来袭,业界首次深入全面讲解深度学习人脸图像算法​mp.weixin.qq.com 欢迎来到<每周CV论文推荐> ...

  7. 【每周CV论文推荐】基于GAN的图像修复值得阅读的文章

    欢迎来到<每周CV论文推荐>.在这个专栏里,还是本着有三AI一贯的原则,专注于让大家能够系统性完成学习,所以我们推荐的文章也必定是同一主题的. 图像修复(补全)是一个非常基础的图像处理领域 ...

  8. 「每周CV论文推荐」 初学深度学习单图三维人脸重建需要读的文章

    基于图像的人脸三维重建在人脸分析与娱乐领域里有巨大的应用场景,本文来介绍初学深度学习单张图像人脸三维重建必须要读的文章. 作者&编辑 | 言有三 1 3DMM与数据集 虽然这里推荐的是深度学习 ...

  9. 经典论文复现 | 基于深度学习的图像超分辨率重建

    过去几年发表于各大 AI 顶会论文提出的 400 多种算法中,公开算法代码的仅占 6%,其中三分之一的论文作者分享了测试数据,约 54% 的分享包含"伪代码".这是今年 AAAI ...

最新文章

  1. 洛谷——P1098 字符串的展开
  2. 阻碍GIS产业发展的三大问题
  3. NYOJ 598 旋转圆柱矩阵
  4. 0001-Hello world(第一弹)
  5. 【Android开发】文本框、按钮、文本编辑框、提交登录、单选框
  6. STM平台增加性能测试/稳定性测试部分【一】
  7. Linux管理传世经典:Linux 系统管理技术手册(第二版) 中文高清版下载
  8. cmake编译时不能指定头文件路径?
  9. 聊聊 Tomcat 的单机多实例
  10. android四大基本布局,四大布局 使用详解
  11. Lvgl(V8.2)自定义字体实现多国语言切换功能
  12. 会员卡管理系统从哪些方面解决门店会员营销困扰?
  13. CentOS 6.3安装 flash控件成功案例(其它方法未成功)
  14. Python使用Requests库爬取网页数据
  15. 网络摄像视频方案整理
  16. 与微软中国梁念坚先生商榷
  17. PandasSQL数据处理对比
  18. C语言将0xea转换为字符ea,eA第10章 c语言程序设计初步.ppt
  19. python是否被高估了?
  20. Beacon模式下的设置!

热门文章

  1. Redis性能问题排查解决手册(值得收藏)
  2. 一直用git,你了解git的内部机制吗?
  3. activiti的processEngine空指针异常
  4. 如何根据sessionID获取session解决方案
  5. Caused by java.lang.ClassNotFoundException javax.xml.bind.ValidationException异常
  6. Android踩坑日记:android7.0动态相机权限
  7. 数组线性表ArrayList的内部实现
  8. 哲学家就餐与死锁问题,死锁产生的条件以及解决方案
  9. (JavaWeb)JSP,JSTL
  10. 【排序】归并类排序—归并排序(逆序数问题)