分享 | 用于视图合成的神经辐射场技术

2020和2021年，最火的计算机视觉技术非Transformer莫属。而除Transformer之外，最受欢迎也最有趣的技术我想应该是ECCV 2020的神经辐射场 (Neural Radiance Field, NERF) ，其核心点在于非显式地将一个复杂的静态场景用一个神经网络来建模。在网络训练完成后，可以从任意角度渲染出清晰的场景图片。

NeRF惊艳的效果吸引了大量研究者的关注，在20年3月挂上arXiv后，后续已经有大量的工作跟进，在速度、效果、动态场景等多个不同的角度对NeRF进行了改进。作为3D视觉里的一个新范式，学习后续的工作离不开对NeRF本身深入的理解。笔记中有不对之处欢迎指正。

Code: yenchenlin/nerf-pytorch

Awesome-Nerf: yenchenlin/awesome-NeRF

01算法概览

NeRF可以简要概括为用一个MLP神经网络去隐式地学习一个静态3D场景。为了训练网络，针对一个静态场景，需要提供大量相机参数已知的图片。基于这些图片训练好的神经网络，即可以从任意角度渲染出图片结果了。理解NeRF主要需要理解三个方面：

如何用NeRF来表示3D场景？</

分享 | 用于视图合成的神经辐射场技术相关推荐

美摄科技受邀LVSon2020大会分享《AI合成虚拟人物的技术框架与挑战》
摘要:作为智能视音频解决方案解决方案的服务商,美摄科技致力于为移动互联网.智能手机.智能硬件.传统广电及通信运营商等行业机构提供最前沿的整体视音频解决方案,为开发者与行业合作伙伴提供高效.稳定的底层技 ...
AD-NeRF：用于说话人头部合成的音频驱动神经辐射场
作为构建未来虚拟世界诸多应用的主干,如何创造栩栩如生的虚拟数字人,一直是计算机视觉.计算机图形学与多媒体等人工智能相关学科密切关注的重要研究课题.近日,中国科学技术大学联合的卢深视科技有限公司.浙江大 ...
ICCV 2021| GRF: 用于三维表征和渲染的通用神经辐射场（已开源）
作者丨Bo Yang@知乎来源丨https://zhuanlan.zhihu.com/p/399867075 编辑丨3D视觉工坊论文链接: https://arxiv.org/abs/2010.0 ...
MedNeRF:用于从单个X射线重建3D感知CT投影的医学神经辐射场
摘要计算机断层扫描(CT)是一种有效的医学成像方式,广泛应用于临床医学领域,用于各种病理的诊断.多探测器CT成像技术的进步实现了额外的功能,包括生成薄层多平面横截面身体成像和3D重建.然而,这涉及 ...
Block-NeRF: Scalable Large Scene Neural View Synthesis 可扩展的大场景神经视图合成
目录 Block-NeRF: Scalable Large Scene Neural View Synthesis 可扩展的大场景神经视图合成 Abstract 1. Introduction 2. ...
ICCV 2021 Oral | NerfingMVS：引导优化神经辐射场实现室内多视角三维重建
作者丨韦祎@知乎来源丨https://zhuanlan.zhihu.com/p/407123751 编辑丨CVer 本文是对我们ICCV 2021被接收的文章NerfingMVS: Guided O ...
[非卷积5D中文翻译及学习笔记] 神经辐射场 NeRF: Representing Scenes as Neural Radiance Fields for View Synthesis
不使用3D建模,使用静态图片进行训练,用(非卷积)深度网络表示场景的5D连续体表示,再通过ray marching进行渲染. 本中文翻译使用"机器学习+人工校准/注解"的方式完成. ...
一文搞懂神经辐射场（Neural Radiance Fields，NeRF）
NeRF 简介输入输出优缺点原理结构 pytorch实现第三方库进行 NeRF 的实现自行实现相关名词解释辐射场多层感知机(MLP) 点的密度体积渲染体积纹理渲染方程简介神 ...
Point-NeRF：基于点的神经辐射场（CVPR 2022）
点击上方"3D视觉工坊",选择"星标" 干货第一时间送达作者丨泡泡图灵智库来源丨泡泡机器人SLAM 标题:Point-NeRF: Point-based ...

分享 | 用于视图合成的神经辐射场技术

分享 | 用于视图合成的神经辐射场技术相关推荐

最新文章

热门文章