内容来源:ATYUN AI平台

谷歌的研究人员开发了一个基于深度学习的系统,可以将立体相机,VR相机和双镜头相机(如iPhone 7或X)拍摄的静态图像转换为短视频。

“给出两个图像与已知的相机参数,我们的目标是让深层神经网络来推断适合于合成同一场景的视角,特别是在输入视图之外进行推断。”研究人员在研究中写道。

研究者使用NVIDIA的Tesla GPU的P100和cuDNN -accelerated TensorFlow深度学习框架,基于7000多个房地产类视频训练系统。

精彩视频点击链接:谷歌研究利用AI合成图片,使静态图片动起来

“我们基于多平面图像(MPI)的视点合成系统可以处理室内和室外场景,”研究人员提出,“我们成功地将它应用于与我们训练数据集中场景截然不同的场景。学习过的MPI可以有效地表现出部分反射或透明的表面。”

该团队表示,他们的系统比以前的方法性能更好,并且可以有效地放大手机和立体相机拍摄的立体图像的狭窄基线。

“我们的方法在保留测试中表现出更好的数字性能,并且还生成了更多空间稳定的输出图像,因为我们推断的场景视图综合了所有合成的目标视图。”

端到端学习管道概述。给定输入立体图像对,团队使用全卷积深度网络来推断多平面图像表示。对于每个平面,网络直接预测alpha图像,并且通过使用参考源和预测背景图像混合彩色图像,其中混合权重也是用网络输出。在训练期间,网络被优化,以预测使用可微分渲染模块重建目标视图的MPI。在测试过程中,MPI视图表示仅针对每个场景推断一次,然后可以用最少量的计算(单应性和alpha合成)来合成新视图。

该团队承认他们的模型还有待改善,但他们相信该方法可用于从两个输入图像中推断数据,生成允许多维视图移动的光场。

本文转自ATYUN人工智能媒体平台,原文链接: 谷歌研究利用AI合成图片,使静态图片动起来

更多推荐

比无人机更具优势的蜂鸟机器人,搜索救援好帮手

一道Google面试题:如何分解棘手问题(下)

用音频数据补充视觉信息,帮助AI在3D迷宫中导航

欢迎关注ATYUN官方公众号,商务合作及内容投稿请联系邮箱:bd@atyun.com

谷歌研究利用AI合成图片,使静态图片动起来相关推荐

  1. c语言静态图片做成动态效果,如何使静态图片做成动态效果?怎么让静态图片动起来...

    原标题:如何使静态图片做成动态效果?怎么让静态图片动起来 如果用手机拍了一组张片,想要将这些静态图片合成动态的该怎么操作呢?将多张图片合成一张gif动图的方式,既能够占据更少的内存,还能够提升图片的趣 ...

  2. 利用svg合成任意形状的图片

    什么是svg: 百度百科这样说: SVG可以算是目前最最火热的图像文件格式了,它的英文全称为Scalable Vector Graphics,意思为可缩放的矢量图形.它是基于XML(Extensibl ...

  3. 如何制作会动的玫瑰花图片?静态图片动起来的方法

    如何制作会动的玫瑰花图片?俗话说的好,万物皆有灵,玫瑰花虽然是植物,但是它也是有灵气的.我们拍摄下来的动态图片固然好看,但是还是没有动态的图片生动.那么问题来了,静态的图片怎么动起来呢?不用担心,这里 ...

  4. 【AI前沿】谷歌如何利用人工智能重塑美国医疗行业?

    谷歌正在押注未来医疗会变得数据结构化和人工智能化,它已经把 AI 运用到了疾病监测,新型数据基础设施和有潜力的保险等领域. 在这篇报告里,我们将探索谷歌医疗行业的众多布局和未来可能会进入的领域. 谷歌 ...

  5. 谷歌如何利用人工智能重塑美国医疗行业?

    来源:网络大数据 谷歌正在押注未来医疗会变得数据结构化和人工智能化,它已经把 AI 运用到了疾病监测,新型数据基础设施和有潜力的保险等领域. 在这篇报告里,我们将探索谷歌医疗行业的众多布局和未来可能会 ...

  6. 一句话就能魔改视频主角,谷歌新「AI导演」惊呆网友:这画质也太赞了

    Alex 发自 凹非寺 量子位 | 公众号 QbitAI 谷歌整出了个新"AI导演",一句话甚至能把视频主角给换了. 你看,青青草地上,一只小熊正在跳舞. 难道现在的熊都这么有艺术 ...

  7. 谷歌将使用AI帮助用户实现更智能搜索模式——方法如下

    谷歌AI倾力打造,全新搜索功能即将上线 "你能在药房帮人买药吗?" 对人类来说,这是一个很容易理解的简单问题,但对于机器,这个问题代表了机器理解的前沿.作为人类,我们可以看到提问者 ...

  8. 【Flutter】Image 组件 ( 加载网络图片 | 加载静态图片 | 加载本地图片 | path_provider 插件 )

    文章目录 一.加载网络图片 二.加载静态图片 三.加载本地图片 四.完整代码示例 五.相关资源 一.加载网络图片 参考 [Flutter]Image 组件 ( Image 组件简介 | Image 构 ...

  9. java对静态图片/Gif图片/视频进行水印

    对静态图片/Gif图片/视频进行水印 刚开始写博客.我用在公司里写的视频/图片/gif图片水印分享出来.有任何不当之处请尽情指出.本人qq:2768861003 静态图片水印 静态图片水印,主要是通过 ...

最新文章

  1. YOLOv5实现自定义对象训练与OpenVINO部署全解析
  2. Javascript闭包,比较好懂的一篇文章
  3. Science给博士新生的“欢迎”信:5点期望太扎心!
  4. java中getDelta是什么意思_Java IResourceDelta.getMarkerDeltas方法代码示例
  5. 微信公众号开发之获取微信用户的openID
  6. python资源百度云_Python Selenium 百度云分享链接资源 批量保存
  7. Python 中,字符串连接效率最高的方式是?一定出乎你的意料
  8. 前端学习(1510):单页应用SPA实现原理
  9. 开源的C#组件——RSS.NET
  10. 使用Tesseract (OCR)实现简单的验证码识别(C#)+窗体淡入淡出效果
  11. Codeforce 1700Difficulty Graphs 20 questions
  12. XshellXftpPortable Xshell,Xftp便携版绿色版下载
  13. java学习——java面试【事务、锁、多线程】资料整理
  14. 许小年:企业家精神的衰落与重振
  15. 【Python】python初学者应该知道与其他语言差异化的高效编程技巧(附测试代码+详细注释)
  16. Java--枚举类型(枚举类型介绍 定义枚举类型 枚举类型的使用 枚举类型的注意事项 遍历枚举项)
  17. uip协议栈分析(2)
  18. IDEA相对路径系统找不到指定的文件问题
  19. 微软视频直播服务器,使用微软云媒体服务快速搭建视频直播
  20. CAN总线控制器SJA1000

热门文章

  1. 什么是信息增益(Information Gain)?
  2. 后台界面设计之表格设计
  3. UVA11021 Tribles 概率
  4. 数仓工具—Hive实战之 UDF GIS(16)
  5. 【GitHub或GitLab rejected】error: failed to push some refs to,Updates were rejected...
  6. 【离散数学】集合论基础
  7. java for无限循环
  8. 美国国土安全部试图商业化的八种网络安全新技术
  9. 算法笔记随笔:分数的化简,四则运算和输出
  10. 怎么把录音导入库乐队_库乐队导入音乐的具体流程讲述