整理 | 费棋

出品 | AI科技大本营

DeepFakes,这种能够移花接木的技术,它能将图像或视频中把一张脸替换成另一张脸。

去年 12 月,一个名 Reddit 用户用 DeepFakes 技术将盖尔·加朵和斯嘉丽·约翰逊的脸嫁接到一个成人电影女星的身上,制作了一个几乎可以以假乱真的视频。

就其发挥的作用本质而言,这跟 CG 技术没多大区别,不过这项技术“换脸”速度极快,成本较低,甚至在今年年初,一款与之相关的名为 FakeApp 的应用被发布,使得虚假内容的创作变得更加容易。

不过,就在人们还在寻找检测 DeepFakes 方法以防滥用之际,强力进阶版的 Recycle-GAN 来了。

近日,CMU 的研究人员发表了一篇介绍 Recycle-GAN 的论文,他们介绍说这个研究是受到了 Cycle-GAN 的启发。至于 Recycle-GAN 这项技术特点,他们将其描述为“无人监督,数据驱动”,它能将一个视频或者图片的内容转换到另一个视频或图片里。这样的内容转换任务能够支持很多应用,包括从一个人的人体运动和面部表情转换到另一个人上。

先来看川普是如何“模仿”奥巴马神态的:

根据论文,Recycle-GAN 利用生成式对抗网络(GANs)和“时空线索(spatiotemporal cues)”来学习和寻找图片或视频之间的关联,当训练人类主体的镜头时,它能够捕捉面部表情一些细微的线条,比如面部抽搐、微笑时的面部细节。

他们还使用了 OpenPose 提取了关键的脸部关键点,这是在没有任何手动输入调整的情况下,捕捉到了这些公众人物的特点。

而目前大多数类似 Deepfakes 的“换脸”技术缺乏的正是对细节等全局性的掌握,这些技术都只针对人脸,缺乏对其他领域的总结和整合,如果在实际中遇到遮脸等情况,机器就难以进行相应操作,还有一些必须依赖对照组或者成对图像,这需要大量的手动标记数据。

上述图片主要关注脸部特征,使用相同的方法,还可以同步源人物的身体摆动动态:





当然,Recycle-GAN 也可以使得人与其他物体之间的表情可以进行转换:



根据论文内容,他们的方法综合了空间和时间信息以及内容翻译和风格保存的对抗性损失方法。他们研究使用了时空约束优于空间约束的有效重新定位的优势,这些都从花与花、风和云合成、日出和日落转化中有所体现。



云与风的合成,研究人员使用它来修改视频中的天气状况,将无风的日子转换为刮风的日子。此外,他们通过两种情况的视频重定向来展示自动视频操作方法:合成视频中的云和风;在不同的视频中制作日出和日落。









就当前的实验结果而言,可以在 28.3% 的时间内让 15 名测试对象分不清真假,但团队认为,如果他们学会了“生成输出视频”的速度,就像人们说话有轻重缓急一样,系统的未来版本就会更加准确。

真正的视频风格应该更加自然,语音和内容应该随时间的变化而变化,研究团队相信,以后会有更好的时空神经网络架构能解决这个问题。

以 Deepfakes 这类为代表的技术如果能投入到制作电影等应用场景中,自然很不错。但它们的低门槛也可能导致恶意的操纵者制作不良视频,比如制作假的复仇色情片、假新闻,此前 Reddit、Pornhub 和 Twitter 以及其他平台,都对此技术滥用行为表示反对,而美国国防部的研究人员也在积极寻找检测 Deepfakes 以及揭露由 AI 创作的假事件的方法。

让人无奈的是,如果要防止 AI 的负面效应,我们策略只能是以 AI 抗衡 AI,但这又陷入到了无限循环当中,而随着技术的不断迭代,这也意味着像用 Recycle-GAN 技术做出的视频,人类将很难识别出真假。

圣塔克拉拉大学法学院教授 Eric Goldman 说,我们最好为一个真假难辨的世界早做准备,但事实上,我们已经身处在这样一个世界中了。

论文链接:https://arxiv.org/abs/1808.05174

参考来源:https://venturebeat.com/2018/08/16/carnegie-mellon-researchers-create-the-most-convincing-deepfakes-yet/

——【完】——

特朗普“模仿”奥巴马?进阶版换脸技术DeepFakes来了相关推荐

  1. “ZAO”火爆背后的AI换脸技术有多可怕?隐私泄露?法律风险?

    30日晚间,一款名为"ZAO"的换脸社交软件在朋友圈刷屏,不少科技圈人士坦言"刷了一整夜",而ZAO的创始人正好为陌陌总裁.首席运营官王力. 陌陌还推出了哈你. ...

  2. 深度学习实战22(进阶版)-AI漫画视频生成模型,做自己的漫画视频

    大家好,我是微学AI,今天给大家带来深度学习实战22(进阶版)-AI漫画视频生成模型. 回顾之前给大家介绍了<深度学习实战8-生活照片转化漫画照片应用>,今天我借助这篇文章的原理做一个AI ...

  3. Python爬虫爬取智联招聘(进阶版)

    运行平台: Windows   Python版本: Python3.6   IDE: Sublime Text    其他工具:  Chrome浏览器 0.写在前面的话 本文是基于基础版上做的修改,如 ...

  4. ES系统封装教程 高级进阶版 提供Wind7,xp系统下载 (by 星空武哥)

     重新改了一下,由于一些地址链接有问题,现在所有下载软件都已经没问题了. 欢迎访问我的博客http://blog.csdn.net/lsyz0021 ES系统封装教程 高级进阶版,提供我自己封装的Wi ...

  5. 2020进阶版 -【C语言/C++编程语言学习路径图】!

    很多同学刚学编程的时候,都在问:"我要从怎么学?从哪里开始学起?"这次我们就来解决这个问题.以下是2019年→2020年进阶版C/C++编程语言的学习路径.以及需要掌握的知识点,供 ...

  6. Python | 爬虫爬取智联招聘(进阶版)

    上一篇文章中<Python爬虫抓取智联招聘(基础版)>我们已经抓取了智联招聘一些信息,但是那些对于找工作来说还是不够的,今天我们继续深入的抓取智联招聘信息并分析,本文使用到的第三方库很多, ...

  7. Python爬虫:抓取智联招聘岗位信息和要求(进阶版)

    本文的文字及图片来源于网络,仅供学习.交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理 以下文章来源于腾讯云 作者:王强 ( 想要学习Python?Python学习交流群 ...

  8. python爬去智联招聘网_Python爬虫爬取智联招聘(进阶版)

    点击上方"程序人生",选择"置顶公众号" 第一时间关注程序猿(媛)身边的故事 图片:Westworld Season 2 作者 王强 简介 Python追随者, ...

  9. 米联客FDMA_V3详细解读,单摄像头图像传输模板-降采样进阶版

    米联客FDMA_V3详细解读,单摄像头图像传输模板-降采样进阶版 https://blog.csdn.net/qq_41667729/article/details/123894389 上一篇文章讲了 ...

最新文章

  1. Flutter配置好后,在Android Studio中找不到设备,no devices
  2. 小结 frambuffer 原理及流程 (五)
  3. 关于Core Data的一些整理(一)
  4. flex4.6 保留自动产生的actionscript代码的编译选项
  5. python进阶(第三章2)字典和集合
  6. mysql修改表的结构_MySQL修改表结构
  7. matlab怎么计算行列式,Matlab 线性代数(一)–行列式与方程组求解 | 学步园
  8. Python----倚楼听风雨
  9. python defaultdict 类属性_Python collections.defaultdict模块用法详解
  10. 数据结构:栈的了解与示例(逆波兰表达式)
  11. Shell脚本实现模拟并发及并发数控制
  12. 计算机视觉基础-图像处理 Task06 边缘检测
  13. C#图片处理之: 锐化
  14. $(document).click() 在苹果手机上不能正常运行
  15. android 在非UI线程更新UI仍然成功原因深入剖析
  16. matlab系统稳定性仿真实验,基于Matlab的电力系统暂态稳定仿真实验与分析
  17. 阅读PDF乱码问题简便解决方法教程
  18. w10查看端口_Windows 10系统如何查看已打开的端口
  19. 程序员做技术管理需要懂哪些方面?
  20. Android对抗反编译,非科班程序员求职经历分享

热门文章

  1. 莱芜市公安局交警支队智能交通项目集成及容灾公开招标公告
  2. 常见基本不等式的几何解释
  3. vs code搭建Django环境
  4. C语言回溯算法解决N皇后问题
  5. C#实现HttpPost提交文件
  6. Java对多线程的支持
  7. 函数项目一个超感人的故事:关于swfupload在某些环境下面session丢失的完美解决方案(看完我哭了)...
  8. wordpress调用树形目录
  9. 去掉[]中的英文(正则表达式)C#
  10. 网页制作知识:XHTML 和 DOCTYPE 切换