来源:大数据文摘

本文约1700字,建议阅读5分钟

实验结果很惊人,不管对中国文化的熟悉程度如何,参与者都很难区分绘画的来源。

用GAN创作似乎已经不是新鲜事了。

2019,英伟达在GTC大会上推出了一个人工智能图像生成器“GauGAN”。用户只需要简单的勾画几条线条轮廓,便会自动生成美丽的风景图片。

这款AI使用的技术是生成对抗网络(GAN),也是一种深度学习模型,现在被广泛用于图像生成。

包括去年MIT和IBM沃森联合实验室联合发布的AI Portraits Ars,用户可以在线将自己的照片转变为中世纪的优化风格,这个在线工具一度火爆到网站宕机。

你可能会说,“这不就是风格迁移么?”

不,团队人员专门强调,这不是风格迁移,这是AI自己创作的,从线条到色调,都和人类画师一样,照着真人的样子自行创作。

但是正如东西方巨大的文化沟壑一样,在艺术和技术结合的领域,AI似乎也更偏向西方,我们看到不少AI生成写实主义、后现代,甚至是抽象主义的作品,但是却很少能看到AI在传统东方艺术上的表现。

终于,一位普林斯顿大学的本科学生Alice Xue将目光投向了中国山水画。

在她的毕业论文中,她开发了一款名为SAPGAN(Sketch-And-Paint GAN)的AI模型,该模型可以生成传统的中国山水画,为此她也获得了普林斯顿2020优秀毕业论文奖。

论文链接:

https://arxiv.org/pdf/2011.05552.pdf

论文提到,在一项242人的图灵视觉测试研究表明,SAPGAN创作出的画作被误认为人类艺术品的频率高达55%,显著高于基线GAN模型创作的画作。

01 和人类一样,先画草图后着色

传统中国山水画在绘制过程中,一般有勾、皴、点、染等步骤,顾名思义,就是先勾画出大致轮廓,再进行渲染。

AIice提出的端到端生成中国山水画无条件输入模型遵循的也是这个步骤。为了实现这一过程,AIice构建了两个模型:

  • Stage I: SketchGAN

  • Stage II: PaintGAN

SketchGAN从样本图像中采集高分辨率的边缘图,而PaintGAN是根据SketchGAN进行“翻译”创作,从而生成一幅完整的山水画。

02 中国人反而更容易误判

实验的结果也很惊人。

在最后进行测评时,242名参与者中,模型生成的画有一半以上(55%)被误认为是人类作品。

▲视觉图灵测试的分数分布,要求参与者判断艺术品是由人类还是计算机制作的(平均值= 70.5%)

在“审美愉悦”“艺术构图”“清晰”和“创造力”方面,SAPGAN模型在所有艺术类别中的评分始终高于基线。SAPGAN与人类绘画最大的区别是“清晰”。

让人匪夷所思的是,中国人可能更容易被SAPGAN欺骗。作为母语为汉语的人,多少是见过几幅山水画的,但是在判别一幅山水画是否为SAPGAN所作时,中国人可能更容易被欺骗。

作者比较了母语为汉语和英语的参与者的结果,看看文化接触是否能让中国参与者正确判断这些画。然而,说汉语的参与者平均得分为49.2%,明显低于说英语的考生的73.5%。

也就是说,说中文的人70%的时候还会把SAPGAN的画误认为是人,而整体水平是55%。显然,不管对中国文化的熟悉程度如何,参与者都很难区分绘画的来源。

03 自己收集两千多张山水画数据,GitHub上公开

文章提出的模型是在一个新的中国传统山水画数据集上训练的,这一数据集不是来自百度或者谷歌,而是由作者本人收集。

AIice表示,目前的山水画数据集存在不唯一性和图像质量和数量不足的问题,为了促进这一领域的发展,Alice本人建立了2192幅高质量中国传统山水画组成的新数据集,这些山水画来自普林斯顿艺术博物馆藏品。

目前,这些有价值的绘画在很大程度上还没有被生成创作研究触及,作者也在GitHub上发布了这一数据集供公众使用。

Alice在接受学校采访时说,普林斯顿大学美术馆有一个令人惊异的开放式数字收藏中国画,这对我的数据集很有价值,但不幸的是,大多数研究人员没有充分利用它。

数据集链接:

https://github.com/Alice x 2020/Chinese-landscape painting-Dataset

04 写论文之前从没上过机器学习课,准备去Facebook工作

看到这里,你可能觉得Alice是一位“资深程序员”了。但是她表示:

我写这篇论文的时候从来没有上过机器学习课程,所以我经常被这样一个问题弄得不知所措: 像我这样的新手能为已经存在的创新研究做些什么。但是我发现总是有一个有趣的角度来处理一个问题,因为一个人的兴趣和技能是他们独一无二的。

在谈到对其他的学生建议时,Alice说,将数字化人文融入你的工作中是自然而然的事。找到你感兴趣的东西——无论是19世纪的文学作品还是爵士乐——总有一种方法可以从中收集数据,用来分析或制作与之相关的技术工具。

谈到自己未来的规划,Alice表示自己准备去Facebook工作,成为一名软件工程师。

编辑:文婧

AI生成中国山水画!普林斯顿姑娘本科毕业作品,骗过70%中国人相关推荐

  1. 领英1000多个假账户被曝光,用AI生成假脸冒充真人发推销信息,已形成相关产业链...

    明敏 发自 凹非寺 量子位 | 公众号 QbitAI Deepfake假头像又又又来了. 这一次扎堆"轰炸"的平台,换成了领英. 下面这个小姐姐,是不是乍看之下感觉普普通通,还很有 ...

  2. 一步步指导 AI 画一幅中国山水画

    在 「AI 作画第二弹」这篇文章中,我给大家介绍了 AI 作画工具在 Linux 系统上的部署.如果对 Linux 系统不熟,或者显卡比较低端,也可以考虑一些在线网站.国内比较好的网站有: 文心一格 ...

  3. 使用生成对抗网络进行端到端中国山水画创作(SAPGAN)

    目录​​​​​​​ 摘要: 1.Introduction 2. Related Work 2.1. Generative Adversarial Networks 2.2. Neural Style ...

  4. 北大校友马里千:计算机视觉商用的下一个十年,AI 生成应占有一席之地

    导语:近几年,人工智能在国内的商业落地趋于同质化,以识别与检测为主.当人们谈论AI创业,首先想到的总是以感知技术为代表的"AI四小龙"(商汤.云从.依图.旷视).除了感知,人工智能 ...

  5. 内卷加速 | 本科毕业出国率下降,考研or保研?

    点上方蓝字计算机视觉联盟获取更多干货 在右上方 ··· 设为星标 ★,与你不见不散 仅作学术分享,不代表本公众号立场,侵权联系删除 转载于:新智元 AI博士笔记系列推荐 周志华<机器学习> ...

  6. 本科毕业5年后入职985高校担任博导,这位小姐姐太强了!

    点击下方卡片,关注"CVer"公众号 AI/CV重磅干货,第一时间送达 本文转载自:募格学术 | 参考资料来源:AdvancedScienceNews.福布斯中国.浙江大学薛晶晶教 ...

  7. 百度,你大爷回来了!谷歌宣布AI重返中国,首席扛把子竟是个华人小姐姐

    曾有人在知乎上 问过这么一个问题 "谷歌做过的哪些事让你厌恶?" 我带着满心的好奇点进去 想看看谷歌做了哪些坏事 结果点赞最高的回答居然是: 退出中国大陆市场 是的 从2010年3 ...

  8. “逆袭”博士 3 年发 2 篇 Nature 引热议:二本本科毕业,此前研究刷新世界纪录

    第一学历,再次成为话题焦点. 就在最近,我国 4 篇研究登上了顶刊 Nature,它们分别来自吉林大学.暨南大学.燕山大学和华侨大学. 而华侨大学这篇研究的二作 -- 林克斌博士,一下子被拉进了公众的 ...

  9. 把AI生成的数据喂给AI

    AI生成的图像太逼真,为什么不能拿来训练AI呢? 可别说,现在还真有人这么做了. 来自香港大学.牛津大学和字节跳动的几名研究人员,决定尝试一下能否使用高质量AI合成图片,来提升图像分类模型的性能. 为 ...

最新文章

  1. java中引用类型_您真的了解Java中的4种引用类型吗?
  2. weex css单位,weex 踩坑
  3. 图像识别最新赛事!总奖金31万,一起组队吗?
  4. IntelliJ IDEA 15快捷键大全
  5. pcu tps_Mac版Microsoft Office 2011重新定义您的TPS报告体验
  6. 计算机网络协议和通信规则,计算机网络协议基本知识
  7. ms sql 触发器( 转)
  8. 数字电路技术可能出现的简答题_2013年9月份考试数字电子技术第二次作业
  9. 【Flink】Flink Serving 天池快速上手 【视频笔记】
  10. 【转】BOM 和 DOM
  11. PAT 乙级 1046. 划拳(15) Java版
  12. 【Kettle】Kitchen和Pan的命令行参数
  13. 一段JS代码实现光标定位输入框文字最后
  14. 文字处理技术:正式开始新布局工作
  15. 正则化之weight-decay
  16. Node.js进阶基础技能—Koa基本使用
  17. 模拟实现图片长按保存功能
  18. 多线程编写12306售票系统
  19. 今年巴菲特的午餐上,躺着流血的地产商
  20. SAM-DETR源码讲解

热门文章

  1. 数论计算机科学与技术专业就业前景好,【数学】数学专业就业前景:你看不见的“前途似锦”...
  2. 计算机音乐是哪一个,哪种软件适合音乐编辑的计算机版本?
  3. wp.qq.com.index.html,使用纯代码给WordPress添加文章目录功能,支持快速定位和多级目录...
  4. HBase 参考指南 3.0 翻译活动期待大家的参与 | ApacheCN
  5. 【Luogu P2764】最小路径覆盖问题
  6. 阿里如何实现100%容器化镜像化?八年技术演进之路回顾
  7. 制作U盘安装Ubuntu系统
  8. (转载)如何学好iphone游戏开发
  9. 入围教育装备展“金奖产品”,升腾威讯云学区做真正教育桌面云
  10. 转载:《TypeScript 中文入门教程》 4、类