AI生成中国山水画!普林斯顿姑娘本科毕业作品,线条笔触骗过半数人类观察者
用GAN创作似乎已经不是新鲜事了。
2019,英伟达在GTC大会上推出了一个人工智能图像生成器“GauGAN”。用户只需要简单的勾画几条线条轮廓,便会自动生成美丽的风景图片。
这款AI使用的技术是生成对抗网络(GAN),也是一种深度学习模型,现在被广泛用于AI图像生成。
包括去年MIT和IBM沃森联合实验室联合发布的AI Portraits Ars,用户可以在线将自己的照片转变为中世纪的优化风格,这个在线工具一度火爆到网站宕机。
你可能会说,“这不就是风格迁移么?”
不,团队人员专门强调,这不是风格迁移,这是AI自己创作的,从线条到色调生成,都和人类画师一样,照着真人的样子自行创作。
但是正如东西方巨大的文化沟壑一样,在艺术和技术结合的领域,AI似乎也更偏向西方,我们看到不少AI生成写实主义、后现代,甚至是抽象主义的作品,但是却很少能看到AI在传统东方艺术上的表现。
终于,一位普林斯顿大学的本科学生Alice Xu中国e将目光投向了中国山水画。
在她的毕业论文中,她开发了一款名为SAPGAN(Sketch-And-Paint GAN)的AI模型,该模型可以生成传统的中国山水画,为此她也获得了普林斯顿2020优秀毕业论文奖。
论文链接:
https://arxiv.org/pdf/2011.山水05552.pdf
论文提到,在一项242人的图灵视觉测试研究表明,SAPGAN创作出的画作被误认为人类艺术品的频率高达55%,显著高于基线GAN模型创作的画作。
和人类一样,先画草图后着色
传统中国山水画在绘制过程中,一般有勾、皴、点、染等步骤,顾名思义,就是先勾画出画!大致轮廓,再进行渲染。
AIice提出的端到端生成中国山水画无条件输入模型遵循的也是这个步骤。为了实现这一过程,AIice构建了两个模型:
Stage I: SketchGAN Stage II: PaintGAN
SketchGAN从样本图像中采集高分辨率的边普林缘图,而PaintGAN是根据SketchGAN进行“翻译”创作,从而生成一幅完整的山水画。
中国人反而更容易误判
实验的结果也很惊人。
在最后进行测评时,242名参与者中,模型生成的画有一半以上(55%)被误认为是人类作品。
视觉图灵测试的分数分布,要求参与者判断艺术品是由人类还斯顿是计算机制作的(平均值= 70.5%)
在“审美愉悦”、“艺术构图”、“清晰”和“创造力”方面,SAPGAN模型在所有艺术类别中的评分始终高于基线。SAPGAN与人类绘画最大的区别是“清晰”。
让人匪夷所思的是,中国人可能更容易被SAPGAN欺骗。作为母语为汉语的人,多少是见姑娘过几幅山水画的,但是在判别一幅山水画是否为SAPGAN所作时,中国人可能更容易被欺骗。
作者比较了母语为汉语和英语的参与者的结果,看看文化接触是否能让中国参与者正确判断这些画。然而,说汉语的参与者平均得分为49.2%,明显低于说英语的考生的73.5%。
也就是说,说中本科文的人70%的时候还会把SAPGAN的画误认为是人,而整体水平是55%。显然,不管对中国文化的熟悉程度如何,参与者都很难区分绘画的来源。
自己收集两千多张山水画数据,GitHub上公开
文章提出的模型是在一个新的中国传统山水画数据集上训练的,这一数据集不是来自百度或者谷歌,而毕业是由作者本人收集。
AIice表示,目前的山水画数据集存在不唯一性和图像质量和数量不足的问题,为了促进这一领域的发展,Alice本人建立了2192幅高质量中国传统山水画组成的新数据集,这些山水画来自普林斯顿艺术博物馆藏品。
目前,这些有价值的绘画在很大程度上还没有被生成创作作品研究触及,作者也在GitHub上发布了这一数据集供公众使用。
Alice在接受学校采访时说,普林斯顿大学美术馆有一个令人惊异的开放式数字收藏中国画,这对我的数据集很有价值,但不幸的是,大多数研究人员没有充分利用它。
数据集链接
https://github.com/Al,线ice x 2020/Chinese-landscape painting-Dataset
写论文之前从没上过机器学习课,准备去Facebook工作
看到这里,你可能觉得Alice是一位“资深程序员”了。但是她表示,“我写这篇论文的时候从来没有上过机器学习课程,所以我经常被这样一个条笔问题弄得不知所措: 像我这样的新手能为已经存在的创新研究做些什么。但是我发现总是有一个有趣的角度来处理一个问题,因为一个人的兴趣和技能是他们独一无二的。”
在谈到对其他的学生建议时,Alice说,将数字化人文融入你的工作中是自然而然的事。找到你感兴趣的东西——无论是19世纪的文触骗学作品还是爵士乐——总有一种方法可以从中收集数据,用来分析或制作与之相关的技术工具。
谈到自己未来的规划,Alice表示自己准备去Facebook工作,成为一名软件工程师。
(责任编辑:汽车音响)
- docker scan 本地扫描镜像漏洞
- 云安全日报210311:F5负载均衡厂商应用交付平台发现远程命令执行漏洞,需要尽快升级
- AI 发展方向大争论:混合AI ?强化学习 ?将实际知识和常识整合到AI中 ?
- Elastic 收购 build.security 以扩展云原生环境的安全
- 标签: 张家界 七星山杯 荒野求生 老六荒野
- 云安全日报210301:IBM可视化处理平台发现执行任意代码漏洞,需要尽快升级
- 阿里云迎来工号AI001的“特殊员工” 精通16种编程语言
- IDC:2021年全球VR头显出货量破千万 Oculus份额达80%
- 99.7%成本差!AI模仿作家风格更受青睐,直指“合理使用”边界引爆版权诉讼
- 谷歌脸书推特CEO将出席美国国会听证会:阐述虚假信息审核问题
- 腾讯云官宣混元模型Token涨价
- 云计算开发:Python内置函数-memoryview()函数详解
- 百度地图升级小度想想 2.0:出行智能助手全面进化
- 标签: 阿维塔 孙百功 华为 GTM
- 标签: 袁娅维 音乐 大东北我的家乡
- 标签: 三只羊集团 借壳上市 纳斯达克 直播运营
- 仅靠合成数据就能实现真实人脸分析!微软这项新研究告别人工标注
- Koah获500 万美元融资,致力于在 AI 应用中引入广告
- 告别旧Siri!曝苹果2026年两次AI大爆发:iOS26.4将迎来“超级 Siri”
- 阿里云与奇安信达成战略合作
- Moonshot AI发布 Kimi Linear:线性注意力架构快6倍,开源 KDA 内核同步上线 views+
- 亚马逊将为50多万名员工加薪 时薪上涨50美分至3美元不等 views+
- 标签: 佳能 激光打印机 中山工厂 员工赔偿 views+
- 标签: HelloBoss NGA BAI Capital 贝塔斯曼 views+
- 苹果高管解读财报:iPhone新用户和换新用户都有两位数增长 views+
- 标签: 谷歌 TPU Ironwood Anthropic views+
- 标签: 李笛 Nextie 小冰 群体智能 views+
- 利用机器学习提高建筑能源效率 views+
- 直播间缺主播吗?京东云推出数字人虚拟主播服务“灵小播” views+
- 云计算市场竞争愈演愈烈,IBM收购芬兰云计算公司Nordcloud views+
