AI「复活」《延禧攻略》众生相

2020 年 11 月 20 日 量子位
金磊 发自 凹非寺
量子位 报道 | 公众号 QbitAI

一部《延禧攻略》,让清朝古装剧在国内大火了一把。

敢爱敢恨的魏璎珞,贤良淑德的富察皇后,深藏不漏的纯妃……

人物特点各个鲜明,令人印象着实深刻。

但历史中的她们,究竟长什么样呢?

最近,B站一位名为Jack-Cui的Up主便利用AI技术,让乾隆的后宫们从画中「复活」了一把。

话不多说,现在就让我们一同欣赏。

AI神还原《延禧攻略》众生相

据这位Up主介绍,AI在「施法」前所基于的画像,是来自清代宫廷画师郎世宁的《心写治平》。

当然,他对这些画像也是做了一些「数据预处理」,专门挑了一些好看、出名的嫔妃:

有些好像得罪画师的画像,就不复原了……

首先登场的是纯妃

古代画像、《延禧攻略》中的剧照长这样。

AI修复后的纯妃,是这样的。

比起扁平的画像,AI修复后的人像更具立体感,不仅眼睛可以眨动,脑袋也能左右晃动。

接下来是富察皇后的画像和剧照。

AI较为逼真地还原了画像中皇后的脸型。

而这次,修复后的画像,嘴也能动起来「说话」。

当然,缺不了《延禧攻略》的女1号——魏璎珞

确实有几分令妃在剧中的灵动感。

除此之外,Jack Cui还修复了嘉妃舒妃这两位后宫佳丽的音容笑貌。

「复活术」背后的黑科技

仅根据古代画像,Jack Cui是如何让它们变得活灵活现的呢?

据他介绍,此次「复活术」所用到的技术包括:

  • StyleGAN2-Face-Modificator

  • Artbreeder

  • First-Order-Model

  • DAIN

StyleGAN2-Face-Modificator

StyleGAN是英伟达在2018年发布的人脸生成模型,支持2014×1024的高清大图生成。

并在2019年升级成为了效果更加逼真、无暇的StyleGAN2。

而StyleGAN2-Face-Modificator则是基于此,开发出来的人脸编辑工具。

Artbreeder

Artbreeder是一个在线图像生成网站,基于的技术是我们所熟知的生成对抗网络(GAN)

在Artbreeder上,用户可以通过调整滑块,来创建不同风格的人像、动画。

First-Order-Model

这项技术来自意大利特伦托大学。

一张名人照片,加上随便一段视频,就能让照片里的人物分分钟动起来。

比如输入一段川普的视频,原本静止在画面中的史塔克们,也忍不住跟着动了起来。

DAIN

DAIN是上海交通大学开发的插帧算法,能把30fps的视频一口气插帧到480fps,让视频丝滑流畅,毫无卡顿。

以「琦玉老师」为例,效果如下。

前情回顾:除了后宫佳丽,还有三位皇帝

其实早在今年8月份,Jack Cui就已经利用类似技术,「复活」清朝三位著名的皇帝:康熙雍正乾隆

比起画像中年迈的康熙,AI修复后的样子显得年轻了不少。

修复出来的雍正就比较俏皮了,还学会了「抛媚眼」。

乾隆的样子,可以说是修复出来的皇帝中,最像的一个。

然而,看完这三位皇帝后,有调皮的网友留言道:

最想看的还是朱元璋的帝王之相。

(那张图请自行搜索)……

对话Jack Cui

量子位也联系到了Jack Cui本人,进行了简单的交流。

具有如此鲜活想法的Jack Cui,并不是学生,而是已经步入职场。

至于职业,并无太大悬念——程序员

在问及「为什么要选择做修复古人画像工作」时,他回答道:

想做一些有趣的东西,修复古人样貌,挺有意义且好玩的一件事。

并且Jack Cui认为,业余时间做这样的事情,对于本职工作来说,「可以一直关注一些前沿算法,保持活力」。

量子位也获取到了他接下来的要做项目的动向,稍微剧透一下:

会出一些技术学习教程,以及软件硬件结合的视频。

感兴趣的读者,可以持续保持关注。

最后,奉上此次AI「复活」《延禧攻略》后宫佳丽的视频:

参考链接:
https://www.bilibili.com/video/av842816833/

StyleGAN2-Face-Modificator:
https://github.com/tg-bomze/StyleGAN2-Face-Modificator

Artbreeder:
https://artbreeder.com

First-Order-Model:
https://github.com/AliaksandrSiarohin/first-order-model

DAIN:
https://github.com/baowenbo/DAIN

本文系网易新闻•网易号特色内容激励计划签约账号【量子位】原创内容,未经账号授权,禁止随意转载。

量子位年度智能商业峰会启幕,

李开复等AI大咖齐聚,

邀你共探新形势下智能产业发展之路

限时早鸟优惠,扫码锁定席位

量子位 QbitAI · 头条号签约作者

վ'ᴗ' ի 追踪AI技术和产品新动态

一键三连「分享」、「点赞」和「在看」

科技前沿进展日日相见~


登录查看更多
0

相关内容

【2020新书】Python文本分析,104页pdf
专知会员服务
98+阅读 · 2020年12月23日
专知会员服务
138+阅读 · 2020年12月20日
【KDD2020-阿里】可调控的多兴趣推荐框架
专知会员服务
28+阅读 · 2020年8月11日
【机器学习术语宝典】机器学习中英文术语表
专知会员服务
59+阅读 · 2020年7月12日
【Facebook AI】低资源机器翻译,74页ppt
专知会员服务
29+阅读 · 2020年4月8日
广东疾控中心《新型冠状病毒感染防护》,65页pdf
专知会员服务
18+阅读 · 2020年1月26日
姿势服装随心换-CVPR2019
专知会员服务
34+阅读 · 2020年1月26日
【GitHub实战】Pytorch实现的小样本逼真的视频到视频转换
专知会员服务
35+阅读 · 2019年12月15日
技术无罪?AI直接“脱掉”女性的衣服!
51CTO博客
8+阅读 · 2019年6月27日
爱奇艺蒙版AI:弹幕穿人过,爱豆心中坐
机器之心
5+阅读 · 2018年11月12日
Arxiv
0+阅读 · 2021年1月31日
Arxiv
6+阅读 · 2018年10月3日
Arxiv
13+阅读 · 2018年4月6日
VIP会员
相关VIP内容
【2020新书】Python文本分析,104页pdf
专知会员服务
98+阅读 · 2020年12月23日
专知会员服务
138+阅读 · 2020年12月20日
【KDD2020-阿里】可调控的多兴趣推荐框架
专知会员服务
28+阅读 · 2020年8月11日
【机器学习术语宝典】机器学习中英文术语表
专知会员服务
59+阅读 · 2020年7月12日
【Facebook AI】低资源机器翻译,74页ppt
专知会员服务
29+阅读 · 2020年4月8日
广东疾控中心《新型冠状病毒感染防护》,65页pdf
专知会员服务
18+阅读 · 2020年1月26日
姿势服装随心换-CVPR2019
专知会员服务
34+阅读 · 2020年1月26日
【GitHub实战】Pytorch实现的小样本逼真的视频到视频转换
专知会员服务
35+阅读 · 2019年12月15日
Top
微信扫码咨询专知VIP会员