延禧攻略|AI“复活”《延禧攻略》众生相

金磊 发自 凹非寺
量子位 报道 | 公众号 QbitAI
一部《延禧攻略》 , 让清朝古装剧在国内大火了一把 。
敢爱敢恨的魏璎珞 , 贤良淑德的富察皇后 , 深藏不漏的纯妃……
人物特点各个鲜明 , 令人印象着实深刻 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

但历史中的她们 , 究竟长什么样呢?
最近 , B站一位名为Jack-Cui的Up主便利用AI技术 , 让乾隆的后宫们从画中「复活」了一把 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

话不多说 , 现在就让我们一同欣赏 。
AI神还原《延禧攻略》众生相
据这位Up主介绍 , AI在「施法」前所基于的画像 , 是来自清代宫廷画师郎世宁的《心写治平》 。
当然 , 他对这些画像也是做了一些「数据预处理」 , 专门挑了一些好看、出名的嫔妃:
有些好像得罪画师的画像 , 就不复原了……
首先登场的是纯妃 。
古代画像、《延禧攻略》中的剧照长这样 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

AI修复后的纯妃 , 是这样的 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

比起扁平的画像 , AI修复后的人像更具立体感 , 不仅眼睛可以眨动 , 脑袋也能左右晃动 。
接下来是富察皇后的画像和剧照 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

AI较为逼真地还原了画像中皇后的脸型 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

而这次 , 修复后的画像 , 嘴也能动起来「说话」 。
当然 , 缺不了《延禧攻略》的女1号——魏璎珞 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

确实有几分令妃在剧中的灵动感 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

除此之外 , Jack Cui还修复了嘉妃和舒妃这两位后宫佳丽的音容笑貌 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

「复活术」背后的黑科技
仅根据古代画像 , Jack Cui是如何让它们变得活灵活现的呢?
据他介绍 , 此次「复活术」所用到的技术包括:
StyleGAN2-Face-Modificator
Artbreeder
First-Order-Model
DAIN
StyleGAN2-Face-Modificator
StyleGAN是英伟达在2018年发布的人脸生成模型 , 支持2014×1024的高清大图生成 。
并在2019年升级成为了效果更加逼真、无暇的StyleGAN2 。
而StyleGAN2-Face-Modificator则是基于此 , 开发出来的人脸编辑工具 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

Artbreeder
Artbreeder是一个在线图像生成网站 , 基于的技术是我们所熟知的生成对抗网络(GAN) 。
在Artbreeder上 , 用户可以通过调整滑块 , 来创建不同风格的人像、动画 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

First-Order-Model
这项技术来自意大利特伦托大学 。
一张名人照片 , 加上随便一段视频 , 就能让照片里的人物分分钟动起来 。
比如输入一段川普的视频 , 原本静止在画面中的史塔克们 , 也忍不住跟着动了起来 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

DAIN
DAIN是上海交通大学开发的插帧算法 , 能把30fps的视频一口气插帧到480fps , 让视频丝滑流畅 , 毫无卡顿 。
以「琦玉老师」为例 , 效果如下 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

前情回顾:除了后宫佳丽 , 还有三位皇帝
其实早在今年8月份 , Jack Cui就已经利用类似技术 , 「复活」清朝三位著名的皇帝:康熙、雍正和乾隆 。
比起画像中年迈的康熙 , AI修复后的样子显得年轻了不少 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

修复出来的雍正就比较俏皮了 , 还学会了「抛媚眼」 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

乾隆的样子 , 可以说是修复出来的皇帝中 , 最像的一个 。
延禧攻略|AI“复活”《延禧攻略》众生相
本文图片

然而 , 看完这三位皇帝后 , 有调皮的网友留言道:
最想看的还是朱元璋的帝王之相 。
(那张图请自行搜索)……
对话Jack Cui
量子位也联系到了Jack Cui本人 , 进行了简单的交流 。
具有如此鲜活想法的Jack Cui , 并不是学生 , 而是已经步入职场 。
至于职业 , 并无太大悬念——程序员 。
在问及「为什么要选择做修复古人画像工作」时 , 他回答道:
想做一些有趣的东西 , 修复古人样貌 , 挺有意义且好玩的一件事 。
并且Jack Cui认为 , 业余时间做这样的事情 , 对于本职工作来说 , 「可以一直关注一些前沿算法 , 保持活力」 。
量子位也获取到了他接下来的要做项目的动向 , 稍微剧透一下:
会出一些技术学习教程 , 以及软件硬件结合的视频 。
【延禧攻略|AI“复活”《延禧攻略》众生相】感兴趣的读者 , 可以持续保持关注 。


    推荐阅读