机器之能|：AI换头术如何让好莱坞巨星演回小鲜肉？，重返二十岁( 二 )
他们花了大约一年的时间来调教这个「模型玩偶」 ， 模拟出与真实史密斯年龄相当的「模型」 ， 并以此为基础 ， 克隆出鲜肉版的威尔·史密斯 。
他们在先前经验上 ， 以《霍比特人》中的咕噜动画处理为基础 ， 也为威尔·史密斯配备了面部标记和头戴式摄像装置以记录表情 ， 为动画师提供了极高质量的面部数据 。
二
「软硬兼施」 ， 如何正常地演一场戏
然而 ， 对于著名导演马丁·斯科塞斯（MartinScorsese）来说 ， 头戴设备和面部标记（演员脸上的点）会破坏他在2019年史诗《爱尔兰人》中寻求的人类互动 。
这部电影的主角罗伯特·德尼罗（RobertDeNiro） ， 阿尔·帕西诺（AlPacino）和乔·佩西（JoePesci）都已经70多岁了 ， 他们的角色跨越了几十年的许多年龄 ， 因此 ， 衰老的策略至关重要 。
文章图片
《爱尔兰人》中 ， 特效打造的诸多更加年轻版本的罗伯特·德尼罗
从几年前开始 ， 由乔治·卢卡斯（GeorgeLucas）创立的特殊效果工作室工业光与魔术（ILM）的帕勃罗·海尔曼（PabloHelman）和他的团队与斯科塞斯（Scorsese）合作 ， 开发出更少干扰的创建所需图像方法 。
为了捕捉表演 ， 他们打造了一个庞大设备 。 其中 ， 普通摄像机的侧面是两个红外摄像机以及相关红外灯 ， 提供同步高质量立体信息（既不需要可见的面部标记 ， 也不需要电影制片人所需的照明改变） 。
不过 ， 设备的尺寸大小和重量也带来了一些挑战 。 例如 ， 无法采用流行的手持Steadicam镜头 。 此外 ， 尽管红外光不会干扰主摄像头 ， 但红外摄像头对香烟烟雾很敏感 ， 无法透过老式汽车挡风玻璃看到 。
文章图片
三台摄像机组成的「三头怪兽」
开发硬件的同时 ， 工业光魔团队开发了一个新的软件FLUX ， 在数据采集完后 ， 进行手动减龄 。 除了从当前演员那里捕获FACS之外 ， 该团队还从他们过去数十年来的表演中获取了大量图像 ， 从而使他们可以选择电影中每一年的面部模型 。
不过 ， 他们并没有重现《出租车司机》（1976）或《Goodfellas》（1990）中德尼罗外表 ， 而是力图创造出他在《爱尔兰人》角色中的人物版本 。 而且 ， FLUX软件没有根据德尼罗的面部动作来制作人偶 ， 而是对捕获的表演和照明数据进行变形以创建新图像 。
结果是令人信服的衰老角色 ， 演员互动非常逼真 。
事实上 ， 要支持这个时代的顶尖演员 ， 就需要支持他们的表演过程 ， 而不是创造一种技术让他们的表演打折扣 。 这种侵入性较小的技术 ， 让更多的角色人物充分表现 ， 成为可能 。
三
辉煌背后的AI
与那些凭借特效而获得成功的超级英雄电影不同 ， 像《爱尔兰人》这样的作品 ， 其成功恰恰在于让观众忘记技术特效 ， 这不仅对硬件和软件创新提出了极高要求 ， 实现成本也价格不菲（据报道预算为1.6亿美元） 。
有些人富有创造力 ， 他们考虑设计、照明以及如何讲述故事 ， 但是 ， 需要有将所有这些付诸实现的人 。 无论是《双子杀手》还是《爱尔兰人》 ， 都离不开技术人员和艺术家之间的合作 ， 决定项目是否成功的要素是如何协作 。
例如 ， 基于共同努力 ， 有的团队改进了「面部求解器」 ， 它可以根据基本动作单位来表征捕获的面部标记和其他特征位置 。 尽管可能有不同的方法来分解各种训练动作 ， 但是 ， 他们使用深度学习来确保其描述与动画师对这些动作的思考方式相互匹配 。 通过这类训练 ， 求解器可以针对镜头的每一帧确定哪些肌肉正被激活 。
将AI应用于视觉效果分析 ， 是相对较新的努力 ， 具有巨大的潜力 。 利用计算机的力量来教它模拟现实 ， 无论是创造表演、合成人物还是某个环境 ， 对创造越来越可信的幻觉而言 ， 都大有裨益 。
推荐阅读
- 马克·扎克伯格|为何外界常说扎克伯格是机器人？源于2018年的一场听证会
- 产业气象站|电力机器人“小白”上岗巡检
- 机器人|男性机器人上市被抢购一空，女性试用满意度高达98%，性能太强大
- 火星|“我没电了，天黑了”，曾在火星向人类求救的机器人如今怎样了
- 工控网|提速10倍！ABB全新机器人3D检测单元让质量控制检测简便高效
- 太平洋电脑网|科学家研制可通过加热来应对不同任务的折叠式机器人
- 产业气象站|GAITC专题论坛丨杨易：训练机器自主学习提高检测效率
- 过往年少|5G和机器学习：将蜂窝基站从智能变成天才
- 驱动之家|远程、语音无所不能！石头扫地机器人玩法体验：懒人如此养成
- 机器人|日本“女性机器人”火了，上市被一抢而空，性能强大不输真人！