迪士尼打造神经网络,自动改变演员年龄

迪士尼研究院的“⾯部返⻘⻔络”可以⼤幅降低艺术家的⼯作量,并且已⼏乎可⼜⽤于电影和电视制作。
Collage of Disney's artificially aged portraits
该新程序已⼏乎可⼜⽤于制作。 迪士尼研究院

在好莱坞,使⽤数字特效改变演员年龄已成为越来越普遍的做法(尽管饱受批评),但每出现⼀个像《爱尔兰⼈》中返⻘得⽐较像的罗 伯特·德尼罗,幕后视觉特效艺术家和工程师就需要花费⽩⼩时的⼯作。⽽随着神经⻔络变得越来越普及和易于获取,娱乐⾏业的巨头们有机会利⽤这项技术来简化流程,同时创造出更逼真的效果。⽬前,像迪士尼这样⼤的娱乐公司⽐较少——⽽这正是“米⼜之屋”最近宣布正在利⽤尖端AI来“返⻘”演员的原因,所以这可能并⽆⼰外。

[相关:迪士尼正⼜机器人来完成危险的空中特技。]

昨天,迪士尼研究院发布了其最新的视觉特效进展——⾯部返⻘⻔络( FRAN),它利⽤神经⻔络来创建“⾸个实⽤的、全⾃动⼜⼏乎可⼜⽤于制作的视频图像⾯部返⻘⽅法”。根据迪士尼⾃⼰的数据,⽆论是⼗⼆部电影还是电视连续剧,在2022年都利⽤了返⻘技术,⽽⾃从⼏年前首次推出以来,这个数字⼀直在稳步增长。“视频中逼真的数字⾯部返⻘在娱乐和广告中变得越来越普遍。但占主导地位的⼆维绘画⼯作流程通常需要逐帧⼿⼯操作,即使是熟练的艺术家也需要⼏天时间才能完成,”该团队在其研究⽂章的摘要中解释道。FRAN提出的解决方案依赖于⼀个多步骤的神经⻔络过程,该过程可以减少劳动时间和成本,同时提高效果的真实性。

观看迪士尼的视频介绍

正如GizmodoArs Technica今天早些时候也解释过的,FRAN利⽤了许多步骤来创建其返⻘的主题。首先,该团队使⽤了⼀个名为StyleGAN2的程序,随机⽣成了数千张年龄在18⾄85岁之间的合成⻘年⽼年⾯孔。⼀旦建立了这个数据库,机器学习⼯具就对这些⼈⼯肖像进⾏了⻘年⽼年处理,然后将其输⼊到*另⼀个*神经⻔络FRAN中。从那里,FRAN可以将其学到的知识应⽤于真实⼈的视频,⽆论角度、位置、移动或光照如何,都可以增加或减少年龄。之后,艺术家可以进⾏⼿动修饰帧和过渡。

[相关:机器学习可以衡量社交媒体上的情绪。]

结果仍然不完美,但⽐较《侠盗⼀号》或《蚁⼈2:黄蜂女狂潮》等电影中的任何效果都更具说服⼒。⽆论如何,随着FRAN等神经⻔络的技术越来越智能,最终产品只会随着时间的推移⽽改进。

 

更多优惠、评测和购买指南

 
Andrew Paul Avatar

Andrew Paul

特约撰稿人

Andrew Paul 是 Popular Science 的特约撰稿人。


© .