量子位 | "大众年夜众号 QbitAI

想“返老还童”?迪士尼这个新AI分分钟搞定失落业压力给到特效师_迪士尼_年纪 智能助手

迪士尼惊现“返老还童”大法!

输入一段***,演员分分钟就能变年轻,变老也不在话下。
效果是酱婶儿的:

而且下一步,迪士尼准备将这种AI算法用到电影中去。

扮装殊效师的饭碗危~~~

迪士尼这个新的AI算法名叫FRAN ,至于比拟过往类似的模型,它的效果可谓是上了一个台阶。

帧与帧过渡生硬、易受人物动作幅度影响、忽略背景……这些问题FRAN统统都办理掉了!

真有说得这么厉害?不妨来一起康康~

详细事理

迪士尼的AI算法效果如何,比拟以往的模型,效果就高下立判了!

过往模型在改变年事的过程中每每都聚焦在人脸身上,会忽略掉人像后面的背景,比如DLFS直接就扣掉了背景图。

并且帧与帧之间的过渡也不是很流畅。

反不雅观迪士尼的新AI算法,在背景处理这块做的就比较自然了。

FRAN可以精确地保留演员的既有的外不雅观,纵然在头部动作幅度很大时或光芒变革的情形下也能如此。

除此之外,FRAN的灵巧性也更强了,可以任意调节想要的年事,比如下面这个***,拖动进度条就能迅速体验下从年轻到年迈的效果。

值得一提的是,FRAN还许可后期职员对天生的***进行二次调度,使全体***更加自然,这个过程也是视觉殊效事情的一个主要组成部分。

话说回来,那FRAN又是若何达到这样的效果的呢?

涉及到两个问题:

一是数据集问题,用于演习模型的数据怎么办理?当然,用真实的人脸数据(年轻~年迈)来演习肯定是不现实的,毕竟也没那么多数据。

在这里,迪士尼利用当前SOTA模型天生的人脸图像作为数据,用这些数据来演习FRAN。

第二个问题是神经网络的架构,FRAN采取的是U-Net架构。

在天生的过程中,FRAN会预测面部的哪些像素点会随着年事的增长而改变,比如增加或去除皱纹,然后这些结果会作为额外的视觉信息通道覆盖在原来的脸上。

在这个过程中,还可以选择利用预先演习好的人脸分割网络:BiSeNetV2,并设置局部的输入和输出年事值,来限定皮肤区域的再老化,使天生的效果更好。

不过值得把稳的是,在年事跨度较大时,比如从童年到老年,FRAN可能就会失落灵了,毕竟它整体的大逻辑是添加和消灭皱纹。

压力给到殊效师

迪士尼操持将AI技能用在电影制作中也不是一天两天了,大家也都知道,做视觉殊效是真烧钱,不仅烧钱,还费韶光。

两年前,迪士尼就曾开拓过一款换脸技能,效果直接看图:

并且在面部捕捉方面,迪士尼也是下了狠功夫,今年早些时候,它还推出了不用刮胡子就能进行面部捕捉的新技能。

最近呢,迪士尼除了公布FRAN这个AI算法外,还公布了一个可以制作不同形态、不同风格烟雾的AI。

迪士尼这边开拓AI技能是开拓得风起云涌,不知道那边殊效师的心态如何,毕竟这些AI未来可是要干他们的活啊。

关于AI抢殊效师饭碗,你以为未来会涌现吗?

参考链接:[1]https://gizmodo.com/disney-ai-art-vfx-visual-effects-de-age-younger-older-1849835548[2]https://www.youtube.com/watch?v=ZP1ApcdyAjk

— 完 —

量子位 QbitAI · 号签约

关注我们,第一韶光获知前沿科技动态