击上方蓝字CG世界关注我们

“ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”

中国很有影响力影视特效CG动画领域自媒体

大家还记得我们在今年二月份分享过的一篇关于抖音AI换脸特效的文章吗?国内外各路明星一起唱“蚂蚁呀嘿”的画面实在是太魔性太洗脑了,不过这款特效仅仅只是让明星静态照片上的脸部动了起来,而且每个人都是一样的面部动作,看多了也就没啥意思了。但是最近国外的一位大神,居然制作出来了可以以假乱真的阿汤哥,我们先一起看一下视频!

打开网易新闻 查看更多视频
在TikTok上如何伪造成汤姆克鲁斯?
video="http://flv0.bn.netease.com/videolib1/2104/11/64txz4wskgq/SD/movie_index.m3u8,http://flv0.bn.netease.com/videolib1/2104/11/64txz4wskgq/SD/64txz4wskgq-mobile.mp4" img="http://videoimg.ws.126.net/cover/20210411/6fMBlv8kz_cover.jpg" alt="" broadcast="in" size="" topicid="1000" commentid="" commentboard="video_bbs" vid="VF6C57Q45"@@

是不是很厉害,在做各种动作的情况下还能保持阿汤哥的面部不出现任何的瑕疵。

大致流程是这样的,首先就是模仿者先用手机进行拍摄基本的原素材,然后将文件发送给大神。因为分辨率不高,差不多720P,所以在每个过程结束时,大神都会执行UpRes的操作。

工作流程的关键部分是Machine VideoEditor。MVE是一个免费支持大家使用的工具,主要用于Deep fake项目管理,它可以帮助收集数据并进行合成,并且完全支持DeepFaceLab和数据格式,将这个工具用于合成工作所需的附加遮罩上。

在进行任何此类的ML训练时都是很耗时的,一般是至少2天或者3天的时间上,有时候可能会更多,具体取决于清理镜头的速度以解决诸如Deeptomcruise等新课题。虽然大多数人都只知道他的DeepTomCruise这一作品,但其实大神已经完成了许多不同主题的类似项目了。

MVE的重点是神经渲染项目管理,它使大神可以将所有DFL培训资料放在一个项目文件夹中,用于数据提取,还包括高级排序方法,集合分析,扩充以及手动面部和蒙版编辑器工具。

打开网易新闻 查看更多图片

这个程序可以帮助大神自动标记脸部,从而无需手动识别眉毛,眼睛,鼻子,嘴巴或下巴,虽然这个程序不是开源的,但可以免费使用。

所有的视频合成都是在AfterEffects中完成的。大神其实是对NUKE非常感兴趣的,尤其是使用其新的ML节点(如Copycat)去探索NUKE,可是因为他更擅长AE,所以就没用Nuke。

合成部分主要是改变头发颜色,修补皮肤纹理以及从训练空间到DFL的求解空间中发现的伪像。例如,当模仿者靠近相机附近时,镜头失真有时是不会反映在解决方案中的。还有就是由于广角效果,在眼睛水平位置靠近相机的脸部下巴会相对较细,但在真正汤姆克鲁斯的实际镜头中是很少见到的,因为演员很少会去这样拍摄,所以在这个情况下会使用模仿者的下颚进行替代。

大神与视觉特效公司以及所有在Deep Fake领域工作的主要艺术家进行着紧密的合作,他们共同分享想法并开展工作以证明神经渲染技术是可以做出惊人的作品的。

值得一提的是,模仿者曾向阿汤哥的团队发送了一封表达敬意的电子邮件,里面解释说到他和大神的工作只是用来探索和教学Deep Fakes和神经渲染技术的,他们保证永远不会使用伪造的阿汤哥来用于商业的部分。大神的主要目的是在教学可能的东西的同时还能在视觉效果方面建立自己的视业。同时他还定下了与《指环王》团队合作的目标,因为这是他从小就一次又一次看的电影,希望他能早日实现~

打开网易新闻 查看更多图片

最后为大家送上大神在自己的主页写着的一句话:我是一个喜欢幽默的人,我也制作出了很多疯狂的视频,我的天赋是有着一双追求完美和高品质标准的眼睛,我宁愿去做一些我引以为傲的事情,也不愿花费很短的时间做出垃圾一般的作品。

好了,关于DeepTomCruise的内容就是以上这些~

参考文章:https://www.fxguide.com/fxfeatured/fake-tom-cruise/

—全文完—