【复仇者联盟】徐锦江演雷神?AI换脸毫无违和感 连打戏都神同步

撰文: 狂丸研究所
出版:更新:

不得不说,徐锦江的戏路真是越来越广了,去年扮完圣诞老人,最近又“扮演”雷神,注意,这次不再是修图,而是视频。

徐锦江“扮演”雷神。(慢三与偏见)

视频中徐锦江的表情自然,且恰到好处。这是和魁隆(Thanos)的对视,大仇的恨意与报仇的快意都在深邃的眼神里了。

徐锦江于《复3》的“演出”。(慢三与偏见)

用网友的留言来说,视频不是改图,难道这些短片大部分都是真的?徐锦江当然没有客串《复仇者联盟》(Avengers),这些都是网友利用“AI换脸”技术恶搞的作品。我知道,你已经忘了原版甚么样了……

唔止扮雷神!徐锦江扮水行侠一样零违和感,点图看更多恶搞图片▼

+6

所以,人工智慧换脸技术现在已经这么强了,百分百替换演员?事实上用该类技术进行换脸已经并不是新鲜事了,而近期接连不断的爆红则是因为这项技术正逐渐在普通人之间得到应用。

徐锦江“扮演”水行侠。(狂丸科学)

自照片和视频出现以来,这两者都是人们通常认为是真相的有力证明。然而后来我们经常能够听到“这张肯定有执过”这句话,但很少有人指出视频会造假。不过现在随着AI技术的兴起,你看的视频也未必再是真的。

早期一批在该领域试探的人群中,德国纽伦堡大学科学家Justus Thies的团队在2016年推出的Face2Face就给狂丸留下过深刻印象,它可以给视频中的人物,换表情。

德国科学家Justus Thies的团队在2016年推出的Face2Face。(狂丸科学)

而正如图片中展示的,Face2Face可以让原作角色做出的表情贴合到目标角色的脸上,达成一种换脸效果,以极为逼真的方式重新呈现经过处理的视频。(点图放大▼)

这位网友在2017年底使用Google开源机器学习框架编写了一个不同换脸人工智慧,他使用了很先进的机器学习思想,同时训练了两个人工智慧,一个用来换脸,另外一个用来识别换脸。这款AI能够利用搜寻引擎检索出大量“源角色”的照片与动态资源:

这款AI能够利用搜寻引擎检索出大量“源角色”的照片与动态资源。(狂丸科学)

接着程式会对素材进行编译,自动学习与研究相关内容,然后根据“目标角色”的神态,造出新的贴图,接着逐步替换掉原作视频中的人脸,最后生成新的影片。例如演员尼古拉斯基治(Nicolas Cage)现在变成了超人的女朋友。

尼古拉斯基治变成超人的女朋友。(狂丸科学)

而超人的女朋友原本长这样,感觉好像没甚么不对。

而超人的女朋友原本长这样。(狂丸科学)

这看起来貌似很复杂,但无论是deepfakes自己还是其他相关技术人员都认为演算法并不是很特别,其实成本也很低,只需要一款家用显示卡加上一定的时间。

同时这也只是开始,随后还出现了如FakeApp等更为简化的换脸软体,换脸技术开始逐步平民化,你可以看到它的中文官网以及其中的相关教程。可以说,deepfakes的出现让普通人也能玩得起原本实验室研究的东西。

deepfakes中文站(狂丸科学)

当然,狂欢后背,冷静下来的人们也开始发觉最直观的问题:造假的视频会对生活产生怎样的影响。一些比较直观的问题是,不仅很多人的权益有可能会因此受损,而且视频也最终会遭遇和图片一样的命运,变得看起来并不可信。

有网民担心换脸技术提升会带来危机。(狂丸科学)

所以我们以后还能分辨出真假视频吗?对此,也有人提出以毒攻毒,利用AI来对抗AI造成的麻烦。去年6月左右,纽约州立大学的一组研究人员似乎找了deepfakes的破绽,那就是通过眨眼来判断视频的真假。

正如上文所说,deepfakes的深度学习方式是利用海量图片进行培训,这意味着修改过后的视频中,人物并不会眨眼或者呼吸,简单说,有点像把图片糊在视频原角色的脸上一样。

因此只要再设计一个人工智慧,对其相关细节进行检测,就能分辨其真假。

不会像真人那样眨眼(Siwei Lyu)
真人眨眼(Siwei Lyu)

但显然这并不意味着“假视频”能够完全得以检测控制,因为“换脸的技术”也还有提升的余地。去年8月,又一款新的换脸人工智慧亮相于“电脑图形图像特别兴趣小组”会议上,它叫做Deep Video Portraits。与deepfakes不同,Deep Video Portraits更像是Face2Face强化版,可以让视频中的明星根据你自己的表情而修改,而且对细节很专注。

Deep Video Portraits更像是Face2Face强化版。(狂丸科学)

其实你在看互联网流传的那些AI换脸视频时,或多或少能找到一些破绽,像刚才说的眨眼、眼神、动作同步、表情协调等等,而Deep Video Portraits似乎能将这些细节解决。这次的修改不再只是对嘴型,可以包括头部旋转、面部表情、眼神和甚至眨眼等等。

不止是对嘴型,Deep Video Portraits连头部旋转、面部表情都可以同步。(狂丸科学)

甚至还可以修改墙后的影子。随着左侧源角色的头部摆动,目标角色也要摆动头部,光影由此会发生变化,而Deep Video Portraits却将这种变化也修改了出来。

Deep Video Portraits还可以修改墙后的影子,连头部摆动都会对光影带来变化。(狂丸科学)

如果对输出画面中人物的姿态不满意,还可以直接微调。

Deep Video Portraits可以对人物姿态做微调。(狂丸科学)

说到这里有些沉重,最后介绍一个近期很红的换脸APP,Morphin。它储存了一系列互联网中比较流行的动图,然后在你拍摄自己大头像后,会将其合成,最终形成一个3D动画换脸效果,例如这是里安纳度狄卡比奥(Leonardo DiCaprio)。

(狂丸科学)

而用狂丸朋友的脸换上后,就变成了这样……总之,干杯了各位。

(狂丸科学)

【本文获“狂丸科学”授权转载,微信公众号:kuangwanplay】

【周五心意运动.让#心意成为眼和耳】您捐一份$50晚餐钱,已可助推行导盲犬服务,即到“01心意”平台捐款支持【香港导盲犬服务中心】