【RISE 2018】打破时空限界 《复仇者》打到宇宙全靠虚拟人技术
大部分人看电影,都要追求视觉享受,数字王国是在全球经营数位视觉特效、动画及电影业务的知名公司,未听过其名都必定有看过其出品的电影,包括早前上映的电影《挑战者一号》、《魔幻森林》、《奇幻逆缘》、《狂野时速》系列和《复仇者联盟》系列等,数字王国都有参与当中的特技制作,更曾9次获得美国奥斯卡金像奖各奖项。
然而,数字王国CEO兼执行董事谢安表示,以前的电影大多使用后制来调整,但他们近10年来都致力研发及改良虚拟人技术,为电影、在线应用和现场表演活动创造了虚拟演员,解决了表演捕捉上所遇到的挑战。为人所熟悉的例子在2008年的电影《奇幻逆缘》中,他们用了虚拟头部技术,呈现主角由老人变会婴儿的过程,而作为主角的Brad Pitt,其实由真人演出的部分,只占了电影的20%。
另外,跳出电影框框又应用了虚拟人技术的项目的,包括在2012年为著名Rapper兼演员Tuqpac Shakur去世15周年的纪念活动,数字王国以此技术重塑了虚拟的他并于美国的科契拉音乐节上演出;2013年时,又创造了虚拟的邓丽君与周杰伦一同演唱;2015年时,更在大中华区举办了虚拟的邓丽君的全息音乐会,虚拟人技术结合360度摄像技术,皆令观众有震撼视觉的体验。
数字王国曾参与的部份作品(按图了解):
使用虚拟人技术于电影和广告等影像制作上,时间和空间不存在,不是一个限制。
虚拟人技术又甚么优势?
谢安表示,现时虚拟人技术主要应用在电影、VR、social network、游戏和广告这些范畴上,而为甚么要用上虚拟人技术呢?他说:“例如有些动作演员年纪大,我们可以使用虚拟人技术协助,不必事事找替身,连贯性亦较高。另外,档期上亦会比较有弹性和方便,艺人可以同时间接电影、广告、MV等工作,不受时间和空间限制。”而谢安指,暂时初阶段使用虚拟人技术的以外国名人和演员为主。
制作和演出
谢安表示现时在科技层面上,数字王国以Masquerade技术捕捉人脸的面部细节已经没有困难,“以前要贴多个点于演员身上才可以捕捉到他们的表情变化,但现在用了此技术,只要用相机scan约3至5小时便可以捕捉到一个人的不同表情,然后利用机器学习将收集所得数据,转化成40,000个高解像度的3D面部动作数据。”
这些数据可以准确地呈现演员脸部于表情之间的移动方式和皮肤纹理等细节,而制作过程中演员需要穿戴能捕捉动作的装备、面部表情追踪标记和装上相机的头盔,与其他演员一拼演出。而现场会装有多个捕捉动作的相机和感应器,以同时追踪和记录演员的演出及他们完整的肢体动作。Masquerade还会比较现场表演所得的数据和测试数据,并加入遗留的细节如眼睛四周的皱纹,它会在工作的同时一并学习,以用比以往更短的时间提供更好的结果。
虽然科技先进方便,但谢安表示,初初遇到的困难乃西方人与亚洲人表达不同情感的脸部表情有分别,但他们每几个月都会调整脸部数据,所以已经慢慢改善,能克服这些不自然感。不过他亦补充,现在最大的困难乃是处理肖像权的问题,“虽然这技术可以便利各艺人接工作,但若不小心被利用,就会很危险,所以我们仍在找寻定义方法;但希望日后每人都可以有个人化的虚拟人像。”
而演出上的困难,谢安指以过往举办过的虚拟人演唱会为例,“现场演出与电影不同的是,现场演表会担心有delay问题,一delay便会影响品质,所以硬件发展要不断进步才可以维持良好的质素。”
未来虚拟人技术的走向
谢安表示,除了继续在电影业稳定发展外,若有机会,想尝试将虚拟人技术应用于酒店业上,他说:“大家平时一入酒店,都会有礼宾司解答大家的疑难,若用上虚拟人技术,礼宾司可以有由其担当。”他亦指估计5年内,会趋是5G、VR、AI、虚拟人技术等科技结合的趋势,“市场上,与我们同样模规的公司大约有4间,大家各有专长,而我们主要集中在人像特效的研发,所以未来都会继续集中开发。”
另外,谢安希望尝试制造虚拟人偶像,“我们想制造一个虚拟人物,测验在市场上会否有取代某些明星的机会,因为虚拟人技术所造的虚拟人物,要有肌肉就有肌肉、可以唱歌、又可以跳舞,并不会解约,其实是一个很值得去做的尝试,但现阶段需要考虑的是道德问题,担心fans到知道一直追的偶像是虚拟人时,的反应会过激,所以还在考虑阶段。”
《香港01》App,教你做个醒目打工仔!
立即下载:
https://hk01.onelink.me/FraY/hk01app