在电影、电脑游戏中所运用到的维妙维肖 3D 动画,演出上最关键的元素,是角色自然而真实的表情。其制作上,向来是在现实的三维世界里捕捉演员的脸部表情演技,而要精确地建好表演者的脸部模型还要完整撷取他们一系列的表情动态,是一件苦差事,但随着迪士尼研究出的新算法,这件事将变得容易许多。
传统的脸部表情动态撷取技术,高度依赖多摄影机。截然不同地,迪士尼这个新方法仅仅需要使用一台摄影机。更进一步,这个方法甚至还不需要用到光场摄影机或任何其他非传统的特种摄影装置。实际上,研究人员测试的一大票摄影机中,甚至包含了GoPro 以及iPhone 。
迪士尼国际研发机构 Disney Research 的资深研发科学家 Thabo Beeler 说:“只用单一摄影机来捕捉脸部演出,不全然是新技术。其实这已经存在一段时间了,但是现有的单摄影机法必须事先建立好演员脸部的高精度 3D 模型,附带还要建立可能高达一千多项的各种表情数学描述式。然而尽管耗费了大量的时间与努力,仍然无法表达一个演员所有的表情,实务上还需要做很多额外的修正。”
而迪士尼研究出的新方法,则不需要电脑计算好大量预处理描述式,相反地,而是考量进骨头结构和皮肤厚度的资讯,以一个“解剖学约束”的模型,来保持表情动画的作动被限制在物理上的可能合理范围内,而不需要大量预处理描述式。所以研究人员只要用很少量的脸部扫描图片与描述式,就可以建好脸部模型。而为了验证该方法的到底有多有用,迪士尼测试了极端的状况──用高压空气吹过演员脸部产生的极度扭曲表情(花式跳伞表演的影片可以看到),而这样程度的变形也都能被撷取到,而传统的单摄影机算法完全不可能达到这种程度。这个技术把单摄影机法捕捉到的表情细节品质,拉高到可以跟传统多相机撷取技术相提并论。
“当今的潮流是在对演员进行动态撷取时,如果有更少、更简单的撷取装置的话,演员就可以在他们的表演中增加更多行动自由,更方便表演,然而代价通常就是得妥协于较少的细节与较低的准确度。没有一种硬件设置可以比我们的单摄影机法更简单,而在捕捉品质上,显而易见地,以我们的新方法捕捉到的成果,又是竞争对手用传统方法难以超越的。”迪士尼国际研发机构副总裁 Markus Gross 如此说道。
7 月 24 日这个专案成果在加州于 ACM SIGGRAPH 电脑图学及互动技术国际研讨会上发表,看来以后虚拟动画角色要出现像大和田那样厉害的颜艺也不是不可能的了。
- Single camera can capture high quality facial performance
- DISNEY RESEARCH DEVELOPS METHOD TO CAPTURE 3D FACIAL PERFORMANCES WITH A SINGLE CAMERA
(首图来源:digital trends)