人类的动作细节极其细腻，要如何捕捉所有的动态特别是脸部表情，是许多电影动画制作时最伤脑筋的重点。意想不到的是，随着你我手边的智能装置搭载的科技越来越多，运算能力也越来越进步，来自台湾并且已经前进硅谷的甲尚科技 Reallusion 让 Face ID 变身专业动画设备 ，想到可以利用新系列 iPhone 包括 iPad Pro 全线皆可使用的原感深度相机，来做为动画制作的人体动态（特别是脸部）感测设备，透过免费的 Live Face app 与该公司专业软件连接，让以往可能必须使用昂贵器材才能达到的脸部追踪功能，成为触手可及的创作工具，让你直接将这个原本主要用于 Face ID 解锁的功能，可以应用在更广泛甚至更专业的领域之中。
这次，我们电脑王阿达团队有机会受邀参加 Reallusion 团队分享如何利用 iPhone X、XS、XR 与最新的 iPad Pro （2018) 上的原感深度相机，做为自家 2D 角色动画制作工具 CrazyTalk Animator 3（以下简称 CTA3 与 CTA）的脸部动态捕捉工具的应用心得的发表会。
其实 CTA 与许多动画制作应用一样，都能用此软件来创建虚拟角色，只是要如何“驱动”这些创作角色就是一门很深的学问了 — 以往，我们要模拟出精确的人脸动态，可能还必须要在效果极佳但建构价位极高的感测硬件，以及效果普通但只要利用每台笔电、手机上都有的视讯相机即可使用的两个极端的品质产出之间做选择，很难两全。
现在，透过 Reallusion 与 Apple 融合的软硬件解决方案，则是可以如上图这样，直接透过与 iPhone 有线 / 无线（知道 IP 就可以连上 CTA 啰）的连接，即可利用每次点亮手机都会用到的原感深度相机，来进行精准的角色表情捕捉（PS：各位有发现 iPhone XS 上的原感深度相机其实也支援横向感测吗？这算是彩蛋？XD）。
这样的解决方案也被应用在动画录制，甚至是直播之上。也因此现在也有被游戏公司、电影甚至是 YouTuber 都抢先应用来进行创作，也运用在了博物馆馆藏的导览用途之上。
这次发表会最有意思的是，这次除了现场的展示之外，该公司与苹果还请来四位应用这样工具来做为创作工具的专业人士，包括 Facebook 非常红的大阴盗百货插画家本人（上图左 2），以及城市涂鸦师 Bounce（上图左 1），还有 YouTube 游戏直播主安杰猫（图右 2）与视觉行销达人 NiNi 老师（上图右 1），分别分享了利用这套解决方案快速进行动画创作的经验。
是说，无论是如何应用这样的解决方案，他们不约而同地都表示，透过 iPhone 原感深度相机搭配 CTA 3 软件来进行创作，将可以在两三天乃至于数小时的时间内，完成以往必须花费数周，或甚至因为觉得难度太高而放弃的创作内容，可见创作效率，绝对是这个解决方案最厉害之处。更能因此激励这些创作者发挥释放自己的创作能量，找到有别于以往的创作之路。
▲影片：受到漫威教父 Stan Lee 肯定的城市涂鸦创作者 Bounce，就利用了 CTA 搭配 iPhone 完成了自己想都没想过的动画创作。
▲图：CTA 的创作者不一定需要具备逐步建构完整角色元件的技术，也可以透过简单加入照片或图片，并设定锚点（Anchor point）的方式来完成自己的 2D 动画角色。
简单地说，创作者只需要逐步设定或绘制好动画角色素材（其实直接用照片或图档标上锚点更快速简单！据说熟悉的话只要 3 分钟就能完成一个角色 — 当然，要先画好角色啦！），即可随时随地以 Mac 电脑 + iPhone 开始进行长时间的动画录制，效果即可达到极为专业可用的境界，可说是插画等图文创作家想要用自己的虚拟角色与粉丝互动，或者是拿来制作动态贴图与影片的神器！
就我们在现场试玩的心得，是真的觉得相当可用，而且反应超迅速！有兴趣的朋友，可以用你手上的 iPhone 下载 Live Face 应用来看看原感深度相机的脸部捕捉追踪效果 — 真的超级好玩，建议大家一定要抓来玩，反正是免费的应用，绝对让人印象深刻。
不过别说我们没提醒你，Reallusion 的这套解决方案，在透过原感深度相机中超过 30,000 个点阵投影器所在人类脸部搜集的资讯里，其实不止 Live Face app 所显示的八种脸部特征“程度”侦测而已，其实早在 iOS 12 之前，该公司就已经把舌头等多达 52 个脸部数值全都可以透过 iPhone XS 即时地搜集并进行相关演算 — 就像上图，数值是一整页滑不完… 可见这原感深度相机真的是很黑科技的技术，应用起来更是拥有无限可能。
▲图：CTA 的产品经理李孟翰向我们分享搭载新世代原感深度相机的 iPhone 系列的硬件实力，认为针对面孔捕捉与表情算法包括 AR Kit 工具等方面 Apple 提供了最佳的解决方案，Reallusion 更是在软件方面配合发挥出其完整的表现。
Reallusion 表示，有运用到 Apple ARKit 的 Face Mocap 技术方面，共分有 Tracking 追踪、Blendshape 解析诠释表情与 Mapping 校正与客制化三个部分。根据他们的研究，是相当肯定 Apple AR Kit 在搭配 iPhone XS 等具备原感深度相机的机型之下，其实无论是脸部解析、表情诠释都非常精准到位，是他们认为“最适合开发人脸辨识的最佳解”并自信地表示 CTA3“是完整体现了 iPhone X 脸部辨识的应用”。
透过像是 Reallusion 与苹果的软硬件结合的案例，我们深深地感受到，现在行动装置在运算能力乃至于感测功能方面的强大，已经可以配合专业软件达成更多使用的可能性。另一方面，这类原本专属于特定动画师的专业领域，其实也借由这类软件渐渐地变得更为平易近人（价位上、技术上）后，变成人人都有机会借由这些垂手可得的工具来发挥自己心中的创意，发挥以往可能很耗时间金钱才能完成的创作内容，高效率轻松打造属于自己的动画内容。
引用来源
Apple Watch Series 4 开箱 体验：有感进化，令人爱不释手的苹果智慧表
