在为期 3 天的 2019 年高通骁龙技术大会上,其最后一天的议程,高通将齐聚焦在延展实境 (XR;Extrnded Reality)的产品发展上。高通表示,自从之前的骁龙 835 运算平台提供延展实境的功能之后,揪下来的骁龙 845 运算平台、骁龙 XR1 运算平台都已经提供了市场上超过 30 种终端设备的需求。如今,为延续这样的发展,因此 2019 年正式发表骁龙 XR2 5G 的运算平台,给予更多市场上的需求有更加完整的解决方案。
高通指出,骁龙 XR2 运算平台是全球第一个支援 5G 的延展实境平台,其联结高通的 5G 与人工智能 (AI) 创新,以及领先业界的 XR 技术,将带来行动运算新时代。而且,骁龙 XR2 运算平台还推出了多项客制化功能,更有许多能在扩增实境(AR)、虚拟实境(VR)与混合实境(MR上扩展的创举。
由晶圆代工龙头台积电 7 奈米制程所打造的骁龙 XR2 运算平台,相较于已被广泛采用的高通骁龙 XR1 运算平台,骁龙 XR2 运算平台的效能显著提升。其中除了提供 2 倍的 CPU 与 GPU 效能、4 倍的影片带宽、6 倍的分辨率,以及 11 倍的人工智能效能之外,骁龙 XR2 运算平台更是全球首款同步支援包括 3 个 RGB、4 个 VGA 在内的 7 镜头与专用电脑视觉处理器,也是第一个实现以低延迟镜头解开真正 MR 体验的 XR 平台,让使用者在戴着 VR 装置时看见、互动以及创造虚拟世界与真实世界的混合体。
高通进一步指出,为了满足真正身临其境的 XR 的要求,此平台提供了采用人工智能基础技术与 5G 连线能力的客制化影像表现、互动与音讯技术。其中在视觉技术上,因为要在 XR 中体验更逼真的真实感,就必须缩小现实世界与虚拟世界之间的视觉间隙,这需要最先进的显示器与绘图处理能力。因此,骁龙 XR2 运算平台在核心 GPU 处理能力上大幅跃进,为高效能图形渲染支援 1.5 倍的像素速率与 3 倍的纹理速率。
另外,骁龙 XR2 运算平台还有专属功能,例如眼动追踪式注视点渲染技术、让画面更新率更顺畅的增强型可变速率着色等,能协助处理重度工作负载,同时维持低功耗,而且骁龙 XR2 运算平台的显示面板能以 90 fps 提供高达 3k X 3k 的单眼分辨率,更是第一个支援 60 fps 8k 360 度影片的 XR 平台,为串流与本机播放提供拟真的视觉表现。另外,独特的 AR 显示器研发的客制硅晶可降低整体系统延迟状况,维持 AR 体验的沉浸感。
至于在互动性上,为了透过 XR 的使用,使用户能被瞬间传送到全新的环境中,因此,要精确有效地做到这一点,骁龙 XR2 运算平台在导入了对同步 7 镜头与客制电脑视觉处理器的支援之后,可以同步多镜头能实现以高精准度即时一起追踪头部、唇部、眼睛,加上 26 个骨架点的手部追踪技术。而电脑视觉能也提供高效率的场景理解与 3D 重建,这些功能相互搭配后将让使用者走入全新环境,在其中的数位世界凭直觉互动。
最后,在骁龙 XR2 运算平台上还能在丰富的 3D 空间音效中,提供全新等级的音讯层,同时透过干净无噪声的语音互动加深沉浸感。而在最关键的人工智能与 5G 方面,由于其是形塑通讯与运算未来的两大技术。因此,骁龙 XR2 运算平台的多项功能皆已透过人工智能提升效能,包含视觉表现、互动性、音讯,以便带领使用者浸润在更聪明的实境中。
而因为骁龙 XR2 运算平台平台是全球第一个支援 5G 连线能力的 XR 平台,有潜力释放出需要低延迟与超快速资料速率的创新 XR 体验浪潮。其中包括藉 5G 的利用,让装置与边缘云之间能拆分处理,呈现拟真的高品质体验,实现真正不受线路或空间限制,而无拘无束的 XR 体验状态。同时,高通也在会场中宣布了即将与在全世界都受到游戏迷喜爱的宝可梦 GO (Pokémon GO) 游戏授权营运公司 Niantic, Inc. 的相关合作计划。
高通表示,高通与 Niantic, Inc. 在 XR 的合作计划中,目的是要建立 XR 应用的生态系架构。其中第一步就是借由高通在 XR 上追踪技术的专长,以及 Niantic, Inc. 在 AR 云及 AR SDK 套件技术上的开发能力,共同打造 XR 眼镜的参考设计,以提供给相关的厂商进行产品开发之用。未来,再透过生态系的建立,合作对象将不再局限于硬件厂商,其他包括空间运算与相关服务厂商都会加入其中。至于,最快多久会有成果展现,高通表示会很快发生。
(首图来源:科技新报摄)