为强化先进驾驶辅助系统（ADAS）视觉处理效能，Arm 宣布推出全新车用影像讯号处理器 Arm Mali-C78AE ISP；其搭配 Cortex-A78AE 与 Mali-G78AE，可提供 ADAS 完整的视觉资讯处理管线，最高可以处理来自四台即时摄影机或 16 台虚拟摄影机的数据。目前 Mobileye 已率先授权使用 Mali-C78AE，并搭配 Mali-G78AE，一同运用于其次世代的 EyeQ 技术上
Arm 车用与物联网事业部副总裁 Chet Babla 表示，随着车用摄影机的数量与精密度越来越高，要有效率且安全地将大量的影像数据、转换为可满足机器与人类视觉所需的运算力，其需求也将越来越大。
为此，Arm 发表 Arm Mali-C78AE ISP。此一处理器从开发之初就具备硬件安全机制与软件诊断功能，可让系统设计人员的设计符合 ISO 26262 ASIL B 功能性安全的要求。同时，为了预防或检测单一影像图框中可能造成图框数据处理错误的故障，此一 ISP 具备超过 380 个故障检测线路、持续的内建自我检测，并可检测连线摄影机中感测器及硬件的故障。
另外，要实现更安全的先进驾驶功能，处理速度可说十分关键。从感测器撷取到影像、透过 ISP 以及 GPU 处理，然后显示在车内的屏幕上，必须在 150 毫秒内完成；多于这个时间，驾驶人在使用如停车辅助功能时就很容易发现影像延迟的现象。在机器视觉应用中，摄影机撷取影像到传送至决策处理过程之间，车辆移动的距离不应多于 250 毫米；超过这个距离，代表机器视觉系统反应速度太慢，无法满足驾驶环境所需的精确与即时的决定要求。
因此，Mali-C78AE 运用先进的降噪技术与动态范围管理，借由调整每张图框中过暗或过亮的部分，确保每张图框都很清晰且妥善曝光；可即时处理最多来自四台高解析、高帧率摄影机的数据，大幅降低内存、通讯与处理的需求，提高系统效率。
不仅如此，Mali-C78AE 为了降低实作多个 ADAS 功能的成本，借由缩小针对机器视觉优化的感测器的输出与色彩转译，让摄影机感测器具备双重作用，以产出适合肉眼的影像。借由避免摄影机与相关电子设备与配线的重复，OEM 可以节省成本并降低复杂性，进而能在各式车辆上广泛部署以摄影机为基础的 ADAS 功能，为驾驶人提供更安全、更好的使用者体验。
（首图来源：shutterstock）
