【摘要】 2月21日,Arm宣布推出ArmMali-C78AEISP,为其专为汽车应用的性能和安全设计的IP产品组合增加新成员。Mali-C78AE可以提供完整的ADAS图像
2月21日,Arm宣布推出ArmMali-C78AEISP,为其专为汽车应用的性能和安全设计的IP产品组合增加新成员。Mali-C78AE可以提供完整的ADAS图像数据处理流水线,可以优化性能,最大限度地降低功耗,并提供一致的方法来实现功能安全。
根据研究机构Strategyalytics最近的一份报告,从2020年到2025年,汽车摄像头市场总值预计将增长19%以上,成为最重要的传感器类型,可以为车辆提供决策周围环境所需的数据。
Arm汽车和物联网部副总裁ChetBabla表示:随着车载摄像头数量和精度的增加,高吞吐量的图像数据也需要相应提高输出能力,以满足机器和人类视觉的不同要求。Mali-C78AE满足行业对图像处理新方法的需求,有助于实现ADAS和自动驾驶的新功能。
人类和机器视觉要求安全第一。
Mali-C78AE专门为各种ADAS功能所需的人机视觉安全应用设计,可处理多达4个实时摄像头或16个虚拟摄像头的数据。
Mali-C78li-C78AE一直具有硬件安全机制和软件诊断功能,使系统设计师能够满足ISO26262ASILB功能安全的要求。Mali-C78AE旨在防止或检测单个摄像头帧中可能导致帧数据处理错误的故障。因此,ISP有380多个故障检测电路,连续内置自检,可检测连接摄像头的传感器和硬件故障。
视觉处理需要大量的数据,工作负荷要求高。
处理速度是Mali-C78AE的关键因素,其重要性不亚于安全性和用户体验。例如,从传感器获取图像,先后通过ISP和GPU处理,然后显示在屏幕上供驾驶员查看。整个过程应在150毫秒内完成;如果过程耗时超过150毫秒,驾驶员在使用停车辅助系统等功能时会发现图像延迟。在机器视觉应用中,从获取摄像头图像到决策处理的整个过程中,车辆的移动距离不应超过250毫米;如果超过此距离,则意味着机器视觉系统反应太慢,无法满足准确及时的决策要求,以满足驾驶环境的需要。
为了让驾驶员和机器做出最好的决定,ADAS摄像头必须从每帧中收集最相关的信息。Mali-C78AE采用先进的降噪技术和动态范围管理,通过调整图像太暗或太亮的区域,确保每帧图像质量清晰,曝光适当。Mali-C78AE可实时处理多达4个高分辨率、高帧率的摄像头数据,显著降低内存、通信和处理要求,提高系统效率。
Mali-C78AE通过调整画面太暗或太亮的区域,确保每帧画面质量清晰,曝光适当(如图2)
目前,为了实现各种ADAS功能,需要单独设置摄像头,因为用于机器视觉应用的摄像头(如车道偏离警告)不会产生适合人类视觉的图像,如环顾四周。为了降低实现各种ADAS功能的成本,Mali-C78AE通过减少和改变适合机器视觉的传感器输出,使摄像头传感器可以实现双重使用,从而创建适合人眼的图像。通过避免重复部署摄像头及其相关电子设备和线束,OEM可以节省成本,降低复杂性,更广泛地部署基于摄像头的ADAS功能,为驾驶员提供更安全、更好的用户体验。
行业先锋采用强大的ADAS图像数据处理流水线。
作为汽车视觉安全技术领域的先锋,Mobileye率先在其新一代EyeQ技术中采用了全新的Mali-C78AEISP。Mobileye在开发Mobileeeeeultra和EyeQ6H之初,选择Mali-C78AE进行高效的图像数据处理,通过匹配Mali-G78AEGPU,实现了安全、流畅、实时、直观的图形渲染功能。
Mobileye项目执行副总裁Elchananrushinek表示:通过将Armisp与GPU技术相结合,我们可以提供集中的计算解决方案,通过单个SOC实现最先进的ADAS和停车辅助系统。