图像
Ren Imaoka
Ren Imaoka
Director
已发布: 2022年8月29日

概述

为了帮助实现先进的自动驾驶社会环境,瑞萨正在开发图像识别软件并提供与功能安全兼容的自动驾驶平台。

背景

据说汽车领域和社会的流动性正经历着百年一遇的创新,制造商正在结合消费者的需求去实现各种功能,如自动驾驶、电动化和车网互联。 其中,ADAS(高级驾驶辅助系统)及其延伸的AD(自动驾驶)对于实现一个安全和有保障的社会是必要的,汽车制造商正在协同努力开发这些先进的汽车关联系统。 前方的监控摄像头在汽车中越来越普遍,瑞萨科技也将这些摄像头广泛用于图像识别。 例如,使用ISP(图像信号处理器)将图像传感器获取的数据转换为图像数据,使用IMR(图像渲染器)进行失真校正,使用IMP(图像处理器)进行图像识别,以识别车道、标志和行人。 然后,在越来越多的电动化的车辆中,图像识别不仅需要较高的处理性能,同时还需要努力降低功耗。 此外,在自动驾驶中,需要硬件和软件来支持功能安全,如在硬件故障时安全地停止车辆,或取消自动驾驶并将控制权还给驾驶员。 在不影响系统处理器性能的情况下进行图像识别时,检测故障是自动驾驶所面临的主要挑战。

图像
Fig1 ADAS/AD computer vision system

ADAS/AD computer vision system

具体例

基于上述背景,我们希望通过利用瑞萨在功能安全方面的自动驾驶平台的优势,以及利用各种硬件加速器开发图像识别软件,为实现自动驾驶带来的零事故社会作出贡献。

  • 使用专用硬件加速器开发图像识别软件来实现ISP/IMR/IMP和其他低耗能的改善
  • 进行图像识别处理的队列及管线处理的图像识别框架的开发
  • 为自动驾驶中的HW故障检测提供功能安全解决方案
  • 提供结合图像识别和Rader/Lider的传感器融合和自我定位解决方案。
图像
Fig2 Sensor Fusion for ADAS/AD

Sensor fusion for ADAS/AD

结论

我们开发的图像识别软件搭载在世界各地的汽车上,每天都在支援汽车用户。对于驾驶汽车的我们自己来说,也能够切身感受到我们的开发成果正在被大家所认可,通过软件为实现安心安全的移动社会做出贡献,这是我们最大的价值。为了实现新的移动性社会、高度的自动驾驶社会环境,瑞萨致力于为自动驾驶平台的开发提供服务。