背景

如今，汽車和移動(dòng)出行正處于百年一遇的革命之中，需要實(shí)現(xiàn)自動(dòng)駕駛、電氣化、互聯(lián)互通等各種功能。其中，ADAS（高級(jí)駕駛員輔助系統(tǒng)）及其擴(kuò)展和AD（自動(dòng)駕駛）是實(shí)現(xiàn)安全和安心社會(huì)不可或缺的功能，汽車制造商正在齊心協(xié)力開發(fā)它們。汽車配備前視攝像頭變得越來越普遍，我們的技術(shù)被廣泛用于這些攝像頭的圖像識(shí)別。例如，圖像傳感器獲取的數(shù)據(jù)通過ISP（Image Signal Processor）轉(zhuǎn)換為圖像數(shù)據(jù)，通過IMR（Image Renderer）進(jìn)行畸變校正，然后通過IMP（Image Processor）圖像識(shí)別識(shí)別為車道、標(biāo)志或行人）。隨著汽車變得更加電動(dòng)化，圖像識(shí)別不僅需要實(shí)現(xiàn)處理性能，還需要實(shí)現(xiàn)低功耗。此外，自動(dòng)駕駛需要支持功能安全的硬件和軟件，例如在發(fā)生硬件故障時(shí)安全地停止車輛或取消自動(dòng)駕駛并將控制權(quán)返回給駕駛員。在不降低系統(tǒng)處理性能的情況下，在執(zhí)行圖像識(shí)別的同時(shí)檢測故障是自動(dòng)駕駛的主要挑戰(zhàn)之一。例如在硬件故障時(shí)安全停車或取消自動(dòng)駕駛并將控制權(quán)交還給駕駛員。在不降低系統(tǒng)處理性能的情況下，在執(zhí)行圖像識(shí)別的同時(shí)檢測故障是自動(dòng)駕駛的主要挑戰(zhàn)之一。例如在硬件故障時(shí)安全停車或取消自動(dòng)駕駛并將控制權(quán)交還給駕駛員。在不降低系統(tǒng)處理性能的情況下，在執(zhí)行圖像識(shí)別的同時(shí)檢測故障是自動(dòng)駕駛的主要挑戰(zhàn)之一。

ADAS/AD計(jì)算機(jī)視覺系統(tǒng)

具體例子

基于上述背景，除了開發(fā)圖像識(shí)別軟件外，我們還希望通過提供利用瑞薩在功能安全方面的優(yōu)勢的自動(dòng)駕駛平臺(tái)，為實(shí)現(xiàn)自動(dòng)駕駛帶來的無事故社會(huì)做出貢獻(xiàn)。使用各種硬件加速器。

使用ISP、IMR、IMP等低功耗專用硬件加速器開發(fā)計(jì)算機(jī)視覺軟件

為視覺處理的排隊(duì)和流水線開發(fā)計(jì)算機(jī)視覺框架

提供功能安全解決方案以檢測自動(dòng)駕駛過程中的硬件故障

通過結(jié)合計(jì)算機(jī)視覺和 Rader/Lider 和 SLAM 解決方案提供傳感器融合

圖像

概括

我們開發(fā)的計(jì)算機(jī)視覺軟件安裝在世界各地的汽車上，每天為駕駛員提供支持。作為駕駛員，能夠親身感受我們的發(fā)展成果，并通過我們的軟件為實(shí)現(xiàn)安全可靠的移動(dòng)社會(huì)做出貢獻(xiàn)，這對(duì)我們來說是非常有益的。瑞薩將繼續(xù)開發(fā)和提供自動(dòng)駕駛平臺(tái)，以實(shí)現(xiàn)新的移動(dòng)社會(huì)和高度自動(dòng)駕駛的社會(huì)。

審核編輯：郭婷