ADAS多種傳感器融合帶來(lái)了信息處理的挑戰(zhàn)

1 汽車ADAS的多種傳感器融合

隨著主動(dòng)安全功能成為汽車電子中的關(guān)鍵要素，圍繞車輛周圍安裝以保護(hù)人員安全的傳感器將持續(xù)增長(zhǎng)。為了實(shí)現(xiàn)主動(dòng)安全功能和高水平自主駕駛，車輛將會(huì)需要多個(gè)攝像頭、雷達(dá)和LiDar。除了傳感器出現(xiàn)增長(zhǎng)之外，融合這些傳感器信號(hào)以獲取準(zhǔn)確和可靠的車輛周圍環(huán)境的模型也很重要。這些曾經(jīng)僅在高檔汽車中出現(xiàn)的電子系統(tǒng)正在遷移到幾乎所有車輛上。消費(fèi)者需求和更嚴(yán)格的車輛安全等級(jí)要求，推動(dòng)了這一發(fā)展趨勢(shì)。

除了車輛中的傳感器數(shù)量增長(zhǎng)之外，這些傳感器內(nèi)的處理運(yùn)算不僅利用傳統(tǒng)形式的算法（計(jì)算機(jī)視覺(jué)），還利用基于AI的算法以作配合。AI正在進(jìn)入車輛中的幾乎每個(gè)傳感器和電子模塊中，范圍包括自然語(yǔ)言處理到目標(biāo)檢測(cè)和分割。

2 對(duì)芯片IP的挑戰(zhàn)

這些發(fā)展趨勢(shì)帶來(lái)了一些挑戰(zhàn)。隨著這些主動(dòng)安全功能擴(kuò)展到所有的車輛上，汽車業(yè)界要求這些解決方案必需高效、靈活和可擴(kuò)展。由于AI不斷遷移到這些傳感器中，因此客戶需要能夠進(jìn)行高效處理的IP產(chǎn)品;但是由于技術(shù)的創(chuàng)新速度超過(guò)了典型電子模塊的開(kāi)發(fā)周期，因此這些IP還必須具有靈活性，因而，客戶需要能夠適應(yīng)這種創(chuàng)新變化的IP產(chǎn)品。

除此之外，從運(yùn)算的角度來(lái)看，各類型傳感器具有不同的運(yùn)算需求，所以解決方案必須靈活處理這些不同類型的運(yùn)算。一個(gè)示例是汽車后部的倒車攝像頭，你需要使用深度學(xué)習(xí)算法，以及能夠處理傳統(tǒng)計(jì)算機(jī)視覺(jué)算法的處理器。

從硬件方面來(lái)看，這帶來(lái)了挑戰(zhàn)，也需要能夠與硬件協(xié)同工作，經(jīng)過(guò)優(yōu)化以便在這些硬件上高效運(yùn)行的高效軟件開(kāi)發(fā)工具。

3 CEVA的解決方案

芯片IP企業(yè)CEVA專注面向汽車電子技術(shù)和下一代車輛中之新興技術(shù)，這些技術(shù)用于主動(dòng)安全到信息娛樂(lè)。目前CEVA擁有一系列IP產(chǎn)品組合，面向計(jì)算機(jī)視覺(jué)、AI、雷達(dá)、LiDar、傳感器融合、Car2X通信（DSRC/C-V2X）和音頻處理應(yīng)用。

其中，CEVA SensPro是業(yè)界首個(gè)高性能傳感器中樞DSP架構(gòu)，旨在處理情境感知設(shè)備的復(fù)雜傳感器處理工作負(fù)載。SensPro可以高效地應(yīng)對(duì)汽車、機(jī)器人、AR/VR、語(yǔ)音助手、移動(dòng)設(shè)備和智能家居設(shè)備中的現(xiàn)代智能系統(tǒng)生成的傳感器數(shù)據(jù)的巨大增長(zhǎng)，滿足業(yè)界對(duì)專用處理器的需求。這些傳感器包括攝像頭、雷達(dá)、LiDAR、飛行時(shí)間（ToF）裝置、麥克風(fēng)、慣性測(cè)量單元（IMU），以及任何其他可以生成用于創(chuàng)建情境感知設(shè)備之?dāng)?shù)據(jù)的傳感器。

除了SensPro，CEVA處理器還可以在低功耗嵌入式解決方案中以高效的方式運(yùn)行神經(jīng)網(wǎng)絡(luò)。CEVANeuPro -S是一款靈活且可擴(kuò)展的解決方案，具有可以同時(shí)滿足傳統(tǒng)計(jì)算機(jī)視覺(jué)和AI加速需求的組件。它還能夠隨著深度學(xué)習(xí)中的創(chuàng)新而成長(zhǎng)，并可以處理現(xiàn)今正在開(kāi)發(fā)的新方法。

為了進(jìn)一步發(fā)展這個(gè)平臺(tái)方法，CEVA提供一款稱為CEVA深度神經(jīng)網(wǎng)絡(luò)（CDNN）的軟件框架，可以將神經(jīng)網(wǎng)絡(luò)優(yōu)化為適用于CEVA產(chǎn)品組合的低功耗嵌入式系統(tǒng)。