廣告
首頁(yè) > 汽車(chē)技術(shù) > 正文
車(chē)載攝像頭的技術(shù)趨勢(shì) — 算法與芯片架構(gòu)
2021-02-04 11:24:17· 來(lái)源：Astroys
DNN和機(jī)器學(xué)習(xí)如果自動(dòng)駕駛系統(tǒng)無(wú)法理解傳感器套件捕獲的數(shù)據(jù)將毫無(wú)用處。識(shí)別與實(shí)時(shí)場(chǎng)景理解同傳感和檢測(cè)功能一樣至關(guān)重要。AI和機(jī)器學(xué)習(xí)技術(shù)的進(jìn)步在使用攝像
DNN和機(jī)器學(xué)習(xí)
如果自動(dòng)駕駛系統(tǒng)無(wú)法理解傳感器套件捕獲的數(shù)據(jù)將毫無(wú)用處。識(shí)別與實(shí)時(shí)場(chǎng)景理解同傳感和檢測(cè)功能一樣至關(guān)重要。AI和機(jī)器學(xué)習(xí)技術(shù)的進(jìn)步在使用攝像頭圖像傳感器進(jìn)行物體檢測(cè)和分類(lèi)方面取得了驚人的成績(jī)。DNN和CNN技術(shù)的進(jìn)步為自動(dòng)駕駛系統(tǒng)帶來(lái)了更高的感知和分類(lèi)精度。
運(yùn)行DNN和CNN算法的汽車(chē)視覺(jué)系統(tǒng)可以精確地檢測(cè)和分類(lèi)車(chē)輛（汽車(chē)、公共車(chē)、卡車(chē)和兩輪車(chē)）、交通標(biāo)志、道路標(biāo)記、行人、騎自行車(chē)的人和其他易受傷害的道路使用者?；贏I的內(nèi)部監(jiān)控系統(tǒng)還可以讀取駕駛員和乘客的面部表情。
但是，DNN的有效性高度取決于開(kāi)發(fā)人員使用的訓(xùn)練數(shù)據(jù)集。OEM、供應(yīng)商、移動(dòng)服務(wù)供應(yīng)商和AV公司越來(lái)越多地在其自動(dòng)駕駛系統(tǒng)中采用基于AI和ML的視覺(jué)系統(tǒng)。
下一代芯片架構(gòu)
自動(dòng)駕駛系統(tǒng)由多種傳感技術(shù)支持，相互補(bǔ)充，以實(shí)現(xiàn)有效和可靠的感知。隨著OEM和自動(dòng)駕駛公司朝著更高的自動(dòng)駕駛水平發(fā)展，這些傳感器（尤其是攝像頭和雷達(dá)）的數(shù)量正在不斷增加。半自動(dòng)駕駛車(chē)輛已經(jīng)配備了8–10個(gè)攝像頭、多個(gè)雷達(dá)和超聲波雷達(dá)，在某些情況下甚至包括激光雷達(dá)。
具有基于AI和ML技術(shù)的智能視覺(jué)處理功能的汽車(chē)視覺(jué)系統(tǒng)是高度計(jì)算密集型應(yīng)用。ADAS視覺(jué)系統(tǒng)必須處理高分辨率成像、高速串行通信、下游處理和識(shí)別功能，才能有效地了解車(chē)輛的環(huán)境。圖像分辨率必須足夠高，以使識(shí)別處理器可以準(zhǔn)確地解碼道路標(biāo)志并區(qū)分物體和周?chē)h(huán)境。為此，需要分辨率為1-2MP、幀速率為60fps，高色彩靈敏度和HDR的彩色攝像頭。來(lái)自不同曝光度的多個(gè)攝像頭的圖像或攝像頭和雷達(dá)數(shù)據(jù)流融合在一起，為自動(dòng)駕駛系統(tǒng)提供更好的感知。
所有這些功能都需要計(jì)算性能，這在傳統(tǒng)的半導(dǎo)體架構(gòu)下是無(wú)法實(shí)現(xiàn)的。需要具有運(yùn)行DNN和CNN算法能力的高性能多核芯片架構(gòu)。該架構(gòu)應(yīng)可擴(kuò)展以服務(wù)于多個(gè)自動(dòng)駕駛級(jí)別。汽車(chē)半導(dǎo)體供應(yīng)商正在提供多核多線程架構(gòu)，其中包括用于運(yùn)行AI和視覺(jué)處理算法的專(zhuān)用內(nèi)核、針對(duì)傳感器融合進(jìn)行了優(yōu)化的集成核處理器，以及用于處理全自動(dòng)駕駛汽車(chē)計(jì)算要求的集成圖像信號(hào)處理器（圖像加速器）。新的芯片架構(gòu)也需要高級(jí)別的ASIL（ASIL B及以上）認(rèn)證。
英偉達(dá)、Mobileye、瑞薩和高通是一些提供可擴(kuò)展和可編程計(jì)算平臺(tái)的芯片供應(yīng)商，這些平臺(tái)具有專(zhuān)用CNN和DNN功能。產(chǎn)品范圍從滿足簡(jiǎn)單計(jì)算要求的單核架構(gòu)到具有集成圖像加速器和GPU的多核架構(gòu)，均適用于完全自動(dòng)駕駛的計(jì)算平臺(tái)。
如果自動(dòng)駕駛系統(tǒng)無(wú)法理解傳感器套件捕獲的數(shù)據(jù)將毫無(wú)用處。識(shí)別與實(shí)時(shí)場(chǎng)景理解同傳感和檢測(cè)功能一樣至關(guān)重要。AI和機(jī)器學(xué)習(xí)技術(shù)的進(jìn)步在使用攝像頭圖像傳感器進(jìn)行物體檢測(cè)和分類(lèi)方面取得了驚人的成績(jī)。DNN和CNN技術(shù)的進(jìn)步為自動(dòng)駕駛系統(tǒng)帶來(lái)了更高的感知和分類(lèi)精度。
運(yùn)行DNN和CNN算法的汽車(chē)視覺(jué)系統(tǒng)可以精確地檢測(cè)和分類(lèi)車(chē)輛（汽車(chē)、公共車(chē)、卡車(chē)和兩輪車(chē)）、交通標(biāo)志、道路標(biāo)記、行人、騎自行車(chē)的人和其他易受傷害的道路使用者?；贏I的內(nèi)部監(jiān)控系統(tǒng)還可以讀取駕駛員和乘客的面部表情。
但是，DNN的有效性高度取決于開(kāi)發(fā)人員使用的訓(xùn)練數(shù)據(jù)集。OEM、供應(yīng)商、移動(dòng)服務(wù)供應(yīng)商和AV公司越來(lái)越多地在其自動(dòng)駕駛系統(tǒng)中采用基于AI和ML的視覺(jué)系統(tǒng)。
下一代芯片架構(gòu)
自動(dòng)駕駛系統(tǒng)由多種傳感技術(shù)支持，相互補(bǔ)充，以實(shí)現(xiàn)有效和可靠的感知。隨著OEM和自動(dòng)駕駛公司朝著更高的自動(dòng)駕駛水平發(fā)展，這些傳感器（尤其是攝像頭和雷達(dá)）的數(shù)量正在不斷增加。半自動(dòng)駕駛車(chē)輛已經(jīng)配備了8–10個(gè)攝像頭、多個(gè)雷達(dá)和超聲波雷達(dá)，在某些情況下甚至包括激光雷達(dá)。
具有基于AI和ML技術(shù)的智能視覺(jué)處理功能的汽車(chē)視覺(jué)系統(tǒng)是高度計(jì)算密集型應(yīng)用。ADAS視覺(jué)系統(tǒng)必須處理高分辨率成像、高速串行通信、下游處理和識(shí)別功能，才能有效地了解車(chē)輛的環(huán)境。圖像分辨率必須足夠高，以使識(shí)別處理器可以準(zhǔn)確地解碼道路標(biāo)志并區(qū)分物體和周?chē)h(huán)境。為此，需要分辨率為1-2MP、幀速率為60fps，高色彩靈敏度和HDR的彩色攝像頭。來(lái)自不同曝光度的多個(gè)攝像頭的圖像或攝像頭和雷達(dá)數(shù)據(jù)流融合在一起，為自動(dòng)駕駛系統(tǒng)提供更好的感知。
所有這些功能都需要計(jì)算性能，這在傳統(tǒng)的半導(dǎo)體架構(gòu)下是無(wú)法實(shí)現(xiàn)的。需要具有運(yùn)行DNN和CNN算法能力的高性能多核芯片架構(gòu)。該架構(gòu)應(yīng)可擴(kuò)展以服務(wù)于多個(gè)自動(dòng)駕駛級(jí)別。汽車(chē)半導(dǎo)體供應(yīng)商正在提供多核多線程架構(gòu)，其中包括用于運(yùn)行AI和視覺(jué)處理算法的專(zhuān)用內(nèi)核、針對(duì)傳感器融合進(jìn)行了優(yōu)化的集成核處理器，以及用于處理全自動(dòng)駕駛汽車(chē)計(jì)算要求的集成圖像信號(hào)處理器（圖像加速器）。新的芯片架構(gòu)也需要高級(jí)別的ASIL（ASIL B及以上）認(rèn)證。
英偉達(dá)、Mobileye、瑞薩和高通是一些提供可擴(kuò)展和可編程計(jì)算平臺(tái)的芯片供應(yīng)商，這些平臺(tái)具有專(zhuān)用CNN和DNN功能。產(chǎn)品范圍從滿足簡(jiǎn)單計(jì)算要求的單核架構(gòu)到具有集成圖像加速器和GPU的多核架構(gòu)，均適用于完全自動(dòng)駕駛的計(jì)算平臺(tái)。
點(diǎn)贊 0 反對(duì) 0 舉報(bào) 0
收藏 0
評(píng)論 0 分享 59
廣告 編輯推薦
最新資訊
-
聯(lián)合國(guó)法規(guī)R60對(duì)兩輪車(chē)操縱件與指示裝置的
2026-03-04 12:08
-
標(biāo)準(zhǔn)立項(xiàng)|《汽車(chē)異種材料鉚接接頭拉伸性能
2026-03-04 11:40
-
“汽車(chē)大角度座椅 第1部分：通用要求”將有
2026-03-04 11:39
-
“汽車(chē)大角度座椅 第2部分：可靠性要求”將
2026-03-04 11:39
-
電池耐久評(píng)價(jià)開(kāi)始從“電池單體性能指標(biāo)”轉(zhuǎn)
2026-03-04 11:38
