0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

關(guān)于自動駕駛視覺芯片的DNN之爭

高工智能汽車 ? 來源:cg ? 2019-02-05 10:16 ? 次閱讀

近日,日本科技巨頭東芝公司宣布開發(fā)了一款新的硬件平臺,采用了深度神經(jīng)網(wǎng)絡(luò)(DNN)技術(shù),用于改進(jìn)先進(jìn)的駕駛員輔助系統(tǒng)(ADAS)的圖像處理。

該公司將把DNN硬件與傳統(tǒng)的圖像處理技術(shù)結(jié)合起來,從2019年9月開始,這款名為Visconti 5圖像識別處理器的樣品將出貨。

東芝的DNN技術(shù)使用了一種模擬人類大腦神經(jīng)網(wǎng)絡(luò)的算法,官方宣稱其識別處理將與人類大腦一樣準(zhǔn)確,甚至更好。該算法將允許系統(tǒng)識別不同的道路交通狀況和各種障礙和道路標(biāo)記,從各個方向和接近實(shí)時處理。

深度學(xué)習(xí)的實(shí)質(zhì),是通過構(gòu)建具有很多隱層的機(jī)器學(xué)習(xí)模型和海量的訓(xùn)練數(shù)據(jù),來學(xué)習(xí)更有用的特征,從而最終提升分類或預(yù)測的準(zhǔn)確性。

作為機(jī)器學(xué)習(xí)的一個細(xì)分領(lǐng)域,其動機(jī)在于建立、模擬人腦進(jìn)行分析學(xué)習(xí)的神經(jīng)網(wǎng)絡(luò),它模仿人腦的機(jī)制來解釋數(shù)據(jù),例如圖像,聲音和文本。

與基于傳統(tǒng)機(jī)器學(xué)習(xí)的圖像識別相比,DNN在采集更多信息的同時,能夠?qū)Ω蠓秶哪繕?biāo)提供更準(zhǔn)確的檢測和識別。

特斯拉為例,第一代基于Mobileye的芯片,就是首個使用了DNN技術(shù)算法的案例。不過當(dāng)時,ADAS和半自動駕駛的主要部分是由Mobileye的芯片和算法處理的。

上圖所示的過程是特斯拉當(dāng)時自動駕駛系統(tǒng)工作原理的高級圖。其中包括一些算法函數(shù),如運(yùn)動分割、自我運(yùn)動、攝像機(jī)求解等,但真正有趣的部分是基于DNN的函數(shù),涉及到可行駛區(qū)域空間像素標(biāo)記、全局路徑規(guī)劃、通用對象檢測和信號檢測。

在Mobileye的基礎(chǔ)之上,特斯拉對道路上的車輛進(jìn)行了三維建模,通過DNN進(jìn)行不同側(cè)面、前后兩側(cè)的訓(xùn)練,直到能夠檢測到合理的精度,從而構(gòu)建出相同的三維模型。

不過有消息稱,當(dāng)時特斯拉很多基于DNN的功能都處于休眠狀態(tài),直到特斯拉認(rèn)為它們可以啟動為止。從采用第二代計(jì)算平臺英偉達(dá)到如今特斯拉宣布自研芯片即將投產(chǎn),背后是芯片處理能力、DNN算法之間的協(xié)同。

眾所周知,自動駕駛汽車對芯片計(jì)算能力的要求比傳統(tǒng)早期汽車芯片提高了100倍。這包括需要處理來自汽車周圍多個攝像頭、雷達(dá)和激光雷達(dá)傳感器的輸入,分析數(shù)據(jù),并使用這些數(shù)據(jù)做出駕駛決策。

東芝在聲明中指出,“這種趨勢將增加對更先進(jìn)和更有能力的系統(tǒng)的需求?!崩纾瑲W盟支持的安全標(biāo)準(zhǔn),2020年版的歐洲新車評估計(jì)劃(Euro NCAP)增加了避免交叉路口碰撞的測試。深度學(xué)習(xí)被用來解決許多傳統(tǒng)編程方法無法解決的復(fù)雜問題。

馬斯克透露特斯拉自研AI芯片的籌備已有兩三年時間,通過自行設(shè)計(jì)芯片,公司能夠?qū)W⒂谧约旱男枨?,進(jìn)而保證算法開發(fā)和落地效率。

特斯拉正在研發(fā)的名為“Hardware 3”硬件版本的核心就是這顆芯片,將用于Model S、Model X以及Model 3,性能將大幅超越目前其采用的英偉達(dá)芯片。

目前,在高等級自動駕駛系統(tǒng)方面,深度學(xué)習(xí)為圖像中的目標(biāo)識別提供了一種不錯的解決方案。但背后需要芯片的支持。

芯片制造商英偉達(dá)(Nvidia)去年10月發(fā)布了一份有關(guān)自動駕駛芯片計(jì)算能力的報告。一輛裝有10個高分辨率攝像頭的汽車每秒產(chǎn)生2 Gigapixels的數(shù)據(jù),每秒處理這些數(shù)據(jù)需要250萬億次操作。

三年前,東芝與日本汽車零部件供應(yīng)商Denso合作,共同開發(fā)了一種名為深度神經(jīng)網(wǎng)絡(luò)專利(DNN - IP)的人工智能技術(shù),以幫助開發(fā)ADAS技術(shù)。

近年來,不斷有新的AI視覺芯片公司涌現(xiàn),就是看到了圖像傳感器和攝像頭將在自動駕駛汽車的發(fā)展中發(fā)揮關(guān)鍵作用。

東芝目前已經(jīng)提供了TMPV75和TMPV76系列的圖像識別處理器,它們集成了RISC類型的媒體處理引擎(MPEs),以提高圖像數(shù)據(jù)處理性能。該處理器能夠?qū)崟r處理1到4臺攝像機(jī)的輸入圖像,并允許最多連接8臺攝像機(jī)。

ARM等其他芯片制造巨頭也在加大進(jìn)軍自動駕駛汽車領(lǐng)域。今年9月,ARM推出了Cortex-A76AE (Automotive Enhanced),這是ARM專門為自動駕駛汽車設(shè)計(jì)的CPU架構(gòu)。

對于Cortex-A76AE, ARM對A76平臺進(jìn)行了顯著的重新設(shè)計(jì),增加了一種名為Split-Lock的功能,從而增加了安全性。簡單地說,split - lock允許兩個CPU內(nèi)核以鎖定步進(jìn)(都執(zhí)行相同的任務(wù))或分割模式(執(zhí)行不同的任務(wù)和應(yīng)用程序)進(jìn)行操作。

視覺處理芯片是自動駕駛芯片陣列中重要的一環(huán),由于可以同雷達(dá)等傳感器形成互補(bǔ),基于深度學(xué)習(xí)的視覺識別處理,在道路、交通標(biāo)志、障礙物、行人等識別中重要性愈發(fā)凸顯。

而在剛剛開幕的2019年CES上,大陸集團(tuán)和采埃孚就宣布了基于NVIDIA DRIVE的Level 2+自動駕駛解決方案,將于2020年開始生產(chǎn)。

作為一個L2+級自動駕駛解決方案,集成了高性能NVIDIA Xavier?系統(tǒng)級芯片(SoC)處理器和最新的NVIDIA驅(qū)動軟件來處理深層神經(jīng)網(wǎng)絡(luò)(款)感知以及完成環(huán)視相機(jī)傳感器、座艙內(nèi)視覺數(shù)據(jù)的處理。

因此各大廠商也都在爭相占領(lǐng)高地,NVIDIA和英特爾旗下的Mobileye目前是市場翹楚,占據(jù)了較大的份額,二者在汽車芯片領(lǐng)域,都是新生。其它傳統(tǒng)汽車芯片廠商,正在迎頭趕上。

不過,自動駕駛視覺處理芯片的賽跑,才剛剛開始,領(lǐng)頭羊、傳統(tǒng)勢力、新入局者各自的節(jié)奏都不一樣的,但市場一致——我們目力所及的汽車,ADAS還遠(yuǎn)未普及。

誰能掌握真正的話語權(quán),在于占領(lǐng)足夠大的市場,而這些故事,將會在接下來的5-10年完成。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 自動駕駛
    +關(guān)注

    關(guān)注

    784

    文章

    13904

    瀏覽量

    166740
  • dnn
    dnn
    +關(guān)注

    關(guān)注

    0

    文章

    60

    瀏覽量

    9068

原文標(biāo)題:自動駕駛視覺芯片的DNN之爭 | GGAI視角

文章出處:【微信號:ilove-ev,微信公眾號:高工智能汽車】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    2024年自動駕駛行業(yè)熱點(diǎn)技術(shù)盤點(diǎn)

    感知輕地圖以及純視覺等。這些技術(shù)的出現(xiàn),也代表著自動駕駛正從概念走向現(xiàn)實(shí),今天就給大家來盤點(diǎn)2024年自動駕駛行業(yè)出現(xiàn)的那些技術(shù)熱點(diǎn)! ? 城市NOA:邁向精細(xì)化駕駛的關(guān)鍵路徑 城市N
    的頭像 發(fā)表于 01-14 10:48 ?182次閱讀

    自動駕駛汽車安全嗎?

    隨著未來汽車變得更加互聯(lián),汽車逐漸變得更加依賴技術(shù),并且逐漸變得更加自動化——最終實(shí)現(xiàn)自動駕駛,了解自動駕駛汽車的安全問題變得非常重要,這樣你才能回答“自動駕駛汽車安全嗎”和“
    的頭像 發(fā)表于 10-29 13:42 ?573次閱讀
    <b class='flag-5'>自動駕駛</b>汽車安全嗎?

    自動駕駛HiL測試方案案例分析--ADS HiL測試系統(tǒng)#ADAS #自動駕駛 #VTHiL

    自動駕駛
    北匯信息POLELINK
    發(fā)布于 :2024年10月22日 15:20:19

    自動駕駛技術(shù)的典型應(yīng)用 自動駕駛技術(shù)涉及到哪些技術(shù)

    自動駕駛技術(shù)的典型應(yīng)用 自動駕駛技術(shù)是一種依賴計(jì)算機(jī)、無人駕駛設(shè)備以及各種傳感器,實(shí)現(xiàn)汽車自主行駛的技術(shù)。它通過使用人工智能、視覺計(jì)算、雷達(dá)、監(jiān)控裝置和全球定位系統(tǒng)等技術(shù),使
    的頭像 發(fā)表于 10-18 17:31 ?922次閱讀

    自動駕駛HiL測試方案介紹#ADAS #自動駕駛 #VTHiL

    自動駕駛
    北匯信息POLELINK
    發(fā)布于 :2024年10月12日 18:02:07

    激光雷達(dá)與純視覺方案,哪個才是自動駕駛最優(yōu)選?

    主要分為兩大類:激光雷達(dá)與視覺感知。激光雷達(dá)因其能夠提供精確的距離和形狀信息,在自動駕駛技術(shù)早期的開發(fā)中被廣泛應(yīng)用。然而,隨著計(jì)算機(jī)視覺技術(shù)的飛速進(jìn)步,基于攝像頭的純視覺感知方案逐漸嶄
    的頭像 發(fā)表于 09-29 10:47 ?525次閱讀

    FPGA在自動駕駛領(lǐng)域有哪些優(yōu)勢?

    FPGA(Field-Programmable Gate Array,現(xiàn)場可編程門陣列)在自動駕駛領(lǐng)域具有顯著的優(yōu)勢,這些優(yōu)勢使得FPGA成為自動駕駛技術(shù)中不可或缺的一部分。以下是FPGA在自動駕駛
    發(fā)表于 07-29 17:11

    FPGA在自動駕駛領(lǐng)域有哪些應(yīng)用?

    控制。在視覺算法方面,F(xiàn)PGA利用自身并行處理和高速存儲器的特點(diǎn),極大地加快了算法的執(zhí)行速度,提高了運(yùn)算效率。 五、未來發(fā)展趨勢隨著自動駕駛技術(shù)的不斷發(fā)展,F(xiàn)PGA在自動駕駛領(lǐng)域的應(yīng)用將會更加廣泛
    發(fā)表于 07-29 17:09

    自動駕駛雷達(dá)15W高導(dǎo)熱絕緣片

    歷史不成熟的經(jīng)驗(yàn)表明:技術(shù)路線的收斂,往往是新技術(shù)大規(guī)模落地的標(biāo)志。按照這種經(jīng)驗(yàn)審視自動駕駛技術(shù),會遺憾地得出自動駕駛落地還遙遙無期的悲觀結(jié)論,畢竟自動駕駛一是不缺自信、二不缺技術(shù)路線之爭
    的頭像 發(fā)表于 07-21 08:11 ?419次閱讀
    <b class='flag-5'>自動駕駛</b>雷達(dá)15W高導(dǎo)熱絕緣片

    華為小米自動駕駛Occupancy Network對決

    2023年6月計(jì)算機(jī)視覺學(xué)術(shù)圈CVPR舉辦兩場自動駕駛研討會,一個是端到端自動駕駛研討會 (End-to-End Autonomous Driving Workshop),另一個是視覺
    的頭像 發(fā)表于 04-28 14:35 ?1075次閱讀
    華為小米<b class='flag-5'>自動駕駛</b>Occupancy Network對決

    自動駕駛激光雷達(dá)及非硅15W高導(dǎo)熱絕緣氮化硼材料介紹

    來源|十一號組織歷史不成熟的經(jīng)驗(yàn)表明:技術(shù)路線的收斂,往往是新技術(shù)大規(guī)模落地的標(biāo)志。按照這種經(jīng)驗(yàn)審視自動駕駛技術(shù),會遺憾地得出自動駕駛落地還遙遙無期的悲觀結(jié)論,畢竟自動駕駛一是不缺自信、二不缺技術(shù)
    的頭像 發(fā)表于 04-24 10:00 ?628次閱讀
    <b class='flag-5'>自動駕駛</b>激光雷達(dá)及非硅15W高導(dǎo)熱絕緣氮化硼材料介紹

    未來已來,多傳感器融合感知是自動駕駛破局的關(guān)鍵

    駕駛的關(guān)鍵的是具備人類的感知能力,多傳感器融合感知正是自動駕駛破局的關(guān)鍵。昱感微的雷視一體多傳感器融合方案就好像一雙比人眼更敏銳的眼睛,可以為自動駕駛系統(tǒng)提供更豐富更精準(zhǔn)的視覺語言——
    發(fā)表于 04-11 10:26

    大眾汽車和Mobileye加強(qiáng)自動駕駛合作

    美國智能駕駛芯片巨頭Mobileye與大眾汽車集團(tuán)近日宣布,在自動駕駛領(lǐng)域深化合作,共同推動全新自動駕駛功能在大眾旗下量產(chǎn)車型的應(yīng)用。Mobileye依托其領(lǐng)先的Mobileye
    的頭像 發(fā)表于 03-22 11:46 ?971次閱讀

    高通自動駕駛靠軟件開發(fā)革新力壓英偉達(dá)自動駕駛芯片

    拋開價格不談,英偉達(dá)自動駕駛芯片毫無疑問是最強(qiáng)的,設(shè)計(jì)范圍在2019年底確定的Orin至今仍是量產(chǎn)最強(qiáng)的自動駕駛芯片,但除了奔馳外的歐美大廠更傾向于選擇高通平臺
    的頭像 發(fā)表于 02-20 13:50 ?1555次閱讀
    高通<b class='flag-5'>自動駕駛</b>靠軟件開發(fā)革新力壓英偉達(dá)<b class='flag-5'>自動駕駛</b><b class='flag-5'>芯片</b>

    華為自動駕駛技術(shù)怎么樣?

    強(qiáng)大,主要體現(xiàn)在以下幾個方面: 強(qiáng)大的研發(fā)團(tuán)隊(duì):華為擁有一支專業(yè)的研發(fā)團(tuán)隊(duì),專注于自動駕駛技術(shù)的研發(fā)和創(chuàng)新。這支團(tuán)隊(duì)匯聚了眾多頂尖的技術(shù)專家和工程師,具備豐富的研發(fā)經(jīng)驗(yàn)和技術(shù)積累。 領(lǐng)先的技術(shù)儲備:華為在通信、芯片、人
    的頭像 發(fā)表于 02-02 16:58 ?1824次閱讀