0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

基于端到端的自動駕駛系統(tǒng)只能做demo嗎

電子設(shè)計 ? 來源:電子設(shè)計 ? 作者:電子設(shè)計 ? 2020-12-26 10:39 ? 次閱讀

劍橋大學(xué)工程系團(tuán)隊創(chuàng)辦的Wayve憑借機(jī)器學(xué)習(xí)算法,只需要使用攝像頭和基本的衛(wèi)星導(dǎo)航就可以實現(xiàn)自動駕駛汽車在陌生的道路上行駛。

自從2016年,英偉達(dá)公開了用于自動駕駛汽車的端到端深度學(xué)習(xí)技術(shù)之后,已經(jīng)有不計其數(shù)的公司、單位甚至愛好者用此技術(shù)做出自動駕駛的demo。簡單網(wǎng)絡(luò)結(jié)構(gòu),可以實現(xiàn)攝像頭輸入到剎車油門方向盤輸出的直接映射。然而這種低門檻也注定了它可以解決的問題并不多,很難應(yīng)對具體駕駛環(huán)境上的復(fù)雜性。有專家甚至認(rèn)為端到端不適合開發(fā)實用無人駕駛系統(tǒng),可以做demo,大規(guī)模商用可能非常困難。

端到端只配做demo嗎?由劍橋大學(xué)團(tuán)隊創(chuàng)辦的Wayve無人駕駛軟件公司卻不這么認(rèn)為。他們沒有用高精地圖,也沒有用激光雷達(dá)等昂貴的傳感器,當(dāng)然也沒有給汽車手工輸入規(guī)則,只訓(xùn)練20小時數(shù)據(jù),就可以在從未跑過的道路上駕駛。

Wayve 研發(fā)團(tuán)隊認(rèn)為既然是自動駕駛,就不需要手工編碼一些規(guī)定,要充分的展現(xiàn)其智能的特性。團(tuán)隊采用了當(dāng)下大熱的深度學(xué)習(xí)強(qiáng)化學(xué)習(xí)算法,建立了一個可以像人類一樣慢慢學(xué)習(xí)駕駛的自動駕駛系統(tǒng)。

經(jīng)過探索、優(yōu)化和評估三個步驟進(jìn)行迭代,采用深度確定性策略梯度(Deep deterministic policy gradients,DDPG),來解決車道保持問題。

現(xiàn)有技術(shù)的圖像分類體系結(jié)構(gòu)具有數(shù)百萬個參數(shù),而Wayve團(tuán)隊的網(wǎng)絡(luò)構(gòu)架是一個深度網(wǎng)絡(luò),有4個卷積層和3個完全連接層,總共只有不到1萬個參數(shù),所有處理都在汽車GPU上執(zhí)行。

在強(qiáng)化學(xué)習(xí)仿真測試中,通過隨機(jī)生成曲線車道,以及道路紋理和車道標(biāo)記,然后根據(jù)收集的數(shù)據(jù)優(yōu)化策略,再不斷重復(fù)。

結(jié)合了圖像翻譯和行為克隆的端到端零鏡頭框架

大多數(shù)自駕車公司使用模擬來驗證他們的系統(tǒng),而Wayve讓自動駕駛汽車在仿真中廣泛學(xué)習(xí)如何處理罕見的邊緣情況。Wayve訓(xùn)練汽車進(jìn)行模擬駕駛,并將學(xué)到的知識轉(zhuǎn)化到現(xiàn)實世界。

Wayve沒有將模擬和現(xiàn)實世界視為兩個不同的領(lǐng)域,而是設(shè)計了一個框架,將兩者結(jié)合起來,既可以在模擬中訓(xùn)練轉(zhuǎn)向決策,又可以在現(xiàn)實世界中展現(xiàn)出類似的行為而無需進(jìn)行真正的演示。

Wayve的模型由一對最初用于圖像轉(zhuǎn)換的卷積變分自動編碼器式的網(wǎng)絡(luò)組成,用于圖像翻譯,即無監(jiān)督圖像到圖像的翻譯網(wǎng)絡(luò)(Unsupervised Image-to-Image Translation Networks, UNIT))。在兩個域之間沒有任何已知的對齊或?qū)?yīng)關(guān)系的情況下,模型能夠在它們之間進(jìn)行轉(zhuǎn)換。下圖是一個捕捉場景主要布局的例子。值得注意的是,模擬器的視覺保真度在學(xué)習(xí)駕駛時并不是最重要的,他們的模擬世界就像卡通一樣,依舊可以很好的完成仿真模擬。Wayve研究稱,內(nèi)容保真度比視覺保真度更重要。但是,有效地模擬其他交通參與者的行為仍然是一個巨大的挑戰(zhàn)。

基于真實世界的駕駛數(shù)據(jù)和精心設(shè)計的邊緣案例來模擬場景

汽車由基于模型的深層強(qiáng)化學(xué)習(xí)系統(tǒng)驅(qū)動,該算法從離線收集的真實數(shù)據(jù)中學(xué)習(xí)預(yù)測模型。這讓模型學(xué)習(xí)并使用預(yù)測模型所想象的新場景數(shù)據(jù)來訓(xùn)練駕駛。

Wayve致力于開發(fā)更豐富,更強(qiáng)大的時態(tài)預(yù)測模型,并相信這是構(gòu)建智能安全自動駕駛汽車的關(guān)鍵。

目前,該系統(tǒng)已經(jīng)部署在 JaguarI-PACE 車上。這輛車贏得了2019年度歐洲年度車型的稱號,未來將在整個英國和歐洲大陸收集數(shù)據(jù)。當(dāng)下,讓數(shù)據(jù)逐漸積累,其驅(qū)動算法可能達(dá)到人類駕駛員質(zhì)量的95%,能夠處理交通燈,環(huán)形交叉路口,十字路口等。

盡管有人會覺得端到端的自動駕駛系統(tǒng),既不聰明也不靈活,發(fā)生問題難以解釋,然而Wayve在用其強(qiáng)大的算法證明這種深度學(xué)習(xí)的技術(shù)不只可以做demo,未來也可以保證安全,也可以商用。

審核編輯 黃昊宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    211

    文章

    28423

    瀏覽量

    207139
  • 自動駕駛
    +關(guān)注

    關(guān)注

    784

    文章

    13816

    瀏覽量

    166470
收藏 人收藏

    評論

    相關(guān)推薦

    自動駕駛技術(shù)研究與分析

    傳遞和全局優(yōu)化的優(yōu)勢,成為智能駕駛技術(shù)發(fā)展的重要方向。與傳統(tǒng)模塊化架構(gòu)相比,技術(shù)通過深度神經(jīng)網(wǎng)絡(luò)實現(xiàn)從傳感器數(shù)據(jù)輸入車輛控制信號輸出
    的頭像 發(fā)表于 12-19 13:07 ?173次閱讀

    自動泊車的應(yīng)用

    與城市環(huán)境的復(fù)雜性和高速公路駕駛的風(fēng)險相比,停車場景的特點是低速、空間有限和高可控性。這些特點為在車輛中逐步部署自動駕駛能力提供了可行
    的頭像 發(fā)表于 12-18 11:38 ?373次閱讀
    <b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>在<b class='flag-5'>自動</b>泊車的應(yīng)用

    爆火的如何加速智駕落地?

    自動駕駛,唯有?)技術(shù)通過消除模塊間數(shù)據(jù)
    的頭像 發(fā)表于 11-26 13:17 ?267次閱讀
    爆火的<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>如何加速智駕落地?

    從車企實踐看自動駕駛解決方案

    中的重要性日益凸顯,這也促使眾多汽車制造商加快了智能化技術(shù)的研發(fā)和工程投入,未能跟上智能化步伐的汽車品牌可能會逐漸失去市場競爭力,自動駕駛技術(shù)的發(fā)展已然進(jìn)入關(guān)鍵階段,其中概念的提
    的頭像 發(fā)表于 11-19 10:55 ?541次閱讀
    從車企實踐看<b class='flag-5'>自動駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>解決方案

    連接視覺語言大模型與自動駕駛

    自動駕駛在大規(guī)模駕駛數(shù)據(jù)上訓(xùn)練,展現(xiàn)出很強(qiáng)的決策規(guī)劃能力,但是面對復(fù)雜罕見的駕駛場景,依然
    的頭像 發(fā)表于 11-07 15:15 ?246次閱讀
    連接視覺語言大模型與<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動駕駛</b>

    Waymo利用谷歌Gemini大模型,研發(fā)端自動駕駛系統(tǒng)

    邁新步,為其機(jī)器人出租車業(yè)務(wù)引入了一種基于谷歌多模態(tài)大語言模型(MLLM)“Gemini”的全新訓(xùn)練模型——“多模態(tài)自動駕駛模型”(EMMA)。
    的頭像 發(fā)表于 10-31 16:55 ?1066次閱讀

    Mobileye自動駕駛解決方案的深度解析

    強(qiáng)大的技術(shù)優(yōu)勢。 Mobileye的解決方案概述 1.1 什么是
    的頭像 發(fā)表于 10-17 09:35 ?371次閱讀
    Mobileye<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動駕駛</b>解決方案的深度解析

    實現(xiàn)自動駕駛,唯有

    ,去年行業(yè)主流方案還是輕高精地圖城區(qū)智駕,今年大家的目標(biāo)都瞄到了(End-to-End, E2E)。
    的頭像 發(fā)表于 08-12 09:14 ?734次閱讀
    實現(xiàn)<b class='flag-5'>自動駕駛</b>,唯有<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>?

    FPGA在自動駕駛領(lǐng)域有哪些應(yīng)用?

    是FPGA在自動駕駛領(lǐng)域的主要應(yīng)用: 一、感知算法加速 圖像處理:自動駕駛中需要通過攝像頭獲取并識別道路信息和行駛環(huán)境,這涉及大量的圖像處理任務(wù)。FPGA在處理圖像上的運(yùn)算速度快,可并行性強(qiáng),且功耗
    發(fā)表于 07-29 17:09

    理想汽車加速自動駕駛布局,成立“”實體組織

    近期,理想汽車在其智能駕駛領(lǐng)域邁出了重要一步,正式成立了專注于“自動駕駛”的實體組織,該組織規(guī)模超過200人,標(biāo)志著理想在
    的頭像 發(fā)表于 07-17 15:42 ?1354次閱讀

    智行者聯(lián)合清華完成國內(nèi)首套全棧式自動駕駛系統(tǒng)的開放道路測試

    近日,智行者與清華大學(xué)車輛學(xué)院李克強(qiáng)院士、李升波教授領(lǐng)導(dǎo)的研究團(tuán)隊,完成了國內(nèi)首套全棧式自動駕駛系統(tǒng)的開放道路測試。
    的頭像 發(fā)表于 04-22 09:24 ?782次閱讀
    智行者聯(lián)合清華完成國內(nèi)首套全棧式<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動駕駛</b><b class='flag-5'>系統(tǒng)</b>的開放道路測試

    佐思汽研發(fā)布《2024年自動駕駛研究報告》

    自動駕駛是直接從傳感器信息輸入(如攝像頭圖像、LiDAR等)控制命令輸出(如轉(zhuǎn)向、加減速等)映射的一套
    的頭像 發(fā)表于 04-20 11:21 ?3244次閱讀
    佐思汽研發(fā)布《2024年<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動駕駛</b>研究報告》

    理想汽車自動駕駛模型實現(xiàn)

    理想汽車在感知、跟蹤、預(yù)測、決策和規(guī)劃等方面都進(jìn)行了模型化,最終實現(xiàn)了的模型。這種模型不僅完全模型化,還能夠虛擬化,即在模擬環(huán)境中進(jìn)行訓(xùn)練和測試。
    發(fā)表于 04-12 12:17 ?458次閱讀
    理想汽車<b class='flag-5'>自動駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>模型實現(xiàn)

    自動駕駛的基石在哪里?

    深度學(xué)習(xí)(DL)與自動駕駛(AD)的融合標(biāo)志著該領(lǐng)域的重大飛躍,吸引了學(xué)術(shù)界和工業(yè)界的關(guān)注。配備了攝像頭和激光雷達(dá)的AD系統(tǒng)模擬了類似人類的決策過程。
    發(fā)表于 02-26 11:38 ?427次閱讀
    <b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動駕駛</b>的基石在哪里?

    自動駕駛的基石到底是什么?

    深度學(xué)習(xí)(DL)與自動駕駛(AD)的融合標(biāo)志著該領(lǐng)域的重大飛躍,吸引了學(xué)術(shù)界和工業(yè)界的關(guān)注。配備了攝像頭和激光雷達(dá)的AD系統(tǒng)模擬了類似人類的決策過程。
    發(fā)表于 02-22 09:50 ?395次閱讀
    <b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動駕駛</b>的基石到底是什么?