0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

多傳感器融合在自動駕駛中扮演的角色

新機器視覺 ? 來源:新能源自動駕駛 ? 作者:新能源自動駕駛 ? 2022-07-06 09:22 ? 次閱讀

智能網(wǎng)聯(lián)汽車,與自動駕駛有什么關(guān)系?

自動駕駛核心在于車,那智能網(wǎng)聯(lián)系統(tǒng)又是什么呢?智能網(wǎng)聯(lián)的載體也是車,但核心是需要連接的網(wǎng)絡(luò)。一個是汽車內(nèi)部的傳感器和智能控制系統(tǒng)構(gòu)成的一張網(wǎng)絡(luò),另一個是所有汽車連接、共享的網(wǎng)絡(luò)。網(wǎng)聯(lián)就是將一臺車置身到一張大的網(wǎng)絡(luò)之中,去交換重要的信息,比如位置、路線、速度等信息。智能網(wǎng)聯(lián)系統(tǒng)的發(fā)展目標就是通過汽車內(nèi)部傳感器和控制系統(tǒng)的設(shè)計優(yōu)化能夠改善汽車的安全性和舒適性,使汽車更加人性化,當然終極目標是在實現(xiàn)無人駕駛

上次說到自動駕駛汽車三大核心輔助系統(tǒng):環(huán)境感知系統(tǒng)、決策與規(guī)劃系統(tǒng)和控制與執(zhí)行系統(tǒng),這也是智能網(wǎng)聯(lián)汽車車輛本身必須解決的三大關(guān)鍵技術(shù)問題。

環(huán)境感知系統(tǒng)在智能網(wǎng)聯(lián)系統(tǒng)里面扮演什么角色?

什么是環(huán)境感知技術(shù),主要包含哪些內(nèi)容?

環(huán)境感知主要包括三個方面:傳感器、感知和定位。傳感器包括攝像頭、毫米波雷達、激光雷達以及超聲波,不同傳感器被安置在車輛上,分別發(fā)揮著采集數(shù)據(jù),識別顏色、測量距離等作用。

智能汽車要想采用傳感器獲得的數(shù)據(jù)去實現(xiàn)智能駕駛,通過傳感器獲得的數(shù)據(jù)必須經(jīng)過(感知)算法處理,匯算成數(shù)據(jù)結(jié)果,實現(xiàn)車、路、人等信息交換,使車輛能夠自動分析車輛行駛的安全還是危險狀態(tài),讓車輛能夠按照人的意愿實現(xiàn)智能駕駛,最終替代人來做出決策和無人駕駛目標。

那這里就會有個關(guān)鍵技術(shù)問題,不同傳感器發(fā)揮的作用不同,多個傳感器掃描到數(shù)據(jù)如何形成一個完整的物體圖像數(shù)據(jù)呢?

——多傳感器融合技術(shù)

攝像頭的作用主要是識別物體顏色,但會受陰雨天氣的影響;毫米波雷達能夠彌補攝像頭受陰雨天影響的弊端,能夠識別距離比較遠的障礙物,比如行人、路障等,但是不能夠識別障礙物的具體形狀;激光雷達可以彌補毫米波雷達不能識別障礙物具體形狀的缺點;超聲波雷主要識別車身的近距離障礙物,應(yīng)用在車輛泊車過程中比較多。要想融合不同傳感器的收集到外界數(shù)據(jù)為控制器執(zhí)行決策提供依據(jù),就需要經(jīng)過多傳感器融合算法處理形成全景感知。

什么是多傳感器融合(融合算法處理),主要有哪些融合算法?

多傳感器融合基本原理就像人腦綜合處理信息的過程一樣,將各種傳感器進行多層次、多空間的信息互補和優(yōu)化組合處理,最終產(chǎn)生對觀測環(huán)境的一致性解釋。在這個過程中要充分利用多源數(shù)據(jù)進行合理支配與使用,而信息融合的最終目標則是基于各傳感器獲得的分離觀測信息,通過對信息多級別、多方面組合導(dǎo)出更多有用信息。這不僅是利用了多個傳感器相互協(xié)同操作的優(yōu)勢,而且也綜合處理了其它信息源的數(shù)據(jù)來提高整個傳感器系統(tǒng)的智能化。

e073c74a-f61e-11ec-ba43-dac502259ad0.jpg

多傳感器數(shù)據(jù)融合概念最早應(yīng)用于軍事領(lǐng)域,近年來隨著自動駕駛的發(fā)展,各種雷達運用于車輛做目標的檢測。因為不同的傳感器都存在數(shù)據(jù)準確性的問題,那么最終融合的數(shù)據(jù)該如何判定?比如激光雷達報告前車距離是5m,毫米波雷達報告前車距離是5.5m,攝像頭判定前車距離是4m,最終中央處理器該如何判斷。那就需要一套多數(shù)據(jù)融合的算法來解決這個問題。

多傳感器融合的常用方法分為兩大類:隨機和人工智能AI類主要是模糊邏輯推理和人工神經(jīng)網(wǎng)絡(luò)方法;隨機類方法主要有貝葉斯濾波、卡爾曼濾波等算法。目前汽車融合感知主要采用隨機類融合算法。

自動駕駛汽車融合感知算法課程主要采用卡爾曼濾波算法,利用線性系統(tǒng)狀態(tài)方程,通過系統(tǒng)輸入輸出觀測數(shù)據(jù),對系統(tǒng)狀態(tài)進行最優(yōu)估計的算法,它是目前解決絕大部分問題都是最優(yōu)、效率最高的的方法。

e08c30be-f61e-11ec-ba43-dac502259ad0.png

多傳感器需要進行融合算法處理,企業(yè)相應(yīng)就會需要融合感知類的算法工程師去解決多傳感器融合的問題,融合感知類的絕大多數(shù)的崗位要求都是需要能夠掌握多種傳感器的工作原理信號的數(shù)據(jù)特征,能夠掌握融合算法進行軟件開發(fā)以及傳感器標定算法能力以及點云數(shù)據(jù)處理、深度學(xué)習檢測算法等等。

環(huán)境感知的的第三部分內(nèi)容——定位(slam)

Slam叫做同步定位和制圖,是假設(shè)場景是靜態(tài)情況下通過攝像機的運動來獲取圖像序列并得到場景3-D結(jié)構(gòu)的設(shè)計,這是計算機視覺的重要任務(wù),攝像機獲得的數(shù)據(jù)經(jīng)過算法處理也就是視覺slam。

環(huán)境感知定位方法除了視覺slam,還有激光雷達slam、GPS/IMU和高精地圖。這些傳感器獲得的數(shù)據(jù)都是需要經(jīng)過算法的處理才能形成數(shù)據(jù)結(jié)果為自動駕駛決策提供位置信息依據(jù)。

所以想要從事環(huán)境感知方向的工作,不僅可以選擇融合感知算法崗位,還可以選擇slam方向。選擇轉(zhuǎn)崗感知算法類工作也是個不錯的選擇,專業(yè)熱門,薪資高,當然入門學(xué)習相比運動控制算法工程師課程需要一定的高等數(shù)學(xué)基礎(chǔ),課程難度中等。

多傳感器融合算法,目前不僅僅應(yīng)用在自動駕駛領(lǐng)域,還應(yīng)用在機器人領(lǐng)域,對于就業(yè)來說是個一大的契機。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2552

    文章

    51292

    瀏覽量

    755194
  • 自動駕駛
    +關(guān)注

    關(guān)注

    784

    文章

    13897

    瀏覽量

    166695
  • 毫米波雷達
    +關(guān)注

    關(guān)注

    107

    文章

    1052

    瀏覽量

    64440

原文標題:多傳感器融合為什么是自動駕駛的必由之路?

文章出處:【微信號:vision263com,微信公眾號:新機器視覺】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    物聯(lián)網(wǎng)傳感器類型解析 傳感器類型在自動駕駛的應(yīng)用

    物聯(lián)網(wǎng)傳感器類型解析及其在自動駕駛的應(yīng)用 傳感器是一種檢測裝置,能感受到被測量的信息,并能將感受到的信息按一定規(guī)律變換成為電信號或其他
    的頭像 發(fā)表于 12-06 14:15 ?439次閱讀

    傳感器融合在自動駕駛的應(yīng)用趨勢探究

    自動駕駛技術(shù)的快速發(fā)展加速交通行業(yè)變革,為實現(xiàn)車輛自動駕駛,需要車輛對復(fù)雜動態(tài)環(huán)境做出準確、高效的響應(yīng),而傳感器融合技術(shù)為提升
    的頭像 發(fā)表于 12-05 09:06 ?477次閱讀
    <b class='flag-5'>多</b><b class='flag-5'>傳感器</b><b class='flag-5'>融合在</b><b class='flag-5'>自動駕駛</b><b class='flag-5'>中</b>的應(yīng)用趨勢探究

    一文聊聊自動駕駛測試技術(shù)的挑戰(zhàn)與創(chuàng)新

    ,包括場景生成的多樣性與準確性、傳感器數(shù)據(jù)融合的精度驗證、高效的時間同步機制,以及仿真平臺與實際場景的匹配等問題。 自動駕駛測試的必要性與現(xiàn)狀 1.1
    的頭像 發(fā)表于 12-03 15:56 ?246次閱讀
    一文聊聊<b class='flag-5'>自動駕駛</b>測試技術(shù)的挑戰(zhàn)與創(chuàng)新

    MEMS技術(shù)在自動駕駛汽車的應(yīng)用

    MEMS技術(shù)在自動駕駛汽車的應(yīng)用主要體現(xiàn)在傳感器方面,這些傳感器自動駕駛汽車提供了關(guān)鍵的環(huán)境感知和數(shù)據(jù)采集能力。以下是對MEMS技術(shù)在
    的頭像 發(fā)表于 11-20 10:19 ?465次閱讀

    FPGA在自動駕駛領(lǐng)域有哪些優(yōu)勢?

    領(lǐng)域的主要優(yōu)勢: 高性能與并行處理能力: FPGA內(nèi)部包含大量的邏輯門和可配置的連接,能夠同時處理多個數(shù)據(jù)流和計算任務(wù)。這種并行處理能力使得FPGA在處理自動駕駛復(fù)雜的圖像識別、傳感器數(shù)據(jù)處理等
    發(fā)表于 07-29 17:11

    FPGA在自動駕駛領(lǐng)域有哪些應(yīng)用?

    的數(shù)據(jù)處理和預(yù)處理,實現(xiàn)實時計算和反饋。 二、數(shù)據(jù)傳輸與處理FPGA在自動駕駛扮演著數(shù)據(jù)傳輸和處理的角色。它能夠支持多種傳感器(如激光雷達
    發(fā)表于 07-29 17:09

    自動駕駛識別技術(shù)有哪些

    自動駕駛的識別技術(shù)是自動駕駛系統(tǒng)的重要組成部分,它使車輛能夠感知并理解周圍環(huán)境,從而做出智能決策。自動駕駛識別技術(shù)主要包括多種傳感器及其
    的頭像 發(fā)表于 07-23 16:16 ?738次閱讀

    自動駕駛傳感器技術(shù)介紹

    自動駕駛傳感器技術(shù)是自動駕駛系統(tǒng)的核心組成部分,它使車輛能夠感知并理解周圍環(huán)境,從而做出智能決策。以下是對自動駕駛傳感器技術(shù)的詳細介紹,內(nèi)
    的頭像 發(fā)表于 07-23 16:08 ?2371次閱讀

    自動駕駛汽車傳感器有哪些

    自動駕駛汽車傳感器是實現(xiàn)自動駕駛功能的關(guān)鍵組件,它們通過采集和處理車輛周圍環(huán)境的信息,為自動駕駛系統(tǒng)提供必要的感知和決策依據(jù)。以下是對自動駕駛
    的頭像 發(fā)表于 07-23 16:00 ?2385次閱讀

    XV7181BB 陀螺儀傳感器自動駕駛設(shè)備的應(yīng)用

    輸出、寬工作溫度范圍和優(yōu)異的溫度偏置穩(wěn)定性,為自動駕駛設(shè)備在各種復(fù)雜駕駛環(huán)境的穩(wěn)定運行提供了強大的支持。其低功耗設(shè)計和內(nèi)置的溫度傳感器、數(shù)字濾波
    的頭像 發(fā)表于 06-13 15:23 ?534次閱讀
    XV7181BB 陀螺儀<b class='flag-5'>傳感器</b>在<b class='flag-5'>自動駕駛</b>設(shè)備<b class='flag-5'>中</b>的應(yīng)用

    揭秘自動駕駛:未來汽車的感官革命,究竟需要哪些超級傳感器?

    ,激光雷達技術(shù)受到極大關(guān)注,被譽為“激光雷達元年”,凸顯了傳感器自動駕駛的重要性。那么,自動駕駛汽車究竟需要哪些傳感器呢?
    的頭像 發(fā)表于 05-31 09:14 ?655次閱讀

    自動駕駛:揭秘高精度時間同步技術(shù)(一)

    本文重點探討了高精度時間同步技術(shù)在傳感器融合的重要性。通過選擇統(tǒng)一的時鐘源和基于以太網(wǎng)的協(xié)議,確保
    的頭像 發(fā)表于 05-29 10:40 ?5149次閱讀
    <b class='flag-5'>自動駕駛</b>:揭秘高精度時間同步技術(shù)(一)

    康謀技術(shù) |深入探討:自動駕駛的相機標定技術(shù)

    隨著自動駕駛技術(shù)的快速發(fā)展,傳感器的數(shù)據(jù)采集和融合可以顯著提高系統(tǒng)的冗余度和容錯性,進而保證決策的快速性和正確性。在項目開發(fā)迭代過程,
    的頭像 發(fā)表于 04-17 17:08 ?928次閱讀
    康謀技術(shù) |深入探討:<b class='flag-5'>自動駕駛</b><b class='flag-5'>中</b>的相機標定技術(shù)

    未來已來,傳感器融合感知是自動駕駛破局的關(guān)鍵

    駕駛的關(guān)鍵的是具備人類的感知能力,傳感器融合感知正是自動駕駛破局的關(guān)鍵。昱感微的雷視一體
    發(fā)表于 04-11 10:26

    康謀技術(shù) | 自動駕駛傳感器數(shù)據(jù)融合方法

    現(xiàn)象進行觀測,采集的數(shù)據(jù)構(gòu)成被測對象的模態(tài)信息。模態(tài)信息可以實現(xiàn)不同傳感器之間數(shù)據(jù)互補,并在相同學(xué)習任務(wù)獲取更豐富的特征,從而實現(xiàn)比單一模態(tài)更好的性能。 在自動駕駛領(lǐng)域,
    的頭像 發(fā)表于 01-24 18:02 ?631次閱讀
    康謀技術(shù) | <b class='flag-5'>自動駕駛</b><b class='flag-5'>多</b><b class='flag-5'>傳感器</b>數(shù)據(jù)<b class='flag-5'>融合</b>方法