0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

多傳感器融合技術(shù)的應(yīng)用方案

雙目立體視覺 ? 來源:雙目立體視覺 ? 作者:雙目立體視覺 ? 2022-03-25 15:40 ? 次閱讀

“INDEMIND:隨著機(jī)器人的應(yīng)用領(lǐng)域不斷拓展,對機(jī)器人的環(huán)境感知能力的要求也在不斷提升,而要解決環(huán)境感知問題,傳感器技術(shù)則是最重要的應(yīng)用支撐技術(shù)之一,它對于機(jī)器人的意義亦如人眼對于人,但與人眼不同的是,它的構(gòu)成主要由傳感器和算法組成,并伴隨著機(jī)器人發(fā)展,已從單傳感器向多傳感器融合迭代?!?/p>

由于機(jī)器人不斷滲透到各行各業(yè),面對的外部環(huán)境越來越復(fù)雜,對機(jī)器人的精度、穩(wěn)定性、智能化提出了新的要求,而單傳感器或采用多個(gè)(種)傳感器卻僅是從多個(gè)側(cè)面孤立地獲取目標(biāo)信息的方式,前者不僅效率較低下,且獲取的信息量有限,而后者不斷增加傳感器的做法,更會增加系統(tǒng)的復(fù)雜度,對平臺算力要求提高,且割斷了各傳感器信息間的內(nèi)在聯(lián)系,丟失了信息經(jīng)有機(jī)組合后可能蘊(yùn)含的深層有效信息,造成信息資源浪費(fèi),甚至可能導(dǎo)致決策失誤。

在多重因素影響下,發(fā)展多傳感器融合技術(shù)便表現(xiàn)出了它的必然性。事實(shí)上,多傳感器融合技術(shù)從字面上可知并非另辟蹊徑,而是在采用多個(gè)(種)傳感器的基礎(chǔ)上,進(jìn)一步開拓和完善而來,原理是借助算法對感知相關(guān)要素信息的冗余或互補(bǔ)信息進(jìn)行分析、建模、解算、融合、估計(jì)和補(bǔ)償,最終輸出更為準(zhǔn)確、豐富、可靠的信息。

多傳感器融合技術(shù)的應(yīng)用,對于系統(tǒng)的容錯(cuò)能力、信息精度、信息的可信度&豐富度都有了明顯提升,這對于機(jī)器人的意義無比重要。目前,市面上多傳感器融合技術(shù)多是以激光雷達(dá)為主導(dǎo)的技術(shù)方案,并根據(jù)架構(gòu)組成,又主要分為兩種。

一種是以單線激光雷達(dá)主導(dǎo)+IMU+里程計(jì)或其它傳感器的融合方案,采用松/緊耦合方式,有著簡單、成熟的技術(shù)優(yōu)勢,是市面上較為常見的融合技術(shù)方案,然而這類方案的缺點(diǎn)在于,一是環(huán)境適應(yīng)能力較差,對于環(huán)境特征單一的長走廊等場景,誤差較高,容易偏離路徑,二是重定位能力差,運(yùn)行過程中一旦丟失位置,難以重新定位。

另一種是以多線激光雷達(dá)為主導(dǎo)的融合方案,與其它傳感器采用松/緊耦合方式組合,得益于多線激光雷達(dá),可獲取到環(huán)境物體的三維信息,使得這類方案的環(huán)境感知能力得到顯著提升,且在功能表現(xiàn)上,同樣有著激光雷達(dá)精度高和穩(wěn)定性高的特點(diǎn),然而需要提到的是,多線激光雷達(dá)在保留了傳統(tǒng)優(yōu)勢的同時(shí),也有著激光雷達(dá)類似的局限性,且一旦出現(xiàn)故障,會導(dǎo)致整個(gè)系統(tǒng)宕機(jī),目前這類方案主要應(yīng)用于大多數(shù)商用機(jī)器人,不過其高昂的成本也讓大多數(shù)企業(yè)難以承受。

因此,在此背景下,行業(yè)一方面在進(jìn)一步完善激光雷達(dá)方案的同時(shí),另一方面也在探索視覺方案。目前,以視覺為主導(dǎo)的融合技術(shù)方案,在市面上雖然還相對較少,但隨著計(jì)算機(jī)視覺技術(shù)多年來的發(fā)展,已經(jīng)有了成熟方案,INDEMIND的多傳感器融合技術(shù)便是其中之一。

與激光雷達(dá)方案不同,INDEMIND多傳感器融合技術(shù)在實(shí)現(xiàn)上,設(shè)計(jì)了以視覺傳感器為主導(dǎo)的標(biāo)準(zhǔn)化、模塊化的多傳感器融合架構(gòu),通過遵循INDEMIND的標(biāo)準(zhǔn)定義接口,可快速加入IMU、里程計(jì)、激光、GNSS等多種傳感器,實(shí)現(xiàn)“積木式”加裝,結(jié)合雙目立體視覺技術(shù),能夠?qū)崿F(xiàn)高精度、高穩(wěn)定性、低成本的3D環(huán)境感知,走出了不同于激光雷達(dá)方案的All IN ONE新路徑。

眾多周知,信息量豐富是視覺的優(yōu)勢,但也導(dǎo)致對算力要求的大幅提升。由于需要處理的環(huán)境信息量巨大,對于平臺的算力要求極高,同時(shí)視覺受環(huán)境光線影響嚴(yán)重,如何解決這些難題,是走通視覺方案的關(guān)鍵。

因此,INDEMIND在研發(fā)過程中,對它們進(jìn)行了長期針對性解決。

? 降低算力要求

算法&硬件優(yōu)化:采用增量優(yōu)化的方式,分段處理,并在區(qū)段間建立先驗(yàn)信息,有效降低了平臺計(jì)算壓力,提高計(jì)算效率。

硬件加速:在硬件上,對于視覺處理采用neon加速、GPU加速、DSP加速等方式,提升計(jì)算性能,降低算力要求。

? 提高性能

傳感器更豐富:基于INDEMIND多傳感器融合架構(gòu),可融合超過4種以上的傳感器,通過緊耦合方式組合,對于環(huán)境的容忍度更高,能夠保障在部分傳感器出現(xiàn)異常的同時(shí),系統(tǒng)仍能保持正常運(yùn)行,提高魯棒性。

誤差補(bǔ)償:為了提升精度,INDEMIND對系統(tǒng)中的視覺、IMU、里程計(jì)等每個(gè)傳感器都進(jìn)行了實(shí)時(shí)誤差建模、估計(jì)及補(bǔ)償,能夠有效保障在實(shí)時(shí)運(yùn)行過程中的精度和穩(wěn)定性。

野值判定與剔除:由于傳感器較多,視覺、激光、里程計(jì)、IMU等不同傳感器產(chǎn)生的噪點(diǎn),對于系統(tǒng)的穩(wěn)定性和精度影響較大,因此,INDEMIND對于各個(gè)傳感器的數(shù)據(jù),進(jìn)行了野值判定及剔除,進(jìn)一步增進(jìn)系統(tǒng)對于原始傳感器數(shù)據(jù)的容錯(cuò)能力,提升最終的穩(wěn)定性和精度。

與此同時(shí),基于INDEMIND立體視覺技術(shù),可獲取豐富的3D環(huán)境信息,配合上層決策,對于實(shí)現(xiàn)智能避障、路徑規(guī)劃、人機(jī)交互提供了必要的前提條件。

目前,經(jīng)過長期驗(yàn)證,搭載INDEMIND多傳感器融合技術(shù)的測試機(jī)器人,定位精度可達(dá)厘米級,<5cm(RMS),達(dá)到激光融合方案的同等精度水平。在智能避障方面,能夠?qū)崿F(xiàn)三維立體避障,精度<1%,結(jié)合INDEMIND智能決策引擎技術(shù),可實(shí)現(xiàn)策略化避障,提升安全決策水平。同時(shí),在交互方面,基于智能決策引擎技術(shù),能夠根據(jù)指令實(shí)現(xiàn)目標(biāo)跟蹤、指定區(qū)域作業(yè)等多種個(gè)性化功能,提升機(jī)器人人機(jī)、物機(jī)交互能力。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2551

    文章

    51099

    瀏覽量

    753606
  • 測試
    +關(guān)注

    關(guān)注

    8

    文章

    5303

    瀏覽量

    126656
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    211

    文章

    28418

    瀏覽量

    207103
收藏 人收藏

    評論

    相關(guān)推薦

    雨量水位數(shù)據(jù)采集終端機(jī)RTU:傳感器融合,水文監(jiān)測數(shù)據(jù)遠(yuǎn)程查看

    傳感器融合的雨量水位數(shù)據(jù)采集終端機(jī)RTU,正以其卓越的性能和全面的數(shù)據(jù)采集能力,成為水文監(jiān)測領(lǐng)域的得力助手。讓我們共同迎接精準(zhǔn)監(jiān)測的新時(shí)代,為保護(hù)水資源、保障人民生命財(cái)產(chǎn)安全貢獻(xiàn)力量。
    的頭像 發(fā)表于 12-13 09:49 ?124次閱讀
    雨量水位數(shù)據(jù)采集終端機(jī)RTU:<b class='flag-5'>多</b><b class='flag-5'>傳感器</b><b class='flag-5'>融合</b>,水文監(jiān)測數(shù)據(jù)遠(yuǎn)程查看

    傳感器融合在自動駕駛中的應(yīng)用趨勢探究

    自動駕駛技術(shù)的快速發(fā)展加速交通行業(yè)變革,為實(shí)現(xiàn)車輛自動駕駛,需要車輛對復(fù)雜動態(tài)環(huán)境做出準(zhǔn)確、高效的響應(yīng),而傳感器融合技術(shù)為提升自動駕駛系統(tǒng)
    的頭像 發(fā)表于 12-05 09:06 ?322次閱讀
    <b class='flag-5'>多</b><b class='flag-5'>傳感器</b><b class='flag-5'>融合</b>在自動駕駛中的應(yīng)用趨勢探究

    智能馬桶腳感方案 TOF傳感器選型推薦

    目前正在開發(fā)一個(gè)智能馬桶腳感方案,TOF傳感器選型遇到難題了,要么成本高,要么技術(shù)難啃,有沒有技術(shù)大神可以幫助下啊。
    發(fā)表于 11-22 09:37

    精密制造的革新:光譜共焦傳感器與工業(yè)視覺相機(jī)的融合

    微米級別測量上的局限,還極大地提升了檢測效率和準(zhǔn)確性。 ?精密制造的革新:光譜共焦傳感器與工業(yè)視覺相機(jī)的融合 技術(shù)融合背景 在現(xiàn)代精密制造行業(yè)中,對小型和高精度產(chǎn)品的檢測需求愈發(fā)顯著。
    的頭像 發(fā)表于 09-26 11:47 ?339次閱讀

    藍(lán)牙數(shù)據(jù)模塊連接方案傳感器更加智能

    與管理,成為了一個(gè)亟待解決的難題。藍(lán)牙技術(shù),尤其是其連接方案,正逐步成為解決這一挑戰(zhàn)的關(guān)鍵,以下安朔科技為大家介紹一下傳感器藍(lán)牙模組連接
    的頭像 發(fā)表于 08-15 16:47 ?699次閱讀
    藍(lán)牙數(shù)據(jù)模塊<b class='flag-5'>多</b>連接<b class='flag-5'>方案</b>讓<b class='flag-5'>傳感器</b>更加智能

    基于物理參數(shù)數(shù)據(jù)融合和先進(jìn)人工智能算法的鋰電池?zé)崾Э乇O(jiān)測傳感器

    基于物理參數(shù)數(shù)據(jù)融合和先進(jìn)人工智能算法的鋰電池?zé)崾Э乇O(jiān)測傳感器是多種方案中的優(yōu)選項(xiàng)!是一種快速、準(zhǔn)確、可靠、應(yīng)用廣泛的傳感
    的頭像 發(fā)表于 06-18 17:19 ?805次閱讀
    基于<b class='flag-5'>多</b>物理參數(shù)數(shù)據(jù)<b class='flag-5'>融合</b>和先進(jìn)人工智能算法的鋰電池?zé)崾Э乇O(jiān)測<b class='flag-5'>傳感器</b>

    傳感器融合如何使 AMR 在工廠車間內(nèi)高效移動

    依賴單一傳感器技術(shù)。 傳感器融合,或簡稱“傳感器融合
    的頭像 發(fā)表于 05-05 09:34 ?827次閱讀
    <b class='flag-5'>傳感器</b><b class='flag-5'>融合</b>如何使 AMR 在工廠車間內(nèi)高效移動

    感科技攜自研的光學(xué)傳感器芯片及產(chǎn)品亮相深圳傳感器展覽會

    4月14日-16日,感科技攜自主研發(fā)的光學(xué)傳感器芯片及應(yīng)用產(chǎn)品展示套件參展深圳傳感器展覽會,此次參展不僅是對感科技光學(xué)傳感器芯片
    的頭像 發(fā)表于 04-19 09:10 ?613次閱讀

    未來已來,傳感器融合感知是自動駕駛破局的關(guān)鍵

    駕駛的關(guān)鍵的是具備人類的感知能力,傳感器融合感知正是自動駕駛破局的關(guān)鍵。昱感微的雷視一體傳感器融合
    發(fā)表于 04-11 10:26

    智慧燈桿合一傳感器(創(chuàng)新設(shè)計(jì),實(shí)現(xiàn)多功能融合

      智慧燈桿合一傳感器的最大特點(diǎn)就是創(chuàng)新的設(shè)計(jì),將多種功能集成在一個(gè)燈桿上。它不僅僅能夠提供照明服務(wù),還能夠?qū)崟r(shí)監(jiān)測空氣質(zhì)量、溫度、濕度等環(huán)境數(shù)據(jù),甚至能夠感知人流、車流等信息。這種多功能融合的設(shè)計(jì),使得城市管理者可以更加方便
    的頭像 發(fā)表于 03-29 15:25 ?373次閱讀

    區(qū)飛行時(shí)間(ToF)傳感器的特點(diǎn)

    ???????? VL53L5、VL53L7、VL53L8都是基于ST的FlightSense技術(shù)區(qū)飛行時(shí)間(ToF)傳感器。
    的頭像 發(fā)表于 02-25 09:41 ?1154次閱讀
    <b class='flag-5'>多</b>區(qū)飛行時(shí)間(ToF)<b class='flag-5'>傳感器</b>的特點(diǎn)

    深度解析:傳感器融合SLAM技術(shù)全景剖析

    SLAM中,先驗(yàn)值通常從一系列傳感器獲得,比如慣性測量單元(IMU)和編碼,而觀測值則是通過GPS、相機(jī)和激光雷達(dá)等其他傳感器獲取的,后驗(yàn)值是融合了先驗(yàn)信息與觀測數(shù)據(jù)之后得到的結(jié)果,
    發(fā)表于 02-23 11:31 ?3100次閱讀
    深度解析:<b class='flag-5'>多</b><b class='flag-5'>傳感器</b><b class='flag-5'>融合</b>SLAM<b class='flag-5'>技術(shù)</b>全景剖析

    鏡頭傳感器圖像視頻處理應(yīng)用

    鏡頭傳感器系統(tǒng)(MESS,Multi-CameraMulti-SensorSystems)在許多領(lǐng)域和場合都有廣泛的應(yīng)用。這些系統(tǒng)能夠通過整合多個(gè)鏡頭和傳感器的數(shù)據(jù),提供更全面、準(zhǔn)
    的頭像 發(fā)表于 01-26 08:31 ?682次閱讀
    <b class='flag-5'>多</b>鏡頭<b class='flag-5'>多</b><b class='flag-5'>傳感器</b>圖像視頻處理<b class='flag-5'>器</b>應(yīng)用

    康謀技術(shù) | 自動駕駛傳感器數(shù)據(jù)融合方法

    近年來,深度學(xué)習(xí)技術(shù)在涉及高維非結(jié)構(gòu)化數(shù)據(jù)領(lǐng)域展現(xiàn)出了最先進(jìn)的性能,如計(jì)算機(jī)視覺、語音、自然語言處理等方面,并且開始涉及更大、更復(fù)雜的模態(tài)信息問題。 不同傳感器在進(jìn)行同一實(shí)驗(yàn)任務(wù)時(shí),針對產(chǎn)生的同一
    的頭像 發(fā)表于 01-24 18:02 ?583次閱讀
    康謀<b class='flag-5'>技術(shù)</b> | 自動駕駛<b class='flag-5'>多</b><b class='flag-5'>傳感器</b>數(shù)據(jù)<b class='flag-5'>融合</b>方法

    Spring Boot和飛騰派融合構(gòu)建的農(nóng)業(yè)物聯(lián)網(wǎng)系統(tǒng)-改進(jìn)自適應(yīng)加權(quán)融合算法

    接上集: 上次實(shí)驗(yàn)我們已經(jīng)完成傳感器融合算法的設(shè)計(jì),本次實(shí)驗(yàn)注意完成改進(jìn)自適應(yīng)加權(quán)融合算法設(shè)計(jì)。 一、背景 通過利用溫室控制系統(tǒng)來管理溫室內(nèi)的各種設(shè)備并控制溫度、濕度,可以更好地探索
    發(fā)表于 01-06 12:18