0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

FSD漸入佳境,視覺方案還在機(jī)器人中“打醬油”?

雙目立體視覺 ? 來(lái)源:雙目立體視覺 ? 作者:雙目立體視覺 ? 2024-07-12 14:58 ? 次閱讀

一邊是技術(shù)圈頂流,一邊在當(dāng)前行業(yè)應(yīng)用中沒什么存在感。

優(yōu)點(diǎn)缺點(diǎn),兩頭拔尖

優(yōu)點(diǎn)與缺點(diǎn)都突出的特點(diǎn),讓視覺方案一直伴隨著爭(zhēng)議,在近些年的行業(yè)應(yīng)用上也一直透著“底氣”不足。但隨著在自動(dòng)駕駛方面,純視覺FSD開始表現(xiàn)出極其優(yōu)秀的智駕能力,是否意味著,對(duì)于機(jī)器人導(dǎo)航方面,視覺方案也不僅僅是配角?

視覺方案的優(yōu)勢(shì)除卻成本較低,更加重要的是能夠獲取更豐富的環(huán)境信息,讓機(jī)器人在重定位、場(chǎng)景分類、交互等功能實(shí)現(xiàn)上更具優(yōu)勢(shì)。但缺陷也因?yàn)閿?shù)據(jù)處理量巨大,對(duì)算力要求很高,在算法和硬件無(wú)法給予足夠支持時(shí),機(jī)器人就會(huì)出現(xiàn)精準(zhǔn)度下降、卡頓、避障失靈等問(wèn)題,進(jìn)而導(dǎo)致任務(wù)無(wú)法達(dá)到預(yù)期,甚至失敗。這意味著要發(fā)揮出視覺方案的實(shí)際潛力,要么搭載高算力平臺(tái),要么需要優(yōu)化程度非常高的算法,否則所謂的巨大潛力,便成了笑話。

回到現(xiàn)實(shí),讓選擇視覺的消費(fèi)級(jí)掃地機(jī)器人產(chǎn)品重新拉高算力成本,顯然不可能。但如果算力無(wú)法滿足要求,算法就會(huì)做剪枝,閹割功能和極限性能,這也是視覺方案在當(dāng)前行業(yè)應(yīng)用上只能做配角的重要原因。

消費(fèi)級(jí)的產(chǎn)品注定了其目前能搭載的芯片算力不會(huì)太高,想要真正發(fā)揮視覺方案的應(yīng)用潛力,便只能在算法上下功夫。

算法瘦身,提升算力利用率

INDEMIND認(rèn)為,對(duì)算法“瘦身”,并提高算力資源利用率,或許是打破算力桎梏的有效路徑。為此,INDEMIND進(jìn)行了多年的實(shí)踐探索。

一方面,通過(guò)對(duì)算法進(jìn)行輕量化“瘦身”,研發(fā)了輕量化VSLAM(基于深度學(xué)習(xí)特征的SLAM架構(gòu))、輕量化Depth(基于深度學(xué)習(xí)特征匹配的Depth)、輕量化深度學(xué)習(xí)模型(底層算子自研、剪枝、量化)等,在不影響功能表現(xiàn)的前提下,對(duì)算力要求有效降低。

另一方面, 通過(guò)采用硬件加速技術(shù),對(duì)于視覺處理采用NEON加速、GPU加速、DSP加速等方式,提升芯片算力利用率。(系統(tǒng)運(yùn)行時(shí),芯片的計(jì)算單元不會(huì)全部被使用,導(dǎo)致算力資源浪費(fèi)。)

結(jié)果證明,通過(guò)全棧自研輕量化算法和應(yīng)用一系列軟硬件優(yōu)化技術(shù),INDEMIND實(shí)現(xiàn)了在幾美金的計(jì)算平臺(tái)上穩(wěn)定運(yùn)行整套VSLAM算法。

目前,公司推出的家用機(jī)器人AI解決方案搭載4核A53/A55級(jí)別芯片即可滿足需求,能夠適配如RK3566、VicoreTek 6601/6801等(全解決方案情況下,雙目視覺多傳感器融合SLAM、雙目Depth、物體識(shí)別及整機(jī)完整SDK)。需要說(shuō)明的是,現(xiàn)有的大部分視覺導(dǎo)航方案在算力上大多需要TX2及以上,甚至PC級(jí)算力需求,且對(duì)CPU、GPU或NPU、內(nèi)存均有較高要求。

算法再升級(jí),賦能產(chǎn)品“真”創(chuàng)新

· 打破現(xiàn)有建圖慣例,首創(chuàng)“真”三維建圖

目前主流的傳統(tǒng)2D柵格地圖、拓?fù)涞貓D雖然能夠描述環(huán)境中存在的障礙物幾何特征及其環(huán)境結(jié)構(gòu)信息,但卻缺乏機(jī)器人用于理解環(huán)境、人機(jī)/物機(jī)交互等業(yè)務(wù)邏輯的高層次語(yǔ)義信息。

wKgaomaQ0--ALMJFAEOVdT6Dj_A991.gif工程機(jī)演示,不代表最終量產(chǎn)效果

INDEMIND則基于自研的VSLAM技術(shù),首創(chuàng)了市面上真正意義上的三維地圖。地圖構(gòu)建過(guò)程中,能夠重建物體及環(huán)境的結(jié)構(gòu)信息,還有物體類別、功能屬性等“常識(shí)”性信息,這為上層功能開發(fā)提供了底層數(shù)據(jù)支持。

· 厘米級(jí)精準(zhǔn)避障技術(shù),無(wú)懼玻璃、積木

與自動(dòng)駕駛漸入佳境相反,機(jī)器人仍在與避障死磕。一塊積木、一面玻璃等似乎成了大多數(shù)掃地機(jī)器人無(wú)法逾越的天塹。

wKgZomaQ0_KAP-fYABA86FWrla0043.gif

INDEMIND基于設(shè)備端、云端智能決策平臺(tái)、大數(shù)據(jù)平臺(tái)三端專門建立了一套智能決策引擎,用于支持機(jī)器人完成邏輯判斷和決策,且在不斷使用中,能夠根據(jù)關(guān)鍵數(shù)據(jù)不斷更新算法模型,持續(xù)提升場(chǎng)景處理和問(wèn)題應(yīng)對(duì)能力。借助微秒級(jí)的智能決策引擎,機(jī)器人能夠穩(wěn)定檢測(cè)各類障礙物,支持低矮障礙物避障(地插、桌椅底座等);高反障礙物避障(玻璃、鏡面等)。同時(shí),配合環(huán)境補(bǔ)光技術(shù),機(jī)器人在黑暗環(huán)境同樣能夠輕松應(yīng)對(duì)。

wKgaomaQ0_OAYBUJADbwcGnkZLg957.gifwKgaomaQ0_SAS-npAAXNW5wKbmQ786.gifwKgZomaQ0_aAMUyNADuOzKTjioM338.gifwKgaomaQ0_iAESKWACzm52amgHs145.gif

· “真”臟污識(shí)別技術(shù),哪里臟掃哪里

自研臟污識(shí)別技術(shù),讓掃地機(jī)器人像人一樣“定點(diǎn)打擊”。基于獨(dú)有的圖像算法,支持任何地面材質(zhì)、花色、光線下的透明、半透明,不透明液體及干涸污漬識(shí)別、顆粒狀臟污識(shí)別、粉末狀臟污識(shí)別。而基于識(shí)別結(jié)果,系統(tǒng)能夠針對(duì)臟污類型和臟污程度自主決策清潔策略,提升清潔質(zhì)量和覆蓋率。

wKgZomaQ0_mAf8zHAJhoCgHx6K8513.gif在清潔過(guò)程中,機(jī)器人能夠?qū)⑴K污檢測(cè)結(jié)果及位置與場(chǎng)景地圖和軌跡進(jìn)行疊加,實(shí)現(xiàn)全場(chǎng)景的臟污地圖管理 wKgZomaQ0_2ASE6tACKxwbG3tzE155.gifwKgaomaQ0_-AJwwEAJY7azVGHCE616.gifwKgZomaQ1AKACHg5AB5GbtRznJc807.gifwKgaomaQ1AeAWFxOAB_6jcuTpHs684.gifwKgZomaQ1AiANSCaAA-M7KlMCoQ823.gif

通過(guò)深耕算法,打破算力限制,并對(duì)智能化方面深度創(chuàng)新,INDEMIND用實(shí)力證明視覺方案絕非配角。

審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 算法
    +關(guān)注

    關(guān)注

    23

    文章

    4612

    瀏覽量

    92884
  • SLAM
    +關(guān)注

    關(guān)注

    23

    文章

    424

    瀏覽量

    31830
  • 掃地機(jī)器人
    +關(guān)注

    關(guān)注

    20

    文章

    789

    瀏覽量

    53450
  • FSD
    FSD
    +關(guān)注

    關(guān)注

    0

    文章

    95

    瀏覽量

    6114
  • INDEMIND
    +關(guān)注

    關(guān)注

    1

    文章

    32

    瀏覽量

    3594
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    醬油賺分

    醬油賺分醬油賺分醬油賺分
    發(fā)表于 09-06 22:46

    醬油

    醬油醬油醬油
    發(fā)表于 09-07 00:27

    醬油

    醬油醬油醬油
    發(fā)表于 09-10 09:16

    現(xiàn)代機(jī)器人中有什么傳感器?

    控制和通信 IC 的發(fā)展在實(shí)現(xiàn)下一代的機(jī)器人中起到重要作用。然而,這些復(fù)雜的現(xiàn)代機(jī)器人的核心是許多新的、小型化和低成本的傳感技術(shù)的出現(xiàn)與融合。對(duì)實(shí)現(xiàn)下一代機(jī)器人至關(guān)重要的幾項(xiàng)關(guān)鍵傳感器技術(shù)包括磁性位置傳感器、存在傳感器、手勢(shì)傳感
    發(fā)表于 07-31 07:46

    工業(yè)機(jī)器人中面對(duì)的控制問(wèn)題是什么

    剛開始接觸機(jī)器人的時(shí)候,我在師兄的機(jī)器人代碼里死活找不到有關(guān)控制計(jì)算的函數(shù),作為常年和控制框圖打交道的我,很是疑惑控制回路去哪里了?因此本文介紹一下工業(yè)機(jī)器人中的控制問(wèn)題。參考華科賀磊博士的觀點(diǎn)
    發(fā)表于 06-28 09:29

    工業(yè)機(jī)器人視覺裝配實(shí)訓(xùn)平臺(tái)實(shí)驗(yàn)

    組成(臺(tái)皮帶線輸送模組、視覺定位及檢測(cè)模組、碼垛模組、裝配模組、螺絲模組、取料模組、機(jī)器人TCP標(biāo)定模組、PC模組等)。通過(guò)對(duì)該工業(yè)機(jī)器人視覺
    發(fā)表于 07-01 12:05

    工業(yè)機(jī)器人中有哪些控制問(wèn)題

    工業(yè)機(jī)器人中的伺服驅(qū)動(dòng)的目的是什么?工業(yè)機(jī)器人中的關(guān)節(jié)內(nèi)部驅(qū)動(dòng)結(jié)構(gòu)是怎樣構(gòu)成的?
    發(fā)表于 10-11 08:37

    遠(yuǎn)程信息處理技術(shù)漸入佳境

    遠(yuǎn)程信息處理技術(shù)漸入佳境 最近,充電式混合動(dòng)力車和電動(dòng)汽車(EV)發(fā)布,以及各種概念接踵而來(lái)。僅雷諾就在9月份的法蘭克福汽車展(IAA)上發(fā)布了三款新型電動(dòng)車。廠
    發(fā)表于 11-02 15:48 ?522次閱讀

    ARM圖形芯片漸入佳境 27家廠商購(gòu)買其芯片授權(quán)

    ARM圖形芯片漸入佳境 27家廠商購(gòu)買其芯片授權(quán)  ARM公司近日宣布四季度又有兩家廠商簽約購(gòu)買了其新款Mail圖形芯片的專利設(shè)計(jì)授權(quán),其中也包括知名廠商三星公司,目
    發(fā)表于 02-11 09:09 ?1103次閱讀

    便攜式醫(yī)療電子市場(chǎng)漸入佳境

    便攜式醫(yī)療電子市場(chǎng)漸入佳境          近年來(lái),由于人們對(duì)于健康生活的追求日益增長(zhǎng),以及一系列的政策驅(qū)動(dòng),中國(guó)便攜式/家庭醫(yī)療電子市
    發(fā)表于 04-22 10:04 ?724次閱讀

    4K電視的發(fā)展漸入佳境,4K內(nèi)容缺乏是4K產(chǎn)業(yè)發(fā)展的攔路虎之一

    相比4K電視發(fā)展的一直風(fēng)生水起,4K內(nèi)容的發(fā)展似乎有點(diǎn)慢熱,甚至有點(diǎn)拖了4K電視普及的后腿。但從2017年開始,4K內(nèi)容的發(fā)展似乎漸入佳境
    發(fā)表于 08-27 11:22 ?1469次閱讀

    2020年是5G行業(yè)專網(wǎng)“關(guān)鍵年”,5G行業(yè)專網(wǎng)“漸入佳境

    在今天召開的中國(guó)移動(dòng)云上科技周“5G+融創(chuàng)能力匯-- 5G聯(lián)創(chuàng)行業(yè)專網(wǎng)專場(chǎng)”活動(dòng)上,GSMA大中華區(qū)技術(shù)總經(jīng)理劉鴻表示,2020年是5G行業(yè)專網(wǎng)“關(guān)鍵年”。當(dāng)前5G行業(yè)專網(wǎng)可以說(shuō)是漸入佳境,越來(lái)越多的企業(yè)意識(shí)到應(yīng)該與運(yùn)營(yíng)商合作建設(shè)5G網(wǎng)絡(luò)。
    的頭像 發(fā)表于 06-18 16:19 ?2727次閱讀

    中國(guó)移動(dòng)5G+MEC助力行業(yè)數(shù)字化轉(zhuǎn)型漸入佳境

    5GtoB在公網(wǎng)專用成熟商用的基礎(chǔ)上,向高可靠性方向又邁出了關(guān)鍵的一步,5G+MEC助力行業(yè)數(shù)字化轉(zhuǎn)型漸入佳境
    發(fā)表于 12-18 09:26 ?1403次閱讀

    MiniLED供應(yīng)鏈也漸入佳境,量產(chǎn)良率或拉高至9成以上

    蘋果春季產(chǎn)品發(fā)表會(huì)蓄勢(shì)待發(fā),MiniLED供應(yīng)鏈也漸入佳境,據(jù)說(shuō)可以相信量產(chǎn)良率很快將拉高至9成以上。
    的頭像 發(fā)表于 02-24 13:56 ?2010次閱讀

    國(guó)科微斬獲“強(qiáng)芯中國(guó)創(chuàng)新IC”獎(jiǎng)項(xiàng),車載SerDes芯片漸入佳境

    科微車載SerDes芯片榮獲“強(qiáng)芯中國(guó)2024新銳產(chǎn)品”獎(jiǎng)。這一榮譽(yù)不僅表明國(guó)科微車載SerDes芯片在汽車電子市場(chǎng)嶄露頭角,也傳遞了國(guó)科微構(gòu)建第二增長(zhǎng)曲線的戰(zhàn)略轉(zhuǎn)型路徑漸入佳境。 “強(qiáng)芯中國(guó)-創(chuàng)新IC”評(píng)選由中國(guó)集成電路設(shè)計(jì)創(chuàng)新聯(lián)盟、ICDIA-IC Show組委會(huì)發(fā)起,旨在為系統(tǒng)整
    的頭像 發(fā)表于 09-30 11:45 ?364次閱讀
    國(guó)科微斬獲“強(qiáng)芯中國(guó)創(chuàng)新IC”獎(jiǎng)項(xiàng),車載SerDes芯片<b class='flag-5'>漸入佳境</b>