0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

用現(xiàn)實(shí)世界的SLAM技術(shù)打造《機(jī)器人總動(dòng)員》里的瓦力WALL·E

曠視MEGVII ? 來(lái)源:Megvii曠視科技 ? 作者:Megvii曠視科技 ? 2020-09-26 09:40 ? 次閱讀

還記得《機(jī)器人總動(dòng)員》里的瓦力WALL·E嗎?

那個(gè)穿梭于城市之間

能運(yùn)能抗,能上能下

還偶爾賣萌歪頭殺的小可愛!

你是否有好奇過(guò)

它是如何看見世界的呢?

點(diǎn)擊下方空白區(qū)域查看答案

其實(shí)小曠也不知道瓦力怎么看見世界:)

但小曠想告訴你

現(xiàn)實(shí)世界里的SLAM技術(shù)可以做到!

背景小知識(shí)實(shí)時(shí)定位與地圖構(gòu)建(Simultaneous Localization and Mapping,SLAM)技術(shù)是機(jī)器人導(dǎo)航控制領(lǐng)域一項(xiàng)極為重要的基礎(chǔ)技術(shù),雖然近年來(lái)SLAM領(lǐng)域發(fā)展迅猛,但算法在各類環(huán)境下的魯棒性問(wèn)題仍然有待探索,這其中數(shù)據(jù)集扮演著關(guān)鍵角色。 如上視頻是一個(gè)典型的SLAM工作:利用視頻序列同時(shí)估計(jì)相機(jī)姿態(tài)和構(gòu)建環(huán)境地圖,視頻源于Direct Sparse Visual-Inertial Odometry using Dynamic Marginalization, Lukas von Stumberg, Vladyslav Usenko, Daniel Cremers, 2018 IEEE International Conference on Robotics and Automation (ICRA)

在不久前的CVPR2020 SLAM挑戰(zhàn)賽上,曠視研究院SLAM組以絕對(duì)優(yōu)勢(shì)包攬了挑戰(zhàn)賽全部賽道冠軍!

這不僅再次證明曠視在SLAM領(lǐng)域所具備的國(guó)際頂尖水平,也反映了曠視在機(jī)器人建圖定位方面的業(yè)界領(lǐng)先水平!

而SLAM技術(shù)的突破,也讓“瓦力”離現(xiàn)實(shí)更進(jìn)一步哦~

曠視研究院 SLAM 組在此次比賽中包攬了Mono Track和Stereo Track兩個(gè)賽道冠軍

那么問(wèn)題來(lái)了,曠視是如何成為雙料冠軍的呢?

本次挑戰(zhàn)賽完全基于超難數(shù)據(jù)集TartanAir開展,TartanAir包含大量風(fēng)格迥異、環(huán)境變量多元的場(chǎng)景,同時(shí)相機(jī)的各種極端運(yùn)動(dòng)模式,也對(duì)SLAM算法魯棒性提出了巨大挑戰(zhàn)!

TartanAir 數(shù)據(jù)示例,官網(wǎng):http://theairlab.org/tartanair-dataset/

曠視研究院SLAM組,采用SuperPoint和SuperGlue進(jìn)行特征提取和匹配,同時(shí)融合多種視覺特征,獨(dú)創(chuàng)根據(jù)環(huán)境進(jìn)行動(dòng)態(tài)閾值調(diào)整策略,結(jié)合全局閉環(huán)修正精度,最終達(dá)成目標(biāo)。

如上為雙目測(cè)試集上的部分結(jié)果,更詳細(xì)的技術(shù)方案解析,歡迎閱讀(戳可直接跳轉(zhuǎn))《在超難數(shù)據(jù)集TartanAir上登頂CVPR 2020 SLAM挑戰(zhàn)賽,曠視用了這樣的方案》了解!

而在比賽之外,大家或許早已見識(shí)過(guò)曠視SLAM技術(shù)。

曠視全新一代機(jī)器人MegBot-S800 AMR,基于業(yè)內(nèi)首創(chuàng)的激光視覺融合導(dǎo)航技術(shù)打造:額定負(fù)載800KG,相當(dāng)于一次可以扛起10個(gè)成年人!360°激光雷達(dá)覆蓋、VSLAM 技術(shù)加持;具備低矮物體檢測(cè)智能繞障能力;擁有更精準(zhǔn)的定位能力和更強(qiáng)大的環(huán)境適應(yīng)性!

MegBot-S800 AMR

在9月8日舉辦的2020服貿(mào)會(huì)海淀之夜上,MegBot-S800 AMR就作為“侍應(yīng)生”,穿梭于復(fù)雜的會(huì)場(chǎng)和賓客之中,順利完成了遞送酒水物品的任務(wù)!

當(dāng)然,機(jī)器人的未來(lái)遠(yuǎn)不止于此。曠視也將在 SLAM 領(lǐng)域帶來(lái)更多突破和驚喜,讓“瓦力”走向現(xiàn)實(shí)!

責(zé)任編輯:xj

原文標(biāo)題:看曠視CVPR2020 SLAM冠軍團(tuán)隊(duì)如何打造 “WALL·E”

文章出處:【微信公眾號(hào):Megvii曠視科技】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • SLAM
    +關(guān)注

    關(guān)注

    23

    文章

    424

    瀏覽量

    31834
  • 曠視科技
    +關(guān)注

    關(guān)注

    1

    文章

    153

    瀏覽量

    11170

原文標(biāo)題:看曠視CVPR2020 SLAM冠軍團(tuán)隊(duì)如何打造 “WALL·E”

文章出處:【微信號(hào):megvii,微信公眾號(hào):曠視MEGVII】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】+數(shù)據(jù)在具身人工智能中的價(jià)值

    提供了對(duì)機(jī)器人環(huán)境和動(dòng)作的統(tǒng)一和詳細(xì)的理解。只有在這些過(guò)程之后,數(shù)據(jù)才能有效地用于訓(xùn)練 EAI 系統(tǒng)。 目前,應(yīng)用 Sim2Real 技術(shù)的主要障礙是“現(xiàn)實(shí)差距”,即模擬環(huán)境與現(xiàn)實(shí)
    發(fā)表于 12-24 00:33

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】+初品的體驗(yàn)

    的學(xué)習(xí)資源,以培養(yǎng)更多的專業(yè)人才。隨著具身智能機(jī)器人技術(shù)對(duì)社會(huì)的影響越來(lái)越大,該書還可以向公眾普及相關(guān)的知識(shí),以提升社會(huì)對(duì)新技術(shù)的認(rèn)知和接受度,從而為技術(shù)的發(fā)展創(chuàng)造良好的社會(huì)環(huán)境。 隨
    發(fā)表于 12-20 19:17

    《具身智能機(jī)器人系統(tǒng)》第1-6章閱讀心得之具身智能機(jī)器人系統(tǒng)背景知識(shí)與基礎(chǔ)模塊

    將大模型的\"大腦\"裝入物理實(shí)體的\"身軀\",讓AI真正走進(jìn)現(xiàn)實(shí)世界。這種革新不僅體現(xiàn)在稚暉君開源的人形機(jī)器人方案,更在“AI教母”李飛飛的VoxPoser
    發(fā)表于 12-19 22:26

    【書籍評(píng)測(cè)活動(dòng)NO.51】具身智能機(jī)器人系統(tǒng) | 了解AI的下一個(gè)浪潮!

    。 這些技術(shù)的綜合應(yīng)用使具身智能系統(tǒng)能夠進(jìn)行復(fù)雜的環(huán)境感知、決策制定和物理操作。例如,通過(guò)多模態(tài)感知技術(shù),智能體能夠綜合視覺、 聽覺和觸覺數(shù)據(jù),更全面地理解和響應(yīng)其所處的環(huán)境。 具身智能通過(guò)提高機(jī)器人
    發(fā)表于 11-11 10:20

    使用NVIDIA Jetson打造機(jī)器人導(dǎo)盲犬

    Selin Alara Ornek 是一名富有遠(yuǎn)見的高中生。她使用機(jī)器學(xué)習(xí)和 NVIDIA Jetson邊緣 AI 和機(jī)器人平臺(tái),為視障人士打造機(jī)器人導(dǎo)盲犬。
    的頭像 發(fā)表于 11-09 13:51 ?260次閱讀

    “0元購(gòu)”智元靈犀X1機(jī)器人,軟硬件全套圖紙和代碼全公開!資料免費(fèi)下載!

    和開發(fā)指南分別上線GitHub和智元機(jī)器人官網(wǎng),“一站式”開源軟硬件全套圖紙和代碼,大幅降低了機(jī)器人技術(shù)開發(fā)的門檻,推動(dòng)了全球機(jī)器人技術(shù)的普
    發(fā)表于 10-25 15:20

    開源項(xiàng)目!ESP32做一個(gè)可愛的無(wú)用機(jī)器人

    巧妙設(shè)計(jì)的杠桿將開關(guān)推回“關(guān)”位置。這種玩具很常見,許多人已經(jīng)制作并上傳到Y(jié)ouTube上。 作者每年都會(huì)挑戰(zhàn)自己制作一個(gè)技術(shù)產(chǎn)品,今年他決定制作這個(gè)復(fù)雜的項(xiàng)目——可愛無(wú)用機(jī)器人。這個(gè)機(jī)器人參考了日本
    發(fā)表于 09-03 09:34

    開源項(xiàng)目!ESP32做一個(gè)可愛的無(wú)用機(jī)器人

    巧妙設(shè)計(jì)的杠桿將開關(guān)推回“關(guān)”位置。這種玩具很常見,許多人已經(jīng)制作并上傳到Y(jié)ouTube上。 作者每年都會(huì)挑戰(zhàn)自己制作一個(gè)技術(shù)產(chǎn)品,今年他決定制作這個(gè)復(fù)雜的項(xiàng)目——可愛無(wú)用機(jī)器人。這個(gè)機(jī)器人參考了
    發(fā)表于 08-30 14:50

    軟通動(dòng)力與智元機(jī)器人攜手亮相世界機(jī)器人大會(huì)

    北京2024年8月22日?/美通社/ -- 8月21日,以"共育新質(zhì)生產(chǎn)?共享智能新未來(lái)"為主題的2024世界機(jī)器人大會(huì)在北京開幕。作為數(shù)字技術(shù)產(chǎn)品和服務(wù)創(chuàng)新領(lǐng)導(dǎo)企業(yè)以及人形
    的頭像 發(fā)表于 08-22 13:12 ?396次閱讀
    軟通動(dòng)力與智元<b class='flag-5'>機(jī)器人</b>攜手亮相<b class='flag-5'>世界</b><b class='flag-5'>機(jī)器人</b>大會(huì)

    六維傳感器——人形機(jī)器人

    六維傳感器是人形機(jī)器人技術(shù)進(jìn)步的核心,其通過(guò)精確測(cè)量力和力矩,賦予機(jī)器人更高的操作精度和靈活性。這些傳感器的動(dòng)態(tài)響應(yīng)能力,為機(jī)器人執(zhí)行復(fù)雜
    的頭像 發(fā)表于 06-29 14:25 ?876次閱讀
    六維<b class='flag-5'>力</b>傳感器——人形<b class='flag-5'>機(jī)器人</b>的<b class='flag-5'>力</b>覺

    機(jī)器人高效導(dǎo)航定位背后SLAM專用芯片的崛起

    電子發(fā)燒友網(wǎng)報(bào)道(文/李寧遠(yuǎn))對(duì)移動(dòng)機(jī)器人來(lái)說(shuō),導(dǎo)航定位是最基本最核心的功能之一,機(jī)器人自主移動(dòng)能力建立在出色的導(dǎo)航定位基礎(chǔ)上。目前移動(dòng)機(jī)器人應(yīng)用得最廣泛的導(dǎo)航定位技術(shù)無(wú)疑是
    的頭像 發(fā)表于 05-28 00:20 ?3544次閱讀

    其利天下技術(shù)·搭載無(wú)刷電機(jī)的掃地機(jī)器人的前景如何?

    隨著懶人經(jīng)濟(jì)的崛起,智能家居設(shè)備的需求呈現(xiàn)出顯著的增長(zhǎng)態(tài)勢(shì)。作為智能家居領(lǐng)域的一員,掃地機(jī)器人因其方便、實(shí)用的特性而備受消費(fèi)者青睞。特別是在無(wú)刷電機(jī)技術(shù)的加持下,掃地機(jī)器人不僅提升了清潔效率,還優(yōu)化
    發(fā)表于 05-05 15:03

    技術(shù)融合與創(chuàng)新大象機(jī)器人水星Mercury X1機(jī)器人案例研究!

    定位與映射(SLAM)、機(jī)器人操作系統(tǒng)(ROS)、開源計(jì)算機(jī)視覺(OpenCV)和S-Tag標(biāo)記碼技術(shù)來(lái)實(shí)現(xiàn)復(fù)雜環(huán)境中的精確物體抓取和移動(dòng)。 此案例不僅展示了機(jī)器人的高級(jí)功能,也體現(xiàn)了
    的頭像 發(fā)表于 04-28 14:18 ?593次閱讀
    <b class='flag-5'>技術(shù)</b>融合與創(chuàng)新大象<b class='flag-5'>機(jī)器人</b>水星Mercury X1<b class='flag-5'>人</b>形<b class='flag-5'>機(jī)器人</b>案例研究!

    什么是SLAM?SLAM算法涉及的4要素

    SLAM技術(shù)可以應(yīng)用在無(wú)人駕駛汽車、無(wú)人機(jī)、機(jī)器人、虛擬現(xiàn)實(shí)等領(lǐng)域中,為這些領(lǐng)域的發(fā)展提供了支持。SLAM
    發(fā)表于 04-04 11:50 ?2419次閱讀

    華數(shù)機(jī)器人合力打造產(chǎn)業(yè)發(fā)展生態(tài)

    海濱及重慶智能機(jī)器人研究院相關(guān)管理層熱情接待。 許宏球副書記聽取了楊海濱總經(jīng)理關(guān)于《政產(chǎn)學(xué)研 打造西部機(jī)器人創(chuàng)新和產(chǎn)業(yè)化新高地》的主題匯報(bào),詳細(xì)了解華數(shù)
    的頭像 發(fā)表于 03-09 16:07 ?2086次閱讀