0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

機(jī)器人以構(gòu)建藝術(shù)裝置存在哪些挑戰(zhàn)

jf_pJlTbmA9 ? 來(lái)源:jf_pJlTbmA9 ? 作者:jf_pJlTbmA9 ? 2023-08-01 15:00 ? 次閱讀

NVIDIA 機(jī)器人專家分享打造靈動(dòng)有趣的機(jī)器人以構(gòu)建藝術(shù)裝置存在哪些挑戰(zhàn),同時(shí)她期待著展開(kāi)自主機(jī)器領(lǐng)域的新篇章。

訓(xùn)練、測(cè)試以及為機(jī)器人編碼并非易事。我們最近發(fā)布的 Isaac 平臺(tái)承諾可以改變現(xiàn)狀,克服種種困難。

沒(méi)有人能比機(jī)器人專家 Madeline Gannon 更清楚這一點(diǎn)。過(guò)去一個(gè)月里,她一直待在匹茲堡周邊波蘭山中的研究工作室,潛心鉆研機(jī)器人藝術(shù)裝置。

她將主要研究精力放在 Manus 的首次亮相上。Manus 能夠?qū)?10 個(gè)工業(yè)臂與單個(gè)機(jī)器人大腦連接,展示人機(jī)交互的新前沿。

今天,世界經(jīng)濟(jì)論壇展覽會(huì)在中國(guó)天津舉辦。她一直爭(zhēng)分奪秒、全力以赴地開(kāi)發(fā)軟件和交互設(shè)計(jì),就是為了能夠在此展覽會(huì)上準(zhǔn)時(shí)為大家展示這些機(jī)器人臂靈動(dòng)有趣的一面。數(shù)周以來(lái),她每周都在倉(cāng)庫(kù)中投入 80 個(gè)小時(shí),而面臨的主要困難是:從機(jī)器人公司 ABB 租借兩臺(tái)機(jī)器人,然后使用這兩臺(tái)機(jī)器人模擬要在展覽會(huì)上展示的全部 10 臺(tái)機(jī)器人的交互情況。

Gannon 主要依靠模擬情況來(lái)創(chuàng)造與觀眾交互的場(chǎng)景。而且,在中國(guó)現(xiàn)場(chǎng)啟動(dòng)并運(yùn)行 10 臺(tái)機(jī)器之前,她并不確定這樣做是否確實(shí)有效。

模擬實(shí)際操作中的機(jī)器人會(huì)面臨一些挑戰(zhàn),這些挑戰(zhàn)傳統(tǒng)上已驅(qū)使機(jī)器人專家進(jìn)行自定義編程(更不用說(shuō)大型賭博和讓人焦慮的事件),因?yàn)橹钡阶罱?,軟件還無(wú)法穩(wěn)定可靠地運(yùn)行。

然而,這仍然是行業(yè)中的一個(gè)關(guān)鍵問(wèn)題,因?yàn)槲锪鳂I(yè)務(wù)和倉(cāng)庫(kù)作業(yè)越來(lái)越依賴機(jī)器人,這些機(jī)器人具備越來(lái)越多的自主權(quán),能夠與人類協(xié)同配合。

“隨著我們從機(jī)器人自動(dòng)化過(guò)渡到機(jī)器人自主,利用 Manus 這樣的藝術(shù)裝置,人們有機(jī)會(huì)親身體驗(yàn)未來(lái)人類如何與自主機(jī)器共存,”她說(shuō)。

可以肯定的是,Gannon 為實(shí)現(xiàn)此次展示歷盡艱辛,彰顯了該行業(yè)大規(guī)模開(kāi)發(fā)機(jī)器人技術(shù)的新動(dòng)態(tài)。

機(jī)器人助手時(shí)代到來(lái)

其中大部分仍在改進(jìn)。今年早些時(shí)候,我們發(fā)布了 Isaac Simulator,用于在虛擬環(huán)境中開(kāi)發(fā)、測(cè)試和訓(xùn)練自主機(jī)器。上周,在 GTC Japan 上,我們宣布推出 Jetson AGX Xavier Devkit,以幫助開(kāi)發(fā)者開(kāi)發(fā)機(jī)器人和無(wú)人機(jī)等自主機(jī)器。

此解決方案將軟件與硬件相結(jié)合,通過(guò)助力縮短開(kāi)發(fā)周期來(lái)推動(dòng)機(jī)器人革命。

“利用 Isaac,人們能夠以更快的速度開(kāi)發(fā)智能應(yīng)用程序,”Gannon 說(shuō)?!澳壳埃覀冋幱跈C(jī)器人技術(shù)的黃金時(shí)代。”

這并不是 Gannon 首次參加機(jī)器人競(jìng)技。去年,她還是卡內(nèi)基·梅隆大學(xué)的博士研究生,她開(kāi)發(fā)了一種交互式工業(yè)機(jī)器人臂,在倫敦設(shè)計(jì)博物館展出。

機(jī)器人 Mimus 是個(gè) 2600 磅的巨人,專用于觀察周圍的環(huán)境。這款機(jī)器人被安置在觀察區(qū)域,使用博物館天花板中嵌入的傳感器來(lái)觀察和接近,甚至是跟隨它覺(jué)得有趣的觀眾。

在天津世界經(jīng)濟(jì)論壇展出的 Manus 是她開(kāi)發(fā)的第二個(gè)且更復(fù)雜的機(jī)器人裝置,因?yàn)樵撗b置需要使用自定義軟件從頭開(kāi)始創(chuàng)建交互。

打造靈活有趣的Manus

打造 Manus 絕非易事。到達(dá)中國(guó)之后,在開(kāi)始這次交互式展覽之前,Gannon 只有 10 天時(shí)間在現(xiàn)場(chǎng)部署全部 10 個(gè)機(jī)器人。Manus 的機(jī)器人在 9 米高的基座上排成一排,并且使用有機(jī)玻璃包裹。在基座底部裝有 12 個(gè)深度傳感器,借此相互連接的機(jī)器人能夠跟蹤訪問(wèn)者的移動(dòng)情況,并據(jù)此作出響應(yīng)。

“這個(gè)項(xiàng)目需要處理大量視覺(jué)信息,這正是其大腦使用 NVIDIA GPU 的原因所在,”Gannon 說(shuō)。

利用此視覺(jué)系統(tǒng),Manus 可以自動(dòng)移動(dòng)以回應(yīng)周圍的人:如果 Manus 找到了有趣的人,隨著其機(jī)器人目光緊隨在目標(biāo)人物周圍,所有的 10 個(gè)機(jī)器人臂都會(huì)重新定向。

要為 Manus 創(chuàng)建交互設(shè)計(jì),Gannon 需要為其機(jī)器人開(kāi)發(fā)自定義通信協(xié)議和運(yùn)動(dòng)求解器,以及自定義人員感知、遠(yuǎn)程監(jiān)控和人機(jī)交互設(shè)計(jì)軟件。

她表示,直到現(xiàn)在還沒(méi)有可靠的技術(shù)資源,可以與智能機(jī)器人配合完成非典型的任務(wù)。因此,她每創(chuàng)造一個(gè)新的機(jī)器人部件,都不得不做無(wú)謂的重復(fù),浪費(fèi)時(shí)間做無(wú)用功。

Mamus 軟件堆棧的技術(shù)開(kāi)發(fā)大約占用了三分之二的項(xiàng)目時(shí)間,只剩三分之一的時(shí)間可用于項(xiàng)目的核心內(nèi)容,即人機(jī)交互設(shè)計(jì)。

未來(lái)機(jī)器人訓(xùn)練

利用 Jetson 實(shí)現(xiàn)計(jì)算機(jī)視覺(jué)并利用 Isaac Sim 訓(xùn)練機(jī)器人,有助于開(kāi)發(fā)者在未來(lái)的類似項(xiàng)目中扭轉(zhuǎn)這些比率。而且,它們非常適合開(kāi)發(fā)和模擬大量企業(yè)用于倉(cāng)庫(kù)和物流操作的工業(yè)機(jī)器人。

Gannon 擅長(zhǎng)針對(duì)這些障礙訓(xùn)練機(jī)器人,其開(kāi)創(chuàng)性工作引起了廣泛關(guān)注,而且多年來(lái)她一直被稱為“機(jī)器人語(yǔ)者”或“機(jī)器人馴服者”。

她聳了聳肩。“現(xiàn)在,有了 Isaac,我想我們不再需要機(jī)器人語(yǔ)者了?!?/p>

責(zé)任編輯:彭菁

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2552

    文章

    51305

    瀏覽量

    755267
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    211

    文章

    28570

    瀏覽量

    207731
  • NVIDIA
    +關(guān)注

    關(guān)注

    14

    文章

    5057

    瀏覽量

    103379
  • 虛擬環(huán)境
    +關(guān)注

    關(guān)注

    0

    文章

    27

    瀏覽量

    8963
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】2.具身智能機(jī)器人的基礎(chǔ)模塊

    具身智能機(jī)器人的基礎(chǔ)模塊,這個(gè)是本書(shū)的第二部分內(nèi)容,主要分為四個(gè)部分:機(jī)器人計(jì)算系統(tǒng),自主機(jī)器人的感知系統(tǒng),自主機(jī)器人的定位系統(tǒng),自主機(jī)器人
    發(fā)表于 01-04 19:22

    《具身智能機(jī)器人系統(tǒng)》第10-13章閱讀心得之具身智能機(jī)器人計(jì)算挑戰(zhàn)

    閱讀《具身智能機(jī)器人系統(tǒng)》第10-13章,我對(duì)具身智能機(jī)器人的工程實(shí)踐有了全新認(rèn)識(shí)。第10章從實(shí)時(shí)性角度剖析了機(jī)器人計(jì)算加速問(wèn)題。機(jī)器人定位中的SLAM算法需要處理兩個(gè)計(jì)算密集型任務(wù):
    發(fā)表于 01-04 01:15

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】+兩本互為支持的書(shū)

    如何使用PyTorch進(jìn)行數(shù)字圖像處理,它借助攝像頭來(lái)獲取視頻的圖像信息,然后通過(guò)已有的圖像識(shí)別框架模型經(jīng)深度學(xué)習(xí)和優(yōu)化達(dá)到更精準(zhǔn)的識(shí)別結(jié)果,從而為進(jìn)一步的執(zhí)行處理提供數(shù)據(jù)支持和依據(jù)。而《具身智能機(jī)器人系統(tǒng)
    發(fā)表于 01-01 15:50

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】2.具身智能機(jī)器人大模型

    近年來(lái),人工智能領(lǐng)域的大模型技術(shù)在多個(gè)方向上取得了突破性的進(jìn)展,特別是在機(jī)器人控制領(lǐng)域展現(xiàn)出了巨大的潛力。在“具身智能機(jī)器人大模型”部分,作者研究并探討了大模型如何提升機(jī)器人的能力,大模型存在
    發(fā)表于 12-29 23:04

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】1.初步理解具身智能

    現(xiàn)狀和前沿研究,詳細(xì)介紹大模型的構(gòu)建方法、訓(xùn)練數(shù)據(jù)、模型架構(gòu)和優(yōu)化技術(shù)。 第4部分(第10章到第13章)深入探討提升機(jī)器人計(jì)算實(shí)時(shí)性、算法安全性、系統(tǒng)可靠性及具身智能數(shù)據(jù)挑戰(zhàn)的具身智能機(jī)器人
    發(fā)表于 12-28 21:12

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】1.全書(shū)概覽與第一章學(xué)習(xí)

    了解具身智能機(jī)器人相關(guān)的知識(shí),我感到十分榮幸和幸運(yùn)。 全書(shū)簡(jiǎn)介 本書(shū)循序漸進(jìn)的方式展開(kāi),通過(guò)對(duì)具身智能機(jī)器人技術(shù)的全方位解析,幫助讀者系統(tǒng)化地學(xué)習(xí)這一領(lǐng)域的核心知識(shí)。 首先在第一部分,介紹了具身智能
    發(fā)表于 12-27 14:50

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】+數(shù)據(jù)在具身人工智能中的價(jià)值

    的數(shù)據(jù)集。例如,自主導(dǎo)航機(jī)器人需要處理大量環(huán)境數(shù)據(jù),增強(qiáng)其路徑規(guī)劃和避障能力。此外,數(shù)據(jù)的精度直接影響機(jī)器人的性能;從事高精度任務(wù)的工業(yè)機(jī)器人需要極其精確的數(shù)據(jù),其中微小的誤差可能會(huì)
    發(fā)表于 12-24 00:33

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】+初品的體驗(yàn)

    解決許多技術(shù)的和非技術(shù)的挑戰(zhàn),如提高智能體的自主性、處理復(fù)雜環(huán)境互動(dòng)的能力及確保行為的倫理和安全性。 未來(lái)的研究需要將視覺(jué)、語(yǔ)音和其他傳感技術(shù)與機(jī)器人技術(shù)相結(jié)合,探索更加先進(jìn)的知識(shí)表示和記憶模塊,利用強(qiáng)化學(xué)習(xí)進(jìn)一步優(yōu)化決策過(guò)程
    發(fā)表于 12-20 19:17

    《具身智能機(jī)器人系統(tǒng)》第1-6章閱讀心得之具身智能機(jī)器人系統(tǒng)背景知識(shí)與基礎(chǔ)模塊

    要給AI這個(gè)聰明的“頭腦”裝上一副“身體”。這個(gè)“身體”可以是一部手機(jī),可以是一臺(tái)自動(dòng)駕駛汽車。而人形機(jī)器人則是集各類核心尖端技術(shù)于一體的載體,是具身智能的代表產(chǎn)品。與傳統(tǒng)的軟件智能體不同,具身智能
    發(fā)表于 12-19 22:26

    開(kāi)源項(xiàng)目!用ESP32做一個(gè)可愛(ài)的無(wú)用機(jī)器人

    巧妙設(shè)計(jì)的杠桿將開(kāi)關(guān)推回“關(guān)”位置。這種玩具很常見(jiàn),許多人已經(jīng)制作并上傳到Y(jié)ouTube上。 作者每年都會(huì)挑戰(zhàn)自己制作一個(gè)技術(shù)產(chǎn)品,今年他決定制作這個(gè)復(fù)雜的項(xiàng)目——可愛(ài)無(wú)用機(jī)器人。這個(gè)機(jī)器人參考了日本
    發(fā)表于 09-03 09:34

    開(kāi)源項(xiàng)目!用ESP32做一個(gè)可愛(ài)的無(wú)用機(jī)器人

    巧妙設(shè)計(jì)的杠桿將開(kāi)關(guān)推回“關(guān)”位置。這種玩具很常見(jiàn),許多人已經(jīng)制作并上傳到Y(jié)ouTube上。 作者每年都會(huì)挑戰(zhàn)自己制作一個(gè)技術(shù)產(chǎn)品,今年他決定制作這個(gè)復(fù)雜的項(xiàng)目——可愛(ài)無(wú)用機(jī)器人。這個(gè)機(jī)器人參考了
    發(fā)表于 08-30 14:50

    Al大模型機(jī)器人

    和迭代來(lái)不斷改進(jìn)自身性能。它們可以從用戶交互中學(xué)習(xí)并根據(jù)反饋進(jìn)行調(diào)整,提高對(duì)話質(zhì)量和準(zhǔn)確性??啥ㄖ菩耘c整合性: AI大模型機(jī)器人可以根據(jù)特定需求進(jìn)行定制和整合,滿足不同場(chǎng)景和應(yīng)用的要求。它們可以與其
    發(fā)表于 07-05 08:52

    自動(dòng)停車機(jī)器人,如何快速構(gòu)建

    現(xiàn)場(chǎng)作業(yè) ▲停車移動(dòng)機(jī)器人構(gòu)成 科聰停車機(jī)器人 解決方案 -KC SOLUTION 本方案中核心部分采用的是科聰通用移動(dòng)機(jī)器人控制器,導(dǎo)航方式一般選擇激光導(dǎo)航,用以實(shí)現(xiàn)行駛路徑可靈活多變和高精度導(dǎo)航的需求。
    的頭像 發(fā)表于 06-20 11:25 ?269次閱讀
    自動(dòng)停車<b class='flag-5'>機(jī)器人</b>,如何快速<b class='flag-5'>構(gòu)建</b>?

    abb機(jī)器人系統(tǒng)密鑰在哪

    ABB機(jī)器人系統(tǒng)密鑰是ABB機(jī)器人系統(tǒng)中用于保護(hù)其知識(shí)產(chǎn)權(quán)和確保系統(tǒng)安全性的一種技術(shù)手段。本文將詳細(xì)介紹ABB機(jī)器人系統(tǒng)密鑰的相關(guān)知識(shí),包括其定義、作用、獲取方式、使用方法以及注意事項(xiàng)等。 一
    的頭像 發(fā)表于 06-17 09:45 ?1399次閱讀

    協(xié)作機(jī)器人和工業(yè)機(jī)器人區(qū)別在哪

    協(xié)作機(jī)器人和工業(yè)機(jī)器人區(qū)別在哪? 協(xié)作機(jī)器人和工業(yè)機(jī)器人是現(xiàn)代工業(yè)自動(dòng)化發(fā)展中兩個(gè)重要的概念。雖然這兩種
    的頭像 發(fā)表于 01-26 14:56 ?2027次閱讀