0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

研究人員讓機器人理解和學(xué)習(xí)人類的雙手動作 不只是模仿那么簡單了

電子工程師 ? 來源:yxw ? 2019-05-31 09:30 ? 次閱讀

如果機器人真的可以幫助我們在房子周圍或照顧我們的受傷和老人,當(dāng)然用兩只手更方便,但是使用雙手比我們想象起來困難得多。

來自威斯康星大學(xué)麥迪遜分校的研究團隊的想法是,不要從頭開始構(gòu)建一個使用雙手的機器人,而是簡單地創(chuàng)建一個系統(tǒng),讓它能理解并執(zhí)行與人類不需要思考就能完成的動作。

例如,當(dāng)你需要打開一個罐子的時候,你用一只手抓住它,并把它移動到合適的位置,然后當(dāng)另一只手抓住蓋子并擰開它的時候,你就把那只手握緊。在這個基本的動作中發(fā)生了很多事情,現(xiàn)在要求機器人自動完成它是不可能的。但是那個機器人仍然可以大致了解為什么在這種情況下要進行這樣的操作,并盡其所能去完成它。

四種動作

研究人員首先讓人類佩戴動作捕捉設(shè)備執(zhí)行各種模擬日常任務(wù),如堆疊杯子,打開容器和傾倒物體,拾取物品,抽出夾在中間的物體。所有這些數(shù)據(jù),包括手的動向,它們?nèi)绾蜗嗷プ饔玫鹊龋急?a target="_blank">機器學(xué)習(xí)系統(tǒng)學(xué)習(xí)和反思,最終發(fā)現(xiàn)了人們最傾向用手做的四種動作:

移交:這是你拿起一個物體放在另一只手中,這樣就可以更容易地把它放在原處,或者騰出第一只手去做別的事情。

一只手固定:用一只手保持物體穩(wěn)定,牢牢地抓握,而另一只手對其進行操作,如取下蓋子或攪拌里面的物體。

固定偏移:雙手協(xié)同工作以拾取并旋轉(zhuǎn)或移動它。

單手搜索:實際上不是雙手操作,而是在另一只手找到需要的對象或執(zhí)行任務(wù)時故意讓一只手不參與操作。

機器人運用這些知識不是為了做動作本身,這些是非常復(fù)雜的動作,目前的人工智能無法執(zhí)行,而是為了解釋人類控制器所做的動作。

你可能會認為,當(dāng)一個人遠程控制一個機器人時,它只會準確地反映出這個人的動作。在測試中,機器人這樣做是為了提供一個基線,說明在不了解這些雙手動作的情況下,它們是如何做到這一點的,但其中許多動作是根本不可能做到的。

重新解釋人類動作

研究人員創(chuàng)建的系統(tǒng)會識別上述四種行為之一何時發(fā)生,并采取措施確保它們成功實現(xiàn)。這意味著,例如,當(dāng)一起拿起一個水桶時,要意識到另一只手對每只手臂施加的壓力?;蛘咴诹硪恢皇峙c蓋子相互作用時,為握著物體的手臂提供額外的剛性。即使只使用一只手(尋找任務(wù)),系統(tǒng)也知道它可以剝奪未使用的手的運動,并將更多的資源優(yōu)先給工作中的手。

這些知識大大提高了遠程操作員嘗試執(zhí)行一系列任務(wù)的成功率,任務(wù)旨在模擬準備早餐:打雞蛋,攪拌,移動物品,拿起托盤,戴眼鏡,并保持水平。

當(dāng)然,這仍然是由人類或多或少完成的,但人類的行為正在被增強并重新解釋,而不僅僅是簡單的機械復(fù)制。

機器人自主完成這些任務(wù)還有很長的路要走,但這樣的研究奠定了一些基礎(chǔ)。在機器人試圖像人類一樣移動之前,它必須不僅要了解人類的移動方式,還要了解為什么他們在某些情況下會做某些事情,還有哪些重要的過程可能會被明顯的觀察隱藏起來,比如規(guī)劃手的路線,選擇抓握位置等。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機器人
    +關(guān)注

    關(guān)注

    211

    文章

    28606

    瀏覽量

    207861
  • 人工智能
    +關(guān)注

    關(guān)注

    1793

    文章

    47588

    瀏覽量

    239465
  • 機器學(xué)習(xí)
    +關(guān)注

    關(guān)注

    66

    文章

    8435

    瀏覽量

    132879

原文標題:不只是模仿:研究人員讓機器人理解和學(xué)習(xí)人類的雙手動作

文章出處:【微信號:vision263com,微信公眾號:新機器視覺】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    【「具身智能機器人系統(tǒng)」閱讀體驗】2.具身智能機器人的基礎(chǔ)模塊

    具身智能機器人的基礎(chǔ)模塊,這個是本書的第二部分內(nèi)容,主要分為四個部分:機器人計算系統(tǒng),自主機器人的感知系統(tǒng),自主機器人的定位系統(tǒng),自主機器人
    發(fā)表于 01-04 19:22

    開源項目!能夠精確地行走、跳舞和執(zhí)行復(fù)雜動作機器人—Tillu

    認識Tillu——機器人 Tillu是一款融合先進機器人技術(shù)與創(chuàng)造力的獨特機器人,旨在激發(fā)學(xué)習(xí)與創(chuàng)新!它由運行Debian操作系統(tǒng)的UNIHIKER驅(qū)動,利用強大的控制系統(tǒng)實現(xiàn)逼真的
    發(fā)表于 01-02 17:24

    【「具身智能機器人系統(tǒng)」閱讀體驗】2.具身智能機器人大模型

    的設(shè)計不僅提高了機器人對環(huán)境的理解能力,還使其能夠更精準地執(zhí)行復(fù)雜任務(wù)。 擴散模型的新思路 除了大模型,擴散模型的引入為機器人控制開辟新的研究
    發(fā)表于 12-29 23:04

    【「具身智能機器人系統(tǒng)」閱讀體驗】1.初步理解具身智能

    需要理解環(huán)境,適應(yīng)變化的環(huán)境。 從國際上來看,已經(jīng)有不少科技公司發(fā)布自己的機器人產(chǎn)品,大多數(shù)應(yīng)用在安保,物流,制造等場景。 中國在具身智能機器人領(lǐng)域的研發(fā)速度相對較慢,但經(jīng)過多年的發(fā)
    發(fā)表于 12-28 21:12

    《具身智能機器人系統(tǒng)》第7-9章閱讀心得之具身智能機器人與大模型

    將自然語言理解與運動規(guī)劃融為一體。這種端到端的方法使機器人能夠直接從人類指令生成動作序列,大幅簡化了控制流程。該項目的工作流程包含設(shè)計并封裝一個人
    發(fā)表于 12-24 15:03

    【「具身智能機器人系統(tǒng)」閱讀體驗】+數(shù)據(jù)在具身人工智能中的價值

    提供機器人環(huán)境和動作的統(tǒng)一和詳細的理解。只有在這些過程之后,數(shù)據(jù)才能有效地用于訓(xùn)練 EAI 系統(tǒng)。 目前,應(yīng)用 Sim2Real 技術(shù)的主要障礙是“現(xiàn)實差距”,即模擬環(huán)境與現(xiàn)實世界
    發(fā)表于 12-24 00:33

    【「具身智能機器人系統(tǒng)」閱讀體驗】+初品的體驗

    《具身智能機器人系統(tǒng)》 一書由甘一鳴、俞波、萬梓燊、劉少山老師共同編寫,其封面如圖1所示。 本書共由5部分組成,其結(jié)構(gòu)和內(nèi)容如圖2所示。 該書可作為高校和科研機構(gòu)的教材,為學(xué)生和研究人員提供系統(tǒng)
    發(fā)表于 12-20 19:17

    《具身智能機器人系統(tǒng)》第1-6章閱讀心得之具身智能機器人系統(tǒng)背景知識與基礎(chǔ)模塊

    與環(huán)境持續(xù)互動來優(yōu)化決策策略。書中還進一步討論強化學(xué)習(xí)的基本原理,包括狀態(tài)空間、動作空間、獎勵函數(shù)的設(shè)計,以及策略網(wǎng)絡(luò)的訓(xùn)練方法。 具身智能機器人系統(tǒng)是一個多學(xué)科知識交叉的復(fù)雜工程體
    發(fā)表于 12-19 22:26

    NVIDIA如何賦能機器人技術(shù)創(chuàng)新與應(yīng)用

    近日,ROSCon China 2024在上海圓滿落幕。作為全球機器人行業(yè)的重要盛會,為期兩天的活動吸引眾多 ROS 社區(qū)行業(yè)專家、研究人員、開發(fā)者和機器人愛好者的參與,展示
    的頭像 發(fā)表于 12-10 14:56 ?347次閱讀

    名單公布!【書籍評測活動NO.51】具身智能機器人系統(tǒng) | 了解AI的下一個浪潮!

    機器人已經(jīng)從簡單模仿人類動作逐步過渡到賦予機器人更高級的自主決策能力。 國際上的科技巨頭(如波士頓動力、特斯拉和軟銀)都在這一領(lǐng)域取得了顯著
    發(fā)表于 11-11 10:20

    機器人技術(shù)的發(fā)展趨勢

    能力。 機器人能夠通過學(xué)習(xí)和訓(xùn)練,不斷優(yōu)化自身的行為和性能,實現(xiàn)更高效、更智能的工作。 自然語言處理與理解 : 隨著自然語言處理技術(shù)的進步,機器人開始具備
    的頭像 發(fā)表于 10-25 09:27 ?1219次閱讀

    協(xié)作機器人拽拖示教詳解

    用戶友好的編程方式,允許操作員通過手動移動機器人的末端執(zhí)行器(通常是機械臂的末端),來示范機器人執(zhí)行特定任務(wù)或動作的方式。機器人會記錄并
    的頭像 發(fā)表于 10-23 15:52 ?278次閱讀

    Al大模型機器人

    理解能力強大: AI大模型機器人可以理解和生成自然語言,能夠進行復(fù)雜的對話和語言任務(wù)。它們能夠識別語言中的語義、語境和情感,并據(jù)此作出適當(dāng)?shù)幕貞?yīng)。廣泛的知識儲備: 這些模型基于大規(guī)模的數(shù)據(jù)集進行訓(xùn)練,擁有
    發(fā)表于 07-05 08:52

    視覺機器人焊接的研究現(xiàn)狀

    視覺機器人焊接技術(shù)是將計算機視覺與機器人技術(shù)相結(jié)合,實現(xiàn)自動焊接過程中的實時檢測、跟蹤和控制。這一領(lǐng)域的研究一直處于不斷發(fā)展之中,吸引眾多研究人員
    的頭像 發(fā)表于 04-02 15:34 ?557次閱讀
    視覺<b class='flag-5'>機器人</b>焊接的<b class='flag-5'>研究</b>現(xiàn)狀

    2024年機器人產(chǎn)業(yè)的九大要點

    人形機器人是具有與人類似的身體結(jié)構(gòu)和運動方式(雙足行走、雙手協(xié)作等)的智能機器人
    的頭像 發(fā)表于 01-22 15:42 ?1173次閱讀