0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

華為發(fā)明的機器人凝視追蹤方法,提高了機器人的擬人化程度

姚小熊27 ? 來源:愛集微 ? 作者:愛集微 ? 2020-10-12 13:45 ? 次閱讀

華為發(fā)明的機器人凝視追蹤技術(shù),通過顯示模塊來模擬真實的機器人面部輸出,結(jié)合多種偏轉(zhuǎn)角度測量方法,實現(xiàn)了平滑的凝視追蹤效果,提高了機器人的擬人化程度。

集微網(wǎng)消息,在現(xiàn)代社會的家庭中,越來越多的父母不能時刻陪伴孩子,而此時可以使用智能機器人進行陪伴以及教育孩子。這種智能機器人可以與孩子進行交流,并且可以基于不同的對話內(nèi)容學習、更新與孩子的交流方式,可以說非常的人性化。

擬人特性作為衡量機器人智能化的重要指標之一,在人機交互的過程中,目標跟隨以及凝視跟蹤行為的準確性則直接反映機器人的擬人化程度,技術(shù)人員往往通過提高機器人的擬人化程度來提高用戶的使用體驗。

而所謂的凝視追蹤技術(shù),就是在機器人和用戶進行對話時捕捉用戶的眼睛位置并進行凝視,因為人們在談話時往往看著對方的眼睛,如果機器人也可以采用這樣的技術(shù),將會極大的提高其擬人化程度,并且?guī)Ыo用戶極佳的交流體驗。

為了實現(xiàn)這個目的,華為在5月8日申請了一項名為“一種機器人的控制方法、裝置、機器人以及存儲介質(zhì)”的發(fā)明專利(申請?zhí)枺?02010382291.0),申請人為華為技術(shù)有限公司。

根據(jù)該專利目前公開的資料,讓我們一起來看看華為的這項凝視追蹤技術(shù)吧。

華為發(fā)明的機器人凝視追蹤方法,提高了機器人的擬人化程度

如上圖,為該專利中發(fā)明的機器人示意圖,其中包括具有模擬人形形態(tài)的a型機器人、模擬動物形態(tài)的b型機器人以及非生物形態(tài)的c型機器人,這些機器人雖然形狀各異,但是均具有運動功能,可以進行移動以及旋轉(zhuǎn)等運動操作,其具體控制方法的實現(xiàn)如下圖所示。

華為發(fā)明的機器人凝視追蹤方法,提高了機器人的擬人化程度

可以看到,控制機器人運動的過程分為三步,首先需要獲取目標對象的位置信息,其次根據(jù)這個位置信息來控制機器人轉(zhuǎn)動。這個相對位置可以通過自動識別或者手動設(shè)置來確定,它是機器人與目標對象之間的相對位置,例如正前方、右側(cè)等,也可以是具體多少角度的偏轉(zhuǎn),例如+60度或者-120度等。

有了相對位置信息后,機器人會根據(jù)自身的初始角度以及目標對象的位姿確定目標偏轉(zhuǎn)角度,例如人形機器人可以以其面部為正面。為了實現(xiàn)凝視追蹤的目的,可以將目標偏轉(zhuǎn)角度設(shè)置為機器人看向的方向,這樣就可以使得機器人的視線對準目標對象,從而完成凝視追蹤。

并且值得一提的是,該專利采用顯示模塊的輸出畫面來完成凝視,這相比于馬達驅(qū)動的硬件凝視具有更高的響應(yīng)度,利用這種模擬的凝視界面,可以很好的實現(xiàn)平滑凝視追蹤效果。

華為發(fā)明的機器人凝視追蹤方法,提高了機器人的擬人化程度

具體的應(yīng)用案例如上圖所示,這是專利中提供的目標偏轉(zhuǎn)角度的獲取示意圖,左側(cè)為機器人,右側(cè)為真人,對于凝視追蹤而言,最重要的就是將機器人的視線與目標對象的視線進行交匯,即處于同一平面內(nèi),因此機器人需要確定自身當前的視線方向以及目標對象的視線方法,并且可以基于兩個視線方向確定偏轉(zhuǎn)角度。

該專利提供了三種技術(shù)用于確定這個偏轉(zhuǎn)角度:基于距離傳感器、基于拍攝圖像以及基于語音信號的方式。基于距離傳感器的方法就是通過距離探測單元采集的距離值構(gòu)建機器人所處場景下的深度圖,基于深度圖來確定當前場景包含的對象,并根據(jù)目標的輪廓線來確定目標對象。

基于拍攝圖像的方法是通過輪廓識別算法提取該場景圖像內(nèi)包括的輪廓信息,并基于輪廓信息對場景圖像進行劃分,通過主體類型識別來確定目標對象。而基于語音信號的方法則是基于語音分析結(jié)果來確定是否有激活口令,通過口令來確定目標對象。

這三種方式都可以用于完成凝視追蹤,并且可以利用多種方法進行組合的方式來提高凝視追蹤的準確率。此外,基于拍攝圖像的方法還需要對攝像模塊上采集的圖像進行校準,從而在后續(xù)的凝視追蹤時,可以使得機器人的眼部視線偏移到目標對象的中心位置。

以上就是華為發(fā)明的機器人凝視追蹤方法,通過確定機器人與目標之間的偏轉(zhuǎn)角度,并不斷調(diào)整顯示模塊的輸出內(nèi)容以及旋轉(zhuǎn)部件來實現(xiàn)凝視追蹤。此外,該技術(shù)基于三種確定偏轉(zhuǎn)角度的方法,無需借助馬達來驅(qū)動硬件,響應(yīng)時間較短,不僅實現(xiàn)了平滑凝視追蹤行為,也提高了機器人的擬人化程度。
責任編輯:YYX

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機器人
    +關(guān)注

    關(guān)注

    211

    文章

    28474

    瀏覽量

    207388
  • 華為
    +關(guān)注

    關(guān)注

    216

    文章

    34472

    瀏覽量

    252008
收藏 人收藏

    評論

    相關(guān)推薦

    【「具身智能機器人系統(tǒng)」閱讀體驗】2.具身智能機器人的基礎(chǔ)模塊

    ,一次生成深度信息。 自主機器人定位任務(wù)的本質(zhì)是對機器人自身狀態(tài)的估計問題,包括位置,朝向,速度等問題。 路徑規(guī)劃旨在找到從起點到目標區(qū)域的路徑,確保路徑的可行性和最優(yōu)性。路徑規(guī)劃方法包括變分
    發(fā)表于 01-04 19:22

    【「具身智能機器人系統(tǒng)」閱讀體驗】2.具身智能機器人大模型

    引入GPT這樣的大模型后,情況發(fā)生了根本性的變化。只需提供適當?shù)奶崾驹~以及封裝好的機器人函數(shù)庫,大模型便能靈活地生成控制代碼,極大地簡化了開發(fā)過程,并提高了自動化水平。 此外,大模型憑借強大的推理能力
    發(fā)表于 12-29 23:04

    【「具身智能機器人系統(tǒng)」閱讀體驗】1.初步理解具身智能

    現(xiàn)狀和前沿研究,詳細介紹大模型的構(gòu)建方法、訓練數(shù)據(jù)、模型架構(gòu)和優(yōu)化技術(shù)。 第4部分(第10章到第13章)深入探討提升機器人計算實時性、算法安全性、系統(tǒng)可靠性及具身智能數(shù)據(jù)挑戰(zhàn)的具身智能機器人系統(tǒng)研究
    發(fā)表于 12-28 21:12

    《具身智能機器人系統(tǒng)》第7-9章閱讀心得之具身智能機器人與大模型

    將自然語言理解與運動規(guī)劃融為一體。這種端到端的方法使機器人能夠直接從人類指令生成動作序列,大幅簡化了控制流程。該項目的工作流程包含設(shè)計并封裝一個人機器人函數(shù)庫、編寫清晰地描述提示詞、在仿真環(huán)境中執(zhí)行
    發(fā)表于 12-24 15:03

    【「具身智能機器人系統(tǒng)」閱讀體驗】+數(shù)據(jù)在具身人工智能中的價值

    機器人領(lǐng)域貨幣化的重要工具,在互聯(lián)網(wǎng)領(lǐng)域,公司主要將用戶數(shù)據(jù)用于定向廣告和個性化內(nèi)容。這種有針對性的方法不僅可以增加銷售額,還可以提高用戶參與度,從而導致更高的訂閱費用或增加使用量。同時,在EAI領(lǐng)域
    發(fā)表于 12-24 00:33

    【「具身智能機器人系統(tǒng)」閱讀體驗】+初品的體驗

    提高機器人的自適應(yīng)性和自主性,賦能機器人在多種場景中的應(yīng)用。例如在家庭自動化領(lǐng)域,具身智能機器人能夠感知家庭成員的日常習慣和需求,自動執(zhí)行清潔、整理或其他家務(wù)任務(wù)。它們通過觀察家庭成員
    發(fā)表于 12-20 19:17

    《具身智能機器人系統(tǒng)》第1-6章閱讀心得之具身智能機器人系統(tǒng)背景知識與基礎(chǔ)模塊

    關(guān)鍵路徑:利用GNSS和IMU等傳感器直接獲取位置信息,同時通過攝像頭、激光雷達獲取環(huán)境距離信息反向推算位置。在數(shù)據(jù)處理環(huán)節(jié),采用卡爾曼濾波器和最大后驗估計方法融合多傳感器數(shù)據(jù),優(yōu)化機器人位置和運動狀態(tài)
    發(fā)表于 12-19 22:26

    鴻蒙機器人與鴻蒙開發(fā)板聯(lián)動演示

    鴻蒙機器人與鴻蒙開發(fā)板聯(lián)動演示,機器人的角色為迎賓機器人,開發(fā)板負責人賓客出現(xiàn)監(jiān)聽
    發(fā)表于 12-02 14:55

    國內(nèi)外部分人形機器人企業(yè)一覽

    人形機器人的定義人形機器人是一種仿生機器人,指形狀及尺寸與人體相似,能夠仿人類運動、表情、互動及動作的機器人,并具有一定程度的認知和決策智能
    的頭像 發(fā)表于 10-22 17:05 ?697次閱讀
    國內(nèi)外部分人形<b class='flag-5'>機器人</b>企業(yè)一覽

    碼垛機器人投產(chǎn)優(yōu)勢及選用方法

    ?碼垛機器人自動化設(shè)備車間的投產(chǎn)帶來了多方面的顯著優(yōu)勢。?首先,?它大大提高了生產(chǎn)效率,?能夠在24小時內(nèi)不間斷地工作,?且速度和精度遠超人工,?從而縮短了生產(chǎn)周期?。?其次,?該設(shè)備顯著降低了企業(yè)
    的頭像 發(fā)表于 07-30 15:33 ?185次閱讀

    Al大模型機器人

    和迭代來不斷改進自身性能。它們可以從用戶交互中學習并根據(jù)反饋進行調(diào)整,以提高對話質(zhì)量和準確性??啥ㄖ菩耘c整合性: AI大模型機器人可以根據(jù)特定需求進行定制和整合,以滿足不同場景和應(yīng)用的要求。它們可以與其
    發(fā)表于 07-05 08:52

    基于FPGA EtherCAT的六自由度機器人視覺伺服控制設(shè)計

    和增強系統(tǒng)處理圖像的實時性,本文提出了一種伊瑟特的六自由度機器人視覺伺服控制系統(tǒng),將攝像頭集成到基于 Zynq的伊瑟特主站上,提高了視覺伺服的實時性.經(jīng)測試,該平臺能夠?qū)σ曈X檢測目標的變化做出及時的反應(yīng)
    發(fā)表于 05-29 16:17

    其利天下技術(shù)·搭載無刷電機的掃地機器人的前景如何?

    大的吸力,有效清除各類污漬和顆粒物。同時,低噪音設(shè)計使得機器在工作時不會打擾到家庭成員的休息或工作。此外,無刷電機的壽命更長,減少了用戶的維護成本,提高了產(chǎn)品的性價比。 2.掃地機器人智能化
    發(fā)表于 05-05 15:03

    華為云在人形機器人領(lǐng)域展開合作

    華為云與人形機器人領(lǐng)域的創(chuàng)新企業(yè)樂聚機器人近日達成合作,共同致力于探索“華為盤古大模型+夸父人形機器人”的全新應(yīng)用場景。這是
    的頭像 發(fā)表于 03-25 10:49 ?701次閱讀

    機器人焊接技術(shù)的應(yīng)用與發(fā)展前景

    和更低的成本。今天創(chuàng)想焊縫跟蹤系統(tǒng)小編和大家一起探討機器人焊接技術(shù)的應(yīng)用與發(fā)展前景。 ??一、機器人焊接技術(shù)的應(yīng)用 ??機器人焊接技術(shù)的應(yīng)用,使得焊接過程更加自動化、智能化,有效提高了
    的頭像 發(fā)表于 01-25 14:10 ?1196次閱讀
    <b class='flag-5'>機器人</b>焊接技術(shù)的應(yīng)用與發(fā)展前景