0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

所有操作層都接入AI,Menteebot給人形機器人發(fā)展帶來新思路

Felix分析 ? 來源:電子發(fā)燒友網(wǎng) ? 作者:吳子鵬 ? 2024-04-22 07:54 ? 次閱讀

電子發(fā)燒友網(wǎng)報道(文/吳子鵬)近日,初創(chuàng)公司Mentee Robotics展示了旗下首款人形機器人的原型Menteebot。相較于波士頓動力的電動Atlas,以及特斯拉的擎天柱(Optimus),Menteebot名聲并不響。

不過,Mentee Robotics還是有名頭的,因為它是Mobileye核心創(chuàng)始人Amnon Shashua的另一個創(chuàng)業(yè)項目,該公司的另外兩位創(chuàng)始人分別為Mobileye首席技術官ShaiShalev-Shwartz、前FacebookAI研究總監(jiān)LiorWolf。

Menteebot最大的特色是據(jù)稱在所有操作層都接入了AI,注意這里面的區(qū)別,并不是圍繞AI模型打造一個機器人的“大腦”,而是在所有操作層都利用AI賦能。

全身布滿AI的Menteebot

Mentee Robotics表示,Menteebot是一款“可以指導的個性化人工智能機器人”,具備與人類相似的平衡和控制能力。剛剛提到,和以往的人形機器人有所不同,Menteebot渾身都布滿了AI,搭載有豐富的AI模型和AI算法,這讓Menteebot能夠更加受益于多模態(tài)AI模型的發(fā)展。同時,人類可以使用自然語言來控制它。

通過演示視頻,Menteebot超強的AI能力至少表現(xiàn)在兩個方面,其一是更加自然的溝通能力,其二是超強的運動能力。

先看溝通能力,Menteebot搭載了更加豐富的自然語言模型,這使得它的控制不再受限于既定的指令。過往,人形機器人在溝通時,存在模型內和模型外能力的差距,此前我們也提到這個問題,當某一項指令屬于模型訓練范圍內時,人形機器人能夠表現(xiàn)出超強的能力,不過當指令超出模型訓練范圍之后,人形機器人就會顯得“不知所措”。

據(jù)悉,Menteebot可以與人類進行自然的對話和交流。用戶只需通過自然語言向機器人發(fā)出命令,它便能理解并執(zhí)行相應的任務。這其實要得益于Menteebot“大腦”模型中更加強大的人工智能算法、大型語言模型和軟件。Mentee Robotics稱,基于NeRF的實時三維映射和定位、復雜環(huán)境中的動態(tài)導航等技術,可實現(xiàn)復雜的推理,以完成任務和快速學習新任務。

Mentee Robotics特別提到,完成部署的Menteebot可以進行更高級的訓練以應對復雜的任務或者場景,此時軟件會不斷模擬任務直到掌握為止,隨后機器人便能在現(xiàn)實世界中完成任務。

再看運動能力,Menteebot能夠完成更加復雜的行走姿態(tài),比如奔跑、側向行走,甚至轉身;也能夠執(zhí)行非常精細的操作,它能夠準確地將餐具遞給人類,這得益于其手臂和手部的全方位運動能力和精確性。

為了提升Menteebot的行動力,Mentee Robotics在這款機器人上集成了尖端的Sim2Real學習,可實現(xiàn)逼真的步態(tài)和手部運動,具有與人類相同的平衡和控制力,在舉起重物時還會調整步態(tài)。

Mentee Robotics表示,Menteebot機器人的量產(chǎn)版預計將于2025年第一季度部署,將由純視覺傳感、支持“前所未有的”靈活性的專用電動馬達、完全集成的人工智能提供動力。預計將分為家用版和商業(yè)版兩個版本。

Menteebot給人形機器人硬件創(chuàng)新帶來啟示

通過在所有操作層都接入AI,Menteebot機器人展示了強大的能力,包括溝通和運動。但這其實也給模型和算法的部署提出了更高的要求,包括Menteebot“大腦”里的核心芯片以及其他執(zhí)行單元里的芯片。

對于“大腦”里的核心芯片,首先要能夠支持多模態(tài)的AI大模型部署,并且需要對未來融入進來的新模態(tài)留出部署空間。目前,應用于人形機器人的大模型包括圖像識別模塊、語音識別模塊、文字轉語音模塊、對話系統(tǒng)模塊、導航模塊、多模態(tài)系統(tǒng)模塊和強化學習模塊等。核心芯片是這些模塊的載體,對于上述模塊,或者叫模態(tài)都需要能夠支持,即便是匯總歸結,核心芯片也需要能夠完整支持視覺模塊、導航模塊、語言模塊和決策模塊這四大能力,這對核心芯片的算子豐富度提出了高要求。Menteebot發(fā)布之后,預計強化學習將上升為第五大基礎模塊,屆時軟件能力會不斷增強,硬件冗余將成為一項重要的指標。

第二個就是執(zhí)行單元如何強化AI能力,這就對MCU、FPGA等部件提出了新要求。就以MCU來說,當前這一產(chǎn)品類別一個重要的發(fā)展方向就是:能夠在MCU上部署和執(zhí)行AI程序。實際上,產(chǎn)業(yè)界早就開始嘗試將AI部署在盡可能小的控制系統(tǒng)上,不過這個過程中也有很多挑戰(zhàn)。

首先要將AI模型部署在MCU上,就需要將這些模型轉化為C/C++代碼,這就需要對模型進行非常精準的量化,既要能夠保證模型的能力,同時也要盡量避免浮點運算。這對MCU編譯器也有很高的要求,因為量化之后代碼要部署到MCU里,需要經(jīng)過編譯器。

其次,當MCU運行AI模型之后,不能夠過度占用片上資源,也不能有太高的功耗。低功耗是至關重要的,因為在一個系統(tǒng)內,MCU器件的數(shù)量有很多,太高的功耗會影響系統(tǒng)整體的續(xù)航能力。

有人可能會說,MCU AI大可不必,但是要實現(xiàn)即時的AI效果,這是非常有必要的。

結語

Menteebot的發(fā)布堪稱人形機器人行業(yè)的黑馬,和電動Atlas一樣讓人震撼。在所有操作層都接入AI,這是一個先進的理念,也需要芯片作為核心硬件能夠更好地應對,其中高性能計算芯片需要支持多模態(tài),且強化學習模塊預計將上升為核心模塊;MCU AI對于即時性的提升是很有幫助的,但也很有挑戰(zhàn)性。
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機器人
    +關注

    關注

    211

    文章

    28418

    瀏覽量

    207081
  • AI
    AI
    +關注

    關注

    87

    文章

    30887

    瀏覽量

    269063
  • 人形機器人
    +關注

    關注

    2

    文章

    451

    瀏覽量

    16574
收藏 人收藏

    評論

    相關推薦

    Atlas轉型電驅,純電+AI正在加速通用人形機器人落地

    機器人新版Atlas。這一事件標志著波士頓人形機器人液壓傳動路線向純電的徹底轉變。 ? 同時,在四月末,北京人形機器人創(chuàng)新中心在北京經(jīng)開區(qū)發(fā)
    的頭像 發(fā)表于 05-03 01:00 ?5493次閱讀
    Atlas轉型電驅,純電+<b class='flag-5'>AI</b>正在加速通用<b class='flag-5'>人形</b><b class='flag-5'>機器人</b>落地

    《具身智能機器人系統(tǒng)》第1-6章閱讀心得之具身智能機器人系統(tǒng)背景知識與基礎模塊

    要給AI這個聰明的“頭腦”裝上一副“身體”。這個“身體”可以是一部手機,可以是一臺自動駕駛汽車。而人形機器人則是集各類核心尖端技術于一體的載體,是具身智能的代表產(chǎn)品。與傳統(tǒng)的軟件智能體不同,具身智能
    發(fā)表于 12-19 22:26

    王耀南院士:AI大模型賦能人形機器人及未來趨勢

    他以多個案例詳細介紹了用AI大模型賦能具身智能人形機器人思路和方法,他提出未來在具身智能人形機器人
    的頭像 發(fā)表于 11-08 11:03 ?745次閱讀
    王耀南院士:<b class='flag-5'>AI</b>大模型賦能<b class='flag-5'>人形</b><b class='flag-5'>機器人</b>及未來趨勢

    利用NVIDIA技術推動下一代AI機器人發(fā)展

    人形機器人到工廠,基于物理 AI 的工業(yè)系統(tǒng)正在通過訓練、仿真和推理加速發(fā)展
    的頭像 發(fā)表于 10-27 09:54 ?260次閱讀

    人形機器人場景應用聯(lián)盟正式成立

    日前,在“2024首屆人形機器人場景應用峰會”上,人形機器人場景應用聯(lián)盟正式宣告成立。
    的頭像 發(fā)表于 08-19 11:17 ?700次閱讀

    英偉達打造人形機器人訓練平臺,引領AI新紀元

    英偉達近日宣布了一項重大舉措,為全球機器人制造業(yè)與AI領域注入強勁動力。公司推出了專為人形機器人設計的訓練平臺,旨在為行業(yè)領先的制造商、AI
    的頭像 發(fā)表于 08-05 11:45 ?735次閱讀

    NVIDIA 加速人形機器人發(fā)展

    —SIGGRAPH— 當?shù)貢r間 2024 年 7 月 29 日— 為加速全球人形機器人發(fā)展,NVIDIA 于今日宣布,為全球領先的機器人制造商、
    發(fā)表于 07-30 09:15 ?746次閱讀
    NVIDIA 加速<b class='flag-5'>人形</b><b class='flag-5'>機器人</b><b class='flag-5'>發(fā)展</b>

    從市場角度簡要解讀“人形機器人

    能給我們大家帶來各自想要的很大便利。加上現(xiàn)在大家發(fā)聲的平臺渠道很多;感覺到現(xiàn)在的社會:說的人越來越多,自然就做的(實際行動)時間越來越少!自從人機大戰(zhàn)再次喚醒了人類人工智能機器人持續(xù)發(fā)展以來,應該來說全球投
    的頭像 發(fā)表于 06-29 16:30 ?882次閱讀

    從市場角度簡要解讀“人形機器人

    從市場角度簡要解讀“人形機器人”關于機器人,“人形機器人”應該是大家現(xiàn)階段談論較多的話題。正如一些新的客戶或朋友知道我們在做
    的頭像 發(fā)表于 06-29 08:14 ?416次閱讀
    從市場角度簡要解讀“<b class='flag-5'>人形</b><b class='flag-5'>機器人</b>”

    未來之聲 | 人形機器人說話篇:無聲!

    隨著一個個有關人形機器人的“核彈式”新聞的出現(xiàn),機器人技術肉眼可見地快速發(fā)展?;蛟S,與人們預想的“像一樣說話”不同,未來
    的頭像 發(fā)表于 04-13 08:00 ?291次閱讀
    未來之聲 | <b class='flag-5'>人形</b><b class='flag-5'>機器人</b>說話篇:無聲!

    為何要做人形機器人

    人形機器人在各個發(fā)展時期,致力于在“仿特征”上有一些突破。盡管有的人形
    發(fā)表于 04-09 10:54 ?594次閱讀

    優(yōu)必選宣布人形機器人Walker S接入百度文心大模型

    優(yōu)必選宣布人形機器人Walker S接入百度文心大模型,共同探索中國AI大模型+人形機器人的應用
    的頭像 發(fā)表于 04-07 10:17 ?918次閱讀

    華為云在人形機器人領域展開合作

    華為云與人形機器人領域的創(chuàng)新企業(yè)樂聚機器人近日達成合作,共同致力于探索“華為盤古大模型+夸父人形機器人”的全新應用場景。這是華為云首次與
    的頭像 發(fā)表于 03-25 10:49 ?686次閱讀

    人形機器人成為車圈“新寵”?

    現(xiàn)在的人形機器人不僅形態(tài)更接近人類,而且具備更多的智慧。隨著大型AI模型的不斷推進,人工智能正在加速人形通用機器人的量產(chǎn)和落地。
    發(fā)表于 02-22 09:22 ?390次閱讀
    <b class='flag-5'>人形</b><b class='flag-5'>機器人</b>成為車圈“新寵”?

    全面分析:人形機器人快速發(fā)展,哪些國產(chǎn)傳感器將受益?(深度報告)

    ? ? 傳感器是人形機器人感知的關鍵,基于MEMS工藝的力控、觸覺、慣性傳感器有望充分受益。 ? ① 人形機器人將更重視感知
    的頭像 發(fā)表于 02-21 09:53 ?1061次閱讀
    全面分析:<b class='flag-5'>人形</b><b class='flag-5'>機器人</b>快速<b class='flag-5'>發(fā)展</b>,哪些國產(chǎn)傳感器將受益?(深度報告)