0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
电子发烧友
开通电子发烧友VIP会员 尊享10大特权
海量资料免费下载
精品直播免费看
优质内容免费畅学
课程9折专享价
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

借助NVIDIA OSMO擴展AI機器人開發(fā)工作負載

NVIDIA英偉達企業(yè)解決方案 ? 來源:NVIDIA英偉達企業(yè)解決方案 ? 2024-04-12 11:44 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

自主機器開發(fā)是一個數(shù)據(jù)生成和收集、模型訓練和部署的迭代過程,其特點是跨異構(gòu)計算資源的復雜的多階段、多容器工作流。

這其中涉及多個團隊,每個團隊都需要共享和異構(gòu)計算。此外,團隊希望將某些工作負載擴展到云中,這通常需要 DevOps 專業(yè)知識,還需要在本地維護其他工作負載。

到目前為止,還沒有一個統(tǒng)一的平臺可供開發(fā)者輕松提交所需計算的工作負載。

在最近的 GTC 大會上,NVIDIA 發(fā)布了OSMO,這是一個云原生工作流編排平臺,它提供一個單一界面,用于跨異構(gòu)共享計算環(huán)境調(diào)度和管理各種自主機器工作負載。這些工作負載包括:

合成數(shù)據(jù)生成 (SDG)

DNN 訓練和驗證

強化學習

SIL 或 HIL 中的機器人 (再) 仿真

基于 SIM 或真實數(shù)據(jù)的感知評估

9d689706-f87d-11ee-a297-92fbcf53809c.gif

跨異構(gòu)共享計算部署復雜的工作流

借助 OSMO 統(tǒng)一計算資源調(diào)度,您可以輕松地在 Kubernetes 集群上部署和協(xié)調(diào)多階段工作負載。這包括共享的異構(gòu)多節(jié)點計算資源,例如 aarch64 和 x86-64,可確??绮煌軜?gòu)的靈活性和兼容性。

您可以輕松設(shè)置基于 YAML 的多階段、多節(jié)點任務(wù),并簡化從 SDG 、訓練到模型驗證的端到端開發(fā)流程。OSMO 還可以集成到現(xiàn)有的 CI/CD 工作流中,動態(tài)調(diào)度夜間回歸測試、基準測試和模型驗證等任務(wù)。

該服務(wù)還利用 OIDC 等開放標準進行身份驗證,并支持通過一鍵式密鑰輪換實現(xiàn)憑據(jù)和數(shù)據(jù)集安全性的最佳實踐。在合規(guī)性方面,團隊可以通過開發(fā)中的版本管理和追蹤用于模型訓練的所有數(shù)據(jù)。這一功能對于可重復性來說也非常有價值。

協(xié)調(diào)本地部署和云 SDG 工作負載

合成數(shù)據(jù)生成尤其受益于分布式環(huán)境,因為它通常從本地開始生成較小批量的數(shù)據(jù),但當需要生成大量數(shù)據(jù)時,則需要利用云來進行規(guī)模的擴展。OSMO 使用彈性資源調(diào)配,在降低 SDG 等離線批量流程的成本方面發(fā)揮著關(guān)鍵作用,從而實現(xiàn)高效且經(jīng)濟的大規(guī)模數(shù)據(jù)生成。

高效運行 SIL 和 HIL 測試

OSMO 支持的另一個重要工作負載是軟件在環(huán) (SIL) 機器人測試,涉及仿真多傳感器和多機器人場景,或是一系列測試場景。這些場景最適合易于訪問計算資源的云環(huán)境。OSMO 能夠跨分布式環(huán)境調(diào)度和管理工作負載,確保利用云資源的可擴展性和可訪問性,從而高效地執(zhí)行 SIL 測試。

另一方面,由于特定機器人或機器硬件的可用性,硬件在環(huán) (HIL) 測試需要本地部署。

異構(gòu)計算對于 HIL 測試來說是必需的,因為仿真和調(diào)試等工作負載需要 x86,并且需要在 aarch64 上運行針對測試的軟件,以提供其他方式無法提供的準確性能和硬件功能。直接在目標硬件上運行 HIL 還可以減少對昂貴的仿真器的需求。

同時生成和訓練基礎(chǔ)模型

OSMO 支持GR00T這種基礎(chǔ)模型,該模型需要在 NVIDIA DGX 上進行模型訓練,同時在 OVX 上進行實時強化學習。該工作負載包括在一個循環(huán)中以迭代方式生成和訓練模型。

OSMO 可以跨分布式環(huán)境管理和調(diào)度工作負載,從而實現(xiàn) DGX 和 OVX 系統(tǒng)的無縫協(xié)調(diào),從而實現(xiàn)高效的迭代模型開發(fā)。

9d7a4be0-f87d-11ee-a297-92fbcf53809c.jpg

圖 1. NVIDIA OSMO 用于 GR00T 基礎(chǔ)模型

跟蹤數(shù)據(jù)沿襲

數(shù)據(jù)沿襲和管理對于模型審計和確保整個開發(fā)過程的可追溯性來說至關(guān)重要。借助 OSMO,您可以追溯從來源到經(jīng)過訓練的模型的數(shù)據(jù)沿襲,從而提供透明性和可靠性。

借助 OSMO,您還可以輕松地管理大型數(shù)據(jù)集和創(chuàng)建數(shù)據(jù)集,從而實現(xiàn)高效的數(shù)據(jù)組織和分類。這包括管理真實數(shù)據(jù)集、合成數(shù)據(jù)集或混合數(shù)據(jù)集的能力,從而靈活地控制用于模型訓練和評估的數(shù)據(jù)集。



審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2565

    文章

    52930

    瀏覽量

    766805
  • 機器人
    +關(guān)注

    關(guān)注

    213

    文章

    29706

    瀏覽量

    212660
  • NVIDIA
    +關(guān)注

    關(guān)注

    14

    文章

    5299

    瀏覽量

    106289
  • 仿真器
    +關(guān)注

    關(guān)注

    14

    文章

    1037

    瀏覽量

    85336

原文標題:借助 NVIDIA OSMO 擴展 AI 機器人開發(fā)工作負載

文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    借助NVIDIA技術(shù)實現(xiàn)機器人裝配和接觸密集型操作

    本期 NVIDIA 機器人研究與開發(fā)摘要 (R2D2) 將探討 NVIDIA 研究中心針對機器人裝配任務(wù)的多種接觸密集型操作
    的頭像 發(fā)表于 06-04 13:51 ?211次閱讀
    <b class='flag-5'>借助</b><b class='flag-5'>NVIDIA</b>技術(shù)實現(xiàn)<b class='flag-5'>機器人</b>裝配和接觸密集型操作

    NVIDIA 通過云端至機器人計算平臺驅(qū)動人形機器人技術(shù),賦能物理 AI

    。 ? 包括 Agility Robotics、波士頓動力、傅利葉、Foxlink、銀河通用、Mentee Robotics、NEURA Robotics、General Robotics、Skild AI 和小鵬機器人在內(nèi)的多家人形
    發(fā)表于 05-19 17:53 ?964次閱讀
    <b class='flag-5'>NVIDIA</b> 通過云端至<b class='flag-5'>機器人</b>計算平臺驅(qū)動人形<b class='flag-5'>機器人</b>技術(shù),賦能物理 <b class='flag-5'>AI</b>

    盤點#機器人開發(fā)平臺

    圖,電子技術(shù)資料網(wǎng)站具身智能機器人****開發(fā)平臺——Fibot廣和通發(fā)布機器人開發(fā)平臺-電子發(fā)燒友網(wǎng)NVIDIA Isaac 英偉達綜合性
    發(fā)表于 05-13 15:02

    借助NVIDIA技術(shù)提升機器人的移動和全身控制能力

    我們通過在自身平臺上經(jīng)過驗證的先進研究來應對這些挑戰(zhàn)。我們的方法將前沿研究與工程工作流相結(jié)合,并在我們的 AI機器人平臺(包括 NVIDIA Omniverse、Cosmos、Is
    的頭像 發(fā)表于 04-27 15:14 ?705次閱讀
    <b class='flag-5'>借助</b><b class='flag-5'>NVIDIA</b>技術(shù)提升<b class='flag-5'>機器人</b>的移動和全身控制能力

    大象機器人攜手進迭時空推出 RISC-V 全棧開源六軸機械臂產(chǎn)品

    全球80多個國家和地區(qū)。 近日,大象機器人聯(lián)合進迭時空推出全球首款RISC-V全棧開源六軸機器臂“myCobot 280 RISC-V”,為開發(fā)者打造全新的機器人開源創(chuàng)新平臺。 “my
    發(fā)表于 04-25 17:59

    NVIDIA推出AI醫(yī)療健康機器人開發(fā)平臺

    醫(yī)療科技的未來是機器人化——醫(yī)院將全面自動化,由 AI 驅(qū)動的手術(shù)系統(tǒng)、機器人助手和自主患者護理徹底改變現(xiàn)有醫(yī)療模式。
    的頭像 發(fā)表于 04-19 17:07 ?826次閱讀
    <b class='flag-5'>NVIDIA</b>推出<b class='flag-5'>AI</b>醫(yī)療健康<b class='flag-5'>機器人</b><b class='flag-5'>開發(fā)</b>平臺

    NVIDIA Omniverse擴展至生成式物理AI領(lǐng)域

    NVIDIA近日宣布,其Omniverse?平臺再次實現(xiàn)重大突破,成功推出多個生成式AI模型和藍圖,將Omniverse的應用范圍進一步擴展至物理AI領(lǐng)域,包括
    的頭像 發(fā)表于 01-13 10:56 ?758次閱讀

    NVIDIA技術(shù)推動機器人仿真

    借助機器人仿真,開發(fā)人員能夠在基于物理學的現(xiàn)實世界數(shù)字呈現(xiàn)中對機器人進行虛擬訓練、測試和驗證。
    的頭像 發(fā)表于 01-03 14:10 ?478次閱讀

    NVIDIA通過加速AWS上的機器人仿真推進物理AI的發(fā)展

    NVIDIA Isaac Sim 現(xiàn)在可在 Amazon EC2 G6e 實例中的 NVIDIA GPU 云實例上使用,將機器人仿真的擴展速度提高了 2 倍并加快了
    的頭像 發(fā)表于 12-09 11:50 ?772次閱讀

    使用NVIDIA Jetson打造機器人導盲犬

    Selin Alara Ornek 是一名富有遠見的高中生。她使用機器學習和 NVIDIA Jetson邊緣 AI機器人平臺,為視障人士打造了
    的頭像 發(fā)表于 11-09 13:51 ?743次閱讀

    NVIDIA發(fā)布全新AI和仿真工具以及工作

    NVIDIA 在本周于德國慕尼黑舉行的機器人學習大會(CoRL)上發(fā)布了全新 AI 和仿真工具以及工作流。機器人
    的頭像 發(fā)表于 11-09 11:52 ?881次閱讀

    利用NVIDIA Isaac平臺構(gòu)建、設(shè)計并部署機器人應用

    機器人在智能制造設(shè)施、商業(yè)廚房、醫(yī)院、倉庫物流和農(nóng)業(yè)領(lǐng)域等不同環(huán)境中的應用正在迅速擴展。該行業(yè)正在向智能自動化轉(zhuǎn)變,這需要增強的機器人功能來執(zhí)行感知、地圖構(gòu)建、導航、負載處理、物體抓取
    的頭像 發(fā)表于 11-09 11:41 ?1749次閱讀
    利用<b class='flag-5'>NVIDIA</b> Isaac平臺構(gòu)建、設(shè)計并部署<b class='flag-5'>機器人</b>應用

    使用機器學習和NVIDIA Jetson邊緣AI機器人平臺打造機器人導盲犬

    Selin Alara Ornek 是一名富有遠見的高中生。她使用機器學習和 NVIDIA Jetson 邊緣 AI機器人平臺,為視障人士打造了
    的頭像 發(fā)表于 11-08 10:05 ?795次閱讀

    NVIDIA提供一套服務(wù)、模型以及計算平臺 加速人形機器人發(fā)展

    的發(fā)展,NVIDIA 于今日宣布,為全球領(lǐng)先的機器人制造商、AI 模型開發(fā)者和軟件制造商提供一套服務(wù)、模型以及計算平臺,以開發(fā)、訓練和構(gòu)建下
    的頭像 發(fā)表于 07-31 10:41 ?1217次閱讀

    NVIDIA 加速人形機器人發(fā)展

    開發(fā)者可以訪問新的 NVIDIA NIM 微服務(wù),用于 Isaac Lab 和 Isaac Sim 中的機器人仿真、OSMO 機器人云計算編
    發(fā)表于 07-30 09:15 ?952次閱讀
    <b class='flag-5'>NVIDIA</b> 加速人形<b class='flag-5'>機器人</b>發(fā)展

    電子發(fā)燒友

    中國電子工程師最喜歡的網(wǎng)站

    • 2931785位工程師會員交流學習
    • 獲取您個性化的科技前沿技術(shù)信息
    • 參加活動獲取豐厚的禮品