盤點(diǎn)2023 NVIDIA帶來的前沿機(jī)器人技術(shù)及其在機(jī)器人領(lǐng)域的多樣應(yīng)用

在過去的一年中，以生成式 AI 為代表的技術(shù)趨勢為各行各業(yè)帶來了巨大變革，機(jī)器人行業(yè)也不例外。如今，越來越多的行業(yè)開始應(yīng)用由 AI 驅(qū)動的自主機(jī)器，實(shí)現(xiàn)更為先進(jìn)的技術(shù)范式，以提高生產(chǎn)效率和降低運(yùn)營成本。

本文精選多篇 NVIDIA 博客，盤點(diǎn)過去一年來 NVIDIA 帶來的前沿機(jī)器人技術(shù)及其在機(jī)器人領(lǐng)域的多樣應(yīng)用！

技術(shù)藍(lán)圖：

NVIDIA 賦能機(jī)器人智能化發(fā)展

NVIDIA 擴(kuò)大 Isaac 軟件的接入范圍

并提高 Jetson 平臺的可用性，

加快機(jī)器人技術(shù)從云到邊緣的發(fā)展

NVIDIA 于 GTC 2023 上宣布，Omniverse Cloud托管至 Microsoft Azure ，以擴(kuò)大 NVIDIAAI 機(jī)器人開發(fā)和管理平臺 Isaac Sim的接入范圍。同時全線Jetson Orin模組均已推出，為邊緣 AI 和機(jī)器人應(yīng)用帶來性能上的飛躍。

NVIDIA Isaac AMR 助力

移動機(jī)器人實(shí)現(xiàn)高級自動化

想要提高運(yùn)營效率的行業(yè)對移動機(jī)器人的需求日益增長，使得移動機(jī)器人的出貨量激增。NVIDIA Isaac AMR 是一個用于仿真、驗證、部署、優(yōu)化和管理自主移動機(jī)器人車隊的平臺，包含了邊緣到云的軟件服務(wù)、計算以及一套參考傳感器和機(jī)器人硬件，可加快 AMR 的開發(fā)和部署速度，減少成本和縮短產(chǎn)品上市時間。

基于 NVIDIA Jetson

使用硬件在環(huán)設(shè)計機(jī)器人

Hardware-in-the-Loop（硬件在環(huán)，HIL）測試是一種強(qiáng)大的工具，用于驗證和核實(shí)包括機(jī)器人技術(shù)和計算機(jī)視覺在內(nèi)的復(fù)雜系統(tǒng)的性能。文章展示了如何設(shè)置 HIL 和使用 NVIDIA Jetson Isaac ROS 模塊進(jìn)行測試，以及如何嘗試 NVIDIA Isaac Sim，從而獲得更安全、更可靠、更高效的產(chǎn)品。

NVIDIA 擴(kuò)展機(jī)器人平臺，

迎接生成式 AI 的崛起

NVIDIA 在 Jetson 平臺上對 Metropolis 和 Isaac 框架進(jìn)行了有史以來規(guī)模最大的軟件擴(kuò)展，并結(jié)合 Transformer 模型與生成式 AI 的強(qiáng)大功能來滿足邊緣 AI 的快速部署需求。同時，NVIDIA 還創(chuàng)建了一個 Jetson 生成式 AI 實(shí)驗室，以供開發(fā)者利用最新的開源生成式 AI 模型進(jìn)行開發(fā)。

訓(xùn)練自主移動機(jī)器人使用合成數(shù)據(jù)

檢測倉庫托盤千斤頂

在訓(xùn)練那些部署在 AMR 上的感知 AI 模型時，合成數(shù)據(jù)可以發(fā)揮關(guān)鍵作用。這一過程在制造業(yè)中變得越來越重要。NVIDIA 能夠幫助訓(xùn)練 AMR 使用合成數(shù)據(jù)來檢測倉庫中的托盤千斤頂。托盤千斤頂通常用于抬起和運(yùn)輸重型托盤。在擁擠的倉庫中，AMR 進(jìn)行檢測并避免與托盤千斤頂相撞是很重要的。

從 0 到 1：

NVIDIA 助力輕松開發(fā)機(jī)器人

從 0 到 1 搭建機(jī)器人 | 使用 NVIDIA Isaac SimReplicator

和 TAO 套件進(jìn)行數(shù)據(jù)合成和訓(xùn)練

從零開始創(chuàng)建一個機(jī)器人并非及其困難，使用合適的工具，就能夠輕松達(dá)到事半功倍的效果。“從 0 到 1 搭建機(jī)器人” 系列文章第一篇先從數(shù)據(jù)標(biāo)記、模型訓(xùn)練開始，為大家介紹Isaac Sim Replicator和NVIDIA TAO 工具套件，前者用于生成合成數(shù)據(jù)，后者可對合成數(shù)據(jù)進(jìn)行訓(xùn)練，為機(jī)器人的仿真打下堅實(shí)的基礎(chǔ)。

進(jìn)行仿真開發(fā)與測試

系列文章第二篇將帶領(lǐng)大家繼續(xù)學(xué)習(xí)如何創(chuàng)建虛擬環(huán)境，進(jìn)行機(jī)器人的仿真開發(fā)與測試。對應(yīng)使用的工具是NVIDIA Isaac Sim，一款可擴(kuò)展的機(jī)器人仿真應(yīng)用程序和合成數(shù)據(jù)生成工具，驅(qū)動逼真的、物理準(zhǔn)確的虛擬環(huán)境。

加速 SDK 打造自主機(jī)器人

在此系列第三篇中我們帶領(lǐng)大家繼續(xù)學(xué)習(xí)如何打造自主機(jī)器人，登場的是NVIDIA Jetson和一系列硬件加速 SDK，旨在將 AI 緊密融入基于 NVIDIA Jetson 的自主機(jī)器人系統(tǒng)，推動機(jī)器人在感知、決策和交互方面邁向更智能化的未來。

作為此系列的最后一篇，我們將視野從之前的“單個”機(jī)器人移向“多個”機(jī)器人，為大家介紹如何利用 Isaac AMR，為機(jī)器人的開發(fā)提供最先進(jìn)的 AI 平臺和工作流程，便捷、高效地管理機(jī)器人編隊，以優(yōu)化生產(chǎn)力。

腦洞大開：

NVIDIA 解鎖機(jī)器人多樣可能

開發(fā)者使用 NVIDIA Jetson

讓 AI 驅(qū)動維修機(jī)器人

來自克羅地亞的 Goran Vuksic 在現(xiàn)實(shí)世界中制造出了《星球大戰(zhàn)》中的維修機(jī)器人（Pit Droid）。他使用NVIDIA Jetson Orin Nano開發(fā)者套件作為機(jī)器人的大腦，讓這個身高不到四英尺、眼睛只有一個簡單網(wǎng)絡(luò)攝像頭的機(jī)器人能夠識別物體，并將頭部轉(zhuǎn)向物體。

審核編輯：劉清