使用 NVIDIA Omniverse輕松創(chuàng)建可擴(kuò)展的虛擬形象

介紹使用 NVIDIA Omniverse 3D 模擬和協(xié)作平臺(tái)推動(dòng)藝術(shù)創(chuàng)作或設(shè)計(jì)流程的個(gè)人創(chuàng)作者和開(kāi)發(fā)者。

該 NVIDIA 初創(chuàng)加速計(jì)劃成員構(gòu)建的 Omniverse 擴(kuò)展程序能夠通過(guò)移動(dòng)掃描實(shí)時(shí)創(chuàng)建逼真的個(gè)性化虛擬形象。

想象一個(gè)場(chǎng)景：您拍了一張自拍，幾秒鐘后這張照片就變成了一個(gè)會(huì)動(dòng)、會(huì)說(shuō)的個(gè)性化的 3D 虛擬形象。

利用 NVIDIA Omniverse 3D 設(shè)計(jì)協(xié)作和模擬平臺(tái)的一項(xiàng)全新擴(kuò)展程序就可以實(shí)現(xiàn)該場(chǎng)景。

該擴(kuò)展程序由軟件初創(chuàng)企業(yè) in3D 的開(kāi)發(fā)人員創(chuàng)建，支持人們使用智能手機(jī)將個(gè)人的 3D 虛擬形象實(shí)時(shí)導(dǎo)入虛擬環(huán)境。Omniverse 擴(kuò)展程序是允許所有人創(chuàng)建和擴(kuò)展 Omniverse 應(yīng)用功能的核心構(gòu)件。

目前 in3D 應(yīng)用可以將人轉(zhuǎn)換成數(shù)字形式并導(dǎo)入 Omniverse 平臺(tái)。創(chuàng)作者可以利用該應(yīng)用構(gòu)建引人入勝的虛擬世界并讓虛擬形象來(lái)扮演故事中的英雄、演員或觀眾。該應(yīng)用可以在任何帶有攝像頭的手機(jī)上使用，并且能夠根據(jù)自拍再現(xiàn)用戶(hù)的物理形態(tài)和肌膚紋理。

這些虛擬形象甚至還能被導(dǎo)入具有動(dòng)畫(huà)和個(gè)性化設(shè)計(jì)的 3D 世界。

in3D 是 NVIDIA 初創(chuàng)加速計(jì)劃成員，該計(jì)劃是一項(xiàng)旨在培養(yǎng)尖端初創(chuàng)企業(yè)的全球免費(fèi)計(jì)劃。

輕松創(chuàng)建可擴(kuò)展的虛擬形象

過(guò)去創(chuàng)建一個(gè)逼真的 3D 虛擬形象需要花費(fèi)數(shù)月的時(shí)間以及高達(dá)數(shù)萬(wàn)美元的成本。攝影測(cè)量法是一種能根據(jù)圖像創(chuàng)建人類(lèi) 3D 模型的標(biāo)準(zhǔn)方法，該方法需要利用數(shù)字工作室完成，構(gòu)建成本極高，且虛擬形象缺乏可擴(kuò)展性。

in3D 的 3D 虛擬形象創(chuàng)建流程簡(jiǎn)單且可擴(kuò)展。該應(yīng)用通過(guò)移動(dòng)掃描來(lái)捕捉一個(gè)人的幾何形狀、紋理、深度以及各種矢量，并利用這些信息復(fù)刻栩栩如生的細(xì)節(jié)，創(chuàng)造虛擬形象的預(yù)測(cè)動(dòng)畫(huà)。

in3D 的總部位于以色列特拉維夫。該公司首席執(zhí)行官 Dmitry Ulyanov 表示，該應(yīng)用能夠以厘米級(jí)的精度捕捉微小細(xì)節(jié)并自動(dòng)修復(fù)光照效果，以便能從一張自拍照片中獲得精確的頭部幾何形狀并以此預(yù)估用戶(hù)的準(zhǔn)確體形。

Ulyanov 表示，創(chuàng)作者在構(gòu)建 3D 世界時(shí)可以利用 in3D 軟件來(lái)節(jié)省時(shí)間等成本、提高生產(chǎn)力。

“手動(dòng)創(chuàng)建一個(gè)虛擬形象可能需要長(zhǎng)達(dá)數(shù)月的時(shí)間。但利用 in3D 的掃描應(yīng)用和軟件開(kāi)發(fā)工具包，用戶(hù)能在同樣的時(shí)間內(nèi)使用 GPU 和手機(jī)掃描并上傳 21000 個(gè)人來(lái)構(gòu)建虛擬形象?！?/p>

連接 Omniverse

Ulyanov 表示，通過(guò)將 in3D 的擴(kuò)展程序與 NVIDIA Omniverse Cloud Engine（ACE）結(jié)合使用，用戶(hù)可以輕松地自定義從 in3D 導(dǎo)入的虛擬形象，從而實(shí)現(xiàn)在虛擬世界實(shí)時(shí)、大規(guī)模的互動(dòng)，為虛擬形象的構(gòu)建帶來(lái)更多可能性。

in3D 使用一種開(kāi)源、可擴(kuò)展的文件格式——通用場(chǎng)景描述（USD）將其高保真虛擬形象無(wú)縫集成到 Omniverse。虛擬形象數(shù)據(jù)全都包含在 USD 文件中，用戶(hù)不需要復(fù)雜的著色器或嵌入物，只需要簡(jiǎn)單拖放就能將虛擬形象導(dǎo)入 Omniverse。

在將 USD 格式的虛擬形象導(dǎo)入 Omniverse 后，用戶(hù)就可以在 Omniverse Create 和 Audio2Face 等應(yīng)用中對(duì)虛擬形象進(jìn)行其他操作。Omniverse 有支持用戶(hù)整體內(nèi)容創(chuàng)作的完整工具集，比如制作虛擬形象的身體動(dòng)畫(huà)的重定向工具以及能夠制作虛擬形象的面部表情的 Audio2Face 等。

in3D 使用 Omniverse Kit 和 VSCode 計(jì)算機(jī)程序來(lái)完成構(gòu)建該 Omniverse 擴(kuò)展程序的開(kāi)發(fā)流程。Ulyanov 表示，VSCod 程序支持用戶(hù)在代碼中自行設(shè)置斷點(diǎn)，是一種簡(jiǎn)單、便捷、開(kāi)箱即用的 Omniverse 連接解決方案，in3D 正是通過(guò)該程序來(lái)與 Omniverse 連接。

Ulyanov 還表示：“將我們的 SDK 與其他 3D 開(kāi)發(fā)者的軟件整合在一起能夠帶來(lái)巨大的改變。通過(guò)上線(xiàn)我們的 Omniverse 擴(kuò)展程序，我們希望能夠擴(kuò)大使用我們虛擬形象應(yīng)用的開(kāi)發(fā)者人數(shù)。”

in3D 首席營(yíng)銷(xiāo)官 Sergei Sherman 表示：“我們現(xiàn)在已經(jīng)能夠上傳我們的 SDK 并將它與 3D 開(kāi)發(fā)者使用的所有工具相連，in3D 已成為能在所有 3D 開(kāi)發(fā)環(huán)境中部署的解決方案，在這么短的時(shí)間內(nèi)僅依靠我們自己的資源是無(wú)法實(shí)現(xiàn)的?！?/p>

加入創(chuàng)作者行列

全世界的創(chuàng)作者和開(kāi)發(fā)者可以免費(fèi)下載 NVIDIA Omniverse，企業(yè)團(tuán)隊(duì)可以使用該平臺(tái)完成他們的 3D 項(xiàng)目。

注冊(cè)并參與將于 9 月 19 日至 22 日舉行的 AI 和元宇宙時(shí)代的開(kāi)發(fā)者大會(huì)——NVIDIA GTC 大會(huì)，了解如何運(yùn)用 Omniverse 連接和創(chuàng)建虛擬世界。大會(huì)期間還將舉辦數(shù)十場(chǎng)分會(huì)和特別活動(dòng)。所有人都可以免費(fèi)注冊(cè) GTC 大會(huì)。

開(kāi)發(fā)者可以在北京時(shí)間 9 月 10 日星期六早晨 6 點(diǎn)之前使用 Omniverse Code 創(chuàng)建 Omniverse 擴(kuò)展程序來(lái)參加首屆#ExtendOmniverse 競(jìng)賽。參賽者將有機(jī)會(huì)贏得 NVIDIA RTX GPU。獲獎(jiǎng)?wù)呙麊螌⒃?GTC 上的 NVIDIA Omniverse 用戶(hù)組活動(dòng)中公布。

Omniverse 資源中心為開(kāi)發(fā)者提供文檔和教程，這些文檔和教程詳細(xì)介紹了 Ulyanov 等開(kāi)發(fā)者如何為該平臺(tái)構(gòu)建基于 USD 的自定義應(yīng)用和擴(kuò)展程序。