GTC23 | NVIDIA Studio 資訊：全新 AI 助力的藝術(shù)工具、功能更新、面向創(chuàng)作者 NVIDIA RTX 系統(tǒng)

編輯注：本文是我們每周發(fā)布的 NVIDIA Studio 創(chuàng)意加速系列欄目的一部分，該系列旨在介紹一些特邀藝術(shù)家、提供創(chuàng)意提示和技巧，并展示 NVIDIA Studio 技術(shù)如何改善創(chuàng)意工作流。我們還將深入探討全新 GeForce RTX 40 系列 GPU 的性能、技術(shù)和資源，以及它們將如何顯著加速內(nèi)容創(chuàng)作。

無論是塑造能展露情緒的逼真角色，還是將簡單的文本轉(zhuǎn)換成圖像，強大的 AI 技術(shù)正在徹底改變 3D 內(nèi)容創(chuàng)作。

NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛先生在 GTC 大會主題演講中宣布了一系列旨在簡化創(chuàng)作者工作流的改進(jìn)，包括將生成式 AI 與 Omniverse Audio2Face 應(yīng)用結(jié)合使用。

NVIDIA Omniverse 作為創(chuàng)建和處理元宇宙應(yīng)用的平臺，已通過更新的虛幻引擎連接器、開放測試版 Unity 連接器和新的 SimReady 3D 素材實現(xiàn)進(jìn)一步擴展。

全新 NVIDIA RTX GPU 采用 Ada Lovelace 架構(gòu)，可為新一代筆記本電腦和臺式電腦工作站提供強勁動力，從而滿足 AI、設(shè)計和工業(yè)元宇宙的需求。

3 月版 NVIDIA Studio 驅(qū)動增加了對熱門 RTX 視頻超分辨率功能的支持，該功能現(xiàn)已可用于 GeForce RTX 40 和 30 系列 GPU。

在“NVIDIA Studio 創(chuàng)意加速” 欄目中，Adobe Substance 3D 藝術(shù)和開發(fā)團隊將介紹他們使用 Omniverse USD Composer（舊稱 Create）合作創(chuàng)作動畫短片 End of Summer 的過程。

Omniverse 更新大放異彩

即使創(chuàng)作者缺乏豐富的專業(yè)技術(shù)，他們依然可以借助專業(yè)的生成式 AI 工具提高工作效率。相較于傳統(tǒng)資產(chǎn)開發(fā)，生成式 AI 只需少量時間和成本，即可將創(chuàng)意轉(zhuǎn)變?yōu)楝F(xiàn)實，創(chuàng)造高質(zhì)量、快速迭代的體驗。

AI 驅(qū)動的 Omniverse Audio2Face 應(yīng)用僅使用音頻文件即可生成逼真的面部動畫，可以取代以往乏味的手動創(chuàng)建過程，以提高 3D 藝術(shù)家為配角制作動畫的效率。

此應(yīng)用的最新版本在質(zhì)量、可用性和性能方面實現(xiàn)了顯著升級，添加了新的 headless 模式和 REST API，使游戲開發(fā)者和其他創(chuàng)作者能夠在數(shù)據(jù)中心運行該應(yīng)用，并處理來自多個用戶的大量音頻文件。

NVIDIA 為 Unity 工作流開發(fā)的全新 Omniverse 連接器已進(jìn)入公測階段。創(chuàng)作者可以直接將 Unity 場景添加到 Omniverse Nucleus 服務(wù)器上，而且可以使用 DeepSearch 工具、縮略圖、書簽等平臺功能。單向?qū)崟r同步工作流可實現(xiàn)實時更新。

虛幻引擎連接器已推出最新版本，Omniverse 用戶現(xiàn)在可以使用其中的 USD 導(dǎo)入功能導(dǎo)入骨架網(wǎng)格blendshape，并使用 Python USD 綁定在 Omniverse Nucleus 上訪問場景（Stage）。此版本還優(yōu)化了導(dǎo)入、導(dǎo)出和實時工作流，并更新了軟件開發(fā)套件。

此外，創(chuàng)作者還可使用超過 1000 種全新 SimReady 素材。SimReady 素材按照物體在現(xiàn)實世界的比例構(gòu)建，擁有精確的質(zhì)量、物理材質(zhì)和重心，可以在 Omniverse PhysX 引擎中使用，以實現(xiàn)非常逼真的視覺效果和準(zhǔn)確無誤的運動軌跡。

三月版 Studio 驅(qū)動帶來炫目超分辨率

盡管硬件的處理性能足夠，但是 NVIDIA RTX GPU 用戶觀看的在線視頻中，超過 90% 為 1080p 或更低的分辨率，并且放大后的畫質(zhì)還會進(jìn)一步降低。

解決方案：RTX 視頻超分辨率。此新功能利用 AI 提高通過 Google Chrome 和 Microsoft Edge 瀏覽器串流的任何視頻的質(zhì)量，現(xiàn)已在 GeForce RTX 30 和 40 系列 GPU 上可用。

單擊圖像，查看雙三次上采樣（左）和 RTX 視頻超分辨率之間的區(qū)別。

該功能提高了視頻的銳度和清晰度，讓用戶即使在高分辨率顯示器上，也能夠以原生分辨率觀看在線內(nèi)容。

RTX 視頻超分辨率功能現(xiàn)已在 3 月版 Studio 驅(qū)動上推出，即日起即可下載。

全新 NVIDIA RTX GPU 助力專業(yè)創(chuàng)作者

六個基于 Ada Lovelace 架構(gòu)的全新專業(yè)級 NVIDIA RTX GPU 使創(chuàng)作者能夠使用筆記本電腦和臺式電腦滿足超復(fù)雜工作負(fù)載的需求。

NVIDIA RTX 5000、RTX 4000、RTX 3500、RTX 3000 和 RTX 2000 Ada Generation 筆記本電腦 GPU 的性能相較上一代至高可達(dá) 2 倍。NVIDIA RTX 4000 小型 (SFF) Ada Generation 臺式電腦 GPU 配備全新 RT Core、Tensor Core 和 CUDA Core，顯存至高可達(dá) 20GB。

這些 GPU 搭載最新的 NVIDIA Max-Q 和 RTX 技術(shù)，并由 NVIDIA Studio 平臺提供支持，在超過 110 個創(chuàng)意應(yīng)用中實現(xiàn)了 RTX 優(yōu)化。此外，NVIDIA RTX GPU 借助 NVIDIA RTX Enterprise 驅(qū)動實現(xiàn)更高級別的穩(wěn)定性和性能，并可助力 Omniverse、Canvas 和 Broadcast 等由 AI 提供支持的 NVIDIA 獨家工具。

使用這些筆記本電腦 GPU 的專業(yè)人士可以使用先進(jìn)技術(shù)，例如：至高可將幀率提升至前一代 4 倍的 DLSS 3，以及用于實時協(xié)作和仿真的 Omniverse Enterprise。

搭載 NVIDIA RTX GPU 的全新筆記本電腦和臺式電腦工作站將于本月起開始推出。

GTC 大會創(chuàng)意齊放

觀看 GTC 大會中更多鼓舞人心的內(nèi)容、專家主導(dǎo)的會議和不容錯過的主題演講，加速您今后的創(chuàng)意工作。

實時觀看或點播觀看關(guān)于 Omniverse、AI 和 3D 工作流的會議：

• OpenAI 創(chuàng)始人 Ilya Sutskever 和黃仁勛先生的爐邊談話：今日 AI 與未來愿景 [S52092]

• 生成式 AI 如何轉(zhuǎn)變創(chuàng)意工作流：Adobe 的 Scott Belsky 和 NVIDIA 的 Bryan Catanzaro 的爐邊談話 [S52090]

• 揭秘生成式 AI [S52089]

• AI 輔助 3D：生成式 AI 將如何簡化虛擬世界構(gòu)建 [S52163]

• 使用 AI 虛擬形象自定義構(gòu)建世界：The Little Martians 科幻項目 [S51360]

• AI 助力、實時、無標(biāo)記：動作捕捉的新時代 [S51845]

• 3D 與超越 3D：3D 藝術(shù)家如何在元宇宙中創(chuàng)造副業(yè) [SE52117]

• NVIDIA Omniverse 用戶組 [SE52047]

• 加速虛擬制作工作流，制作廣受好評的科幻短片 [S51496]

搜索 GTC 大會會議目錄并查看“媒體和娛樂”和 “Omniverse” 主題，以了解更多以創(chuàng)作者為中心的會議。

父女回家之旅

Adobe 的 Substance 3D 藝術(shù)和開發(fā)團隊創(chuàng)作的動畫短片 End of Summer 成功激發(fā)觀眾的強烈情感，這便是該團隊創(chuàng)作的初心。

“我們想要通過藝術(shù)作品來喚起觀眾的情感，讓他們感受到故事就在眼前發(fā)生，并讓他們對故事有自己的體驗?！?團隊成員 Wes McDermott 說道。

End of Summer 設(shè)計板。

End of Summer 是對 Laika 等定格動畫工作室的致敬，起初是內(nèi)部的 Adobe Substance 3D 項目，旨在實現(xiàn)兩個目標(biāo)。

首先，通過讓一批新人藝術(shù)家投身創(chuàng)意工作，鼓勵他們作為一個團隊協(xié)同工作。其次，測試這些藝術(shù)家的工作流功能集，以了解它們在 USD (Universal Scene Description) 框架方面的潛力。

End of Summer 的早期概念版本。

該小組將創(chuàng)建素材的任務(wù)劃分到多種最熱門 3D 應(yīng)用中來完成，包括 Adobe Substance 3D Modeler、Autodesk 3ds Max、Autodesk Maya、Blender 和 Maxon 的 Cinema 4D。他們的 GeForce RTX GPU 在視窗中解鎖了 AI 降噪功能，以實現(xiàn)快速的交互式渲染和 GPU 加速濾鏡，從而加速和簡化材質(zhì)創(chuàng)建。

“我們很快就發(fā)現(xiàn)了 USD 的強大之處，它不僅是一種導(dǎo)出格式，也是一種構(gòu)建素材的方法?！?McDermott 說道，“USD 使團隊中的藝術(shù)家能夠使用他們最熟悉的任何 3D 應(yīng)用?！?/p>

Adobe 團隊主要使用 Substance 3D 素材庫的材質(zhì)、模型和燈光來創(chuàng)建工作室環(huán)境。所有紋理均在 Substance 3D Painter 中應(yīng)用，其中 RTX 加速的光線和環(huán)境光遮蔽烘焙片刻內(nèi)即可完成素材優(yōu)化。

然后，團隊將所有模型導(dǎo)入到 Omniverse USD Composer（舊稱 Create）中，所有人同時在其中優(yōu)化和組裝素材。

“當(dāng)時也是在疫情期間，我們都被隔離在家中。”McDermott 說道，“這個項目讓我們可以進(jìn)行團隊協(xié)作，有助于我們加強溝通并激發(fā)創(chuàng)造力?！?/p>

“在布置和設(shè)置場景布局以及了解 USD 工作流和協(xié)作方面，NVIDIA Omniverse 是一款出色的工具。我們使用繪畫和 NVIDIA PhysX 碰撞工具來放置素材。”— Wes McDermott

在 Omniverse USD Composer 中加速場景合成，并實時實現(xiàn) 3D 場景的組裝、仿真和渲染。

最后，藝術(shù)家們將場景導(dǎo)入至虛幻引擎，以作為添加光照和渲染所用的場景 （Stage）。

在虛幻引擎中進(jìn)行最終場景編輯。

McDermott 強調(diào)了硬件在團隊工作流中的重要性。他說道：“Substance Painter 中的烘焙器采用 GPU 加速，并且從 NVIDIA RTX GPU 中受益。此外，我們也利用虛幻引擎和實時渲染完成大量工作。”

如需了解關(guān)于此工作流的更多信息，請觀看 GTC 大會會議：3D 藝術(shù)走向多人模式：Adobe Substance 團隊利用 Omniverse 完成 End of Summer 的幕后故事。

Adobe Substance 3D 團隊負(fù)責(zé)人兼藝術(shù)家 Wes McDermott。

掃描海報二維碼，或點擊“閱讀原文”，即可觀看 NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛 GTC23 主題演講重播！