0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

NVIDIA工具和技術(shù)為混合式AI工作流提供支持

NVIDIA英偉達(dá) ? 來(lái)源:NVIDIA英偉達(dá) ? 2024-09-09 09:25 ? 次閱讀

生成式 AI 為 Windows 應(yīng)用和游戲帶來(lái)了各種新功能。它為無(wú)腳本、動(dòng)態(tài)的 NPC 提供動(dòng)力,助力創(chuàng)作者生成新穎的藝術(shù)作品,并幫助游戲玩家將幀率提升高達(dá) 4 倍。但這些不過(guò)是冰山一角。

隨著生成式 AI 的功能和使用場(chǎng)景不斷增加,相關(guān)計(jì)算需求也水漲船高。

混合式 AI 將 NVIDIA RTX 的端側(cè) AI 加速與云端的可擴(kuò)展 GPU 相結(jié)合,可有效且高效地滿足 AI 工作負(fù)載的需求。

混合式 AI,魚與熊掌兼得

隨著 AI 的普及,應(yīng)用開發(fā)者正在尋找各種可行的部署方式:在 RTX GPU 上本地運(yùn)行的 AI 兼具高性能和低延遲,即使在離線情況下也可隨時(shí)使用。另一方面,在云端運(yùn)行的 AI 能夠運(yùn)行規(guī)模更大的模型并且可以跨多個(gè) GPU 進(jìn)行擴(kuò)展,還可以同時(shí)為多個(gè)用戶提供服務(wù)。在許多情況下,一個(gè)應(yīng)用程序會(huì)同時(shí)使用這兩種方式部署的服務(wù)。

混合式 AI 組合與協(xié)調(diào)本地 PC 和工作站的算力與云的擴(kuò)展能力。它可以根據(jù)特定使用場(chǎng)景、成本和性能要求靈活優(yōu)化 AI 工作負(fù)載,幫助開發(fā)者確保 AI 任務(wù)在其特定應(yīng)用場(chǎng)景下最合適的設(shè)備上運(yùn)行。

無(wú)論 AI 是在本地還是在云端運(yùn)行,它都可以通過(guò) NVIDIA GPU 和 NVIDIA 的 AI 技術(shù)棧(包括 TensorRT 和 TensorRT-LLM)進(jìn)行加速。這意味著我們可以減少無(wú)謂的等待時(shí)間,并可為用戶提供更多的先進(jìn) AI 功能。

這一系列 NVIDIA 工具和技術(shù)可為創(chuàng)作者、游戲玩家和開發(fā)者的混合式 AI 工作流提供支持。

理想的云端應(yīng)用由 RTX 實(shí)現(xiàn)

生成式 AI 已經(jīng)證明它能夠?yàn)樗囆g(shù)家的創(chuàng)作提供靈感,加速設(shè)計(jì),啟發(fā)構(gòu)思。此類解決方案包括 iStock 推出的云端生成式 AI,這是一項(xiàng)由 NVIDIA Edify 驅(qū)動(dòng)的生成式攝影圖片服務(wù),專為藝術(shù)家打造。另一方面,藝術(shù)家也為該生成式 AI 的模型訓(xùn)練貢獻(xiàn)了各種授權(quán)內(nèi)容,而做出貢獻(xiàn)的藝術(shù)家也會(huì)因此獲得報(bào)酬。

iStock 的生成式 AI 不僅可以用于圖像生成,還可以為藝術(shù)家提供豐富的工具,以便他們探索各種風(fēng)格和變化,修改圖像的某個(gè)部分或擴(kuò)展畫布。借助這些工具,藝術(shù)家可以快速完成多次概念設(shè)計(jì),并將創(chuàng)意轉(zhuǎn)變?yōu)楝F(xiàn)實(shí)方案。

創(chuàng)意概念準(zhǔn)備完成后,藝術(shù)家就可以將其轉(zhuǎn)移到本地設(shè)備上。RTX 助力的 PC 和工作站可在超過(guò) 125 款熱門創(chuàng)意應(yīng)用中為藝術(shù)家提供 AI 加速,幫助他們最大化實(shí)現(xiàn)自己的創(chuàng)意愿景:無(wú)論是使用本地 AI 工具在 Photoshop 中創(chuàng)建令人驚嘆的藝術(shù)作品,在 DaVinci Resolve 中使用視差效果為圖像制作動(dòng)畫,還是使用光線追蹤加速在 Blender 中借助參考圖像構(gòu)建 3D 場(chǎng)景,亦或是使用 Optix 進(jìn)行 AI 降噪。

云端 ACE 讓 NPC 栩栩如生

混合式 AI 還通過(guò) NVIDIA ACE 實(shí)現(xiàn)了交互式 PC 游戲的新高度,讓游戲開發(fā)者和數(shù)字創(chuàng)作者能夠?qū)⑾冗M(jìn)的生成式 AI 模型集成到 RTX AI PC 上的數(shù)字虛擬形象中。

NVIDIA ACE NIM 由 AI 神經(jīng)網(wǎng)絡(luò)提供支持,讓開發(fā)人員和設(shè)計(jì)師創(chuàng)建能夠理解并響應(yīng)人類玩家文本和語(yǔ)音的非玩家角色(NPC)。NVIDIA ACE NIM 可利用 AI 模型(包括語(yǔ)音轉(zhuǎn)文本模型)來(lái)處理人類語(yǔ)音輸入,以便 NPC 實(shí)時(shí)生成回應(yīng)。

在這些新技術(shù)的加持下,NPC 的回應(yīng)將不再受限于預(yù)定義的腳本。ACE NIM 既可以在 RTX GPU 設(shè)備上本地運(yùn)行,也可以部署在云端,基于各種計(jì)算選項(xiàng)實(shí)現(xiàn)動(dòng)態(tài)、逼真的交互。

可靈活部署的混合式開發(fā)者工具

混合式 AI 還可以幫助開發(fā)者構(gòu)建和調(diào)整新的 AI 模型。NVIDIA AI Workbench 可幫助開發(fā)者在 RTX GPU 上快速創(chuàng)建、測(cè)試和定制預(yù)訓(xùn)練生成式 AI 模型和 LLM。數(shù)據(jù)科學(xué)家和開發(fā)者可通過(guò) NVIDIA AI Workbench 簡(jiǎn)化對(duì) Hugging Face、GitHub 和 NVIDIA NGC 等熱門倉(cāng)庫(kù)的訪問(wèn),并且能夠通過(guò)簡(jiǎn)化的用戶界面輕松地復(fù)現(xiàn)、協(xié)作和遷移項(xiàng)目。

當(dāng)有額外的性能需求時(shí),項(xiàng)目還可輕松擴(kuò)展至數(shù)據(jù)中心(無(wú)論是公有云還是 NVIDIA DGX Cloud),之后部署到 PC 或工作站上的本地 RTX 系統(tǒng)進(jìn)行推理和輕量定制。數(shù)據(jù)科學(xué)家和開發(fā)者可以利用預(yù)先構(gòu)建的 Workbench 項(xiàng)目,使用檢索增強(qiáng)生成(RAG)與文檔交互,使用微調(diào)功能自定義 LLM,通過(guò)流暢的 CPU 到 GPU 轉(zhuǎn)換加速數(shù)據(jù)科學(xué)工作負(fù)載等等。

混合式 RAG Workbench 項(xiàng)目提供可自定義的 RAG 應(yīng)用,以便開發(fā)者自主運(yùn)行和調(diào)整。他們可以在本地對(duì)文檔進(jìn)行向量化,并在本地 RTX 系統(tǒng)或托管在 NVIDIA API Catalog 上的接入點(diǎn)運(yùn)行推理,或使用 NVIDIA NIM 微服務(wù)。開發(fā)者可以調(diào)整混合式 RAG Workbench 項(xiàng)目,以便使用各種模型、接入點(diǎn)和容器。他們還可以通過(guò)該項(xiàng)目量化要在所選 GPU 上運(yùn)行的模型。

NVIDIA GPU 可在 NVIDIA GeForce RTX PC 和 RTX 工作站本地以及云端為各種出色的 AI 解決方案提供支持。借助不斷發(fā)展的混合式 AI 工作流,創(chuàng)作者、游戲玩家和開發(fā)者可以充分發(fā)揮本地和云端的強(qiáng)大能力。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • NVIDIA
    +關(guān)注

    關(guān)注

    14

    文章

    4989

    瀏覽量

    103074
  • 云計(jì)算
    +關(guān)注

    關(guān)注

    39

    文章

    7823

    瀏覽量

    137417
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    30898

    瀏覽量

    269130

原文標(biāo)題:解碼 NVIDIA RTX AI PC 和工作站如何協(xié)同云計(jì)算來(lái)強(qiáng)效助力生成式 AI

文章出處:【微信號(hào):NVIDIA_China,微信公眾號(hào):NVIDIA英偉達(dá)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    三相混合式步進(jìn)電機(jī)驅(qū)動(dòng)電源

    電子發(fā)燒友網(wǎng)站提供《三相混合式步進(jìn)電機(jī)驅(qū)動(dòng)電源.pdf》資料免費(fèi)下載
    發(fā)表于 11-20 16:54 ?1次下載

    NVIDIA發(fā)布全新AI和仿真工具以及工作流

    NVIDIA 在本周于德國(guó)慕尼黑舉行的機(jī)器人學(xué)習(xí)大會(huì)(CoRL)上發(fā)布了全新 AI 和仿真工具以及工作流。機(jī)器人開發(fā)者可以使用這些工具
    的頭像 發(fā)表于 11-09 11:52 ?276次閱讀

    Molex推出的混合式 FTTA-PTTA 光纜是什么?-赫聯(lián)電子

    能減少安裝流程步驟,還可以使發(fā)射塔的空間最大化。   Molex(莫仕) 的混合式光纜組件提供多種加固的功能,包括密封式分支端、紫外線處理光纜以及鎧裝混合光纜,可以耐受苛刻的天氣條件并防止?jié)撛诘母蓴_
    發(fā)表于 11-04 11:28

    全新NVIDIA AI工作流可檢測(cè)信用卡欺詐交易

    工作流由 AWS 上 的 NVIDIA AI 平臺(tái)驅(qū)動(dòng),可幫助金融服務(wù)機(jī)構(gòu)節(jié)省資金并降低風(fēng)險(xiǎn)。
    的頭像 發(fā)表于 10-30 11:41 ?469次閱讀

    混合式步進(jìn)電機(jī)的結(jié)構(gòu)和驅(qū)動(dòng)是什么?混合式步進(jìn)電機(jī)的主要優(yōu)勢(shì)是什么?

    混合式步進(jìn)電機(jī)是一種將永磁式和反應(yīng)式步進(jìn)電機(jī)的優(yōu)點(diǎn)結(jié)合起來(lái)的電機(jī)類型。它具有較高的輸出力矩和較高的步距精度,因此在許多應(yīng)用中得到了廣泛的應(yīng)用。 一、混合式步進(jìn)電機(jī)的結(jié)構(gòu) 混合式步進(jìn)電機(jī)主要由以下幾個(gè)
    的頭像 發(fā)表于 10-22 13:53 ?364次閱讀

    混合式步進(jìn)電機(jī)的主要應(yīng)用原理是什么?

    市場(chǎng)上占據(jù)了重要地位。 2. 混合式步進(jìn)電機(jī)的結(jié)構(gòu) 混合式步進(jìn)電機(jī)的結(jié)構(gòu)主要包括定子和轉(zhuǎn)子兩部分。定子由多個(gè)繞組組成,這些繞組按照特定的方式排列,以產(chǎn)生旋轉(zhuǎn)磁場(chǎng)。轉(zhuǎn)子則由永磁材料和軟磁材料組成,永磁材料提供了磁場(chǎng)的初始
    的頭像 發(fā)表于 10-22 13:52 ?322次閱讀

    什么是混合式步進(jìn)電機(jī)?舉例分析

    在工業(yè)自動(dòng)化和精密控制領(lǐng)域,步進(jìn)電機(jī)因其精確的步進(jìn)控制和易于實(shí)現(xiàn)的開環(huán)控制而廣受歡迎。步進(jìn)電機(jī)主要分為兩大類:永磁式步進(jìn)電機(jī)和反應(yīng)式步進(jìn)電機(jī)。然而,隨著技術(shù)的發(fā)展,一種新型的步進(jìn)電機(jī)——混合式步進(jìn)
    的頭像 發(fā)表于 10-22 13:48 ?319次閱讀

    NVIDIA Studio技術(shù)如何改善創(chuàng)意工作流

    Wondershare Filmora 是一個(gè)具有多種 AI 工具的視頻編輯應(yīng)用?,F(xiàn)在,該應(yīng)用與 Blackmagic Design 的DaVinci Resolve、Cyberlink PowerDirector 等編輯軟件一樣,支持
    的頭像 發(fā)表于 07-26 11:20 ?608次閱讀

    什么是混合式步進(jìn)電機(jī)?它有哪些特點(diǎn)?

    展現(xiàn)出強(qiáng)大的應(yīng)用價(jià)值。本文將對(duì)混合式步進(jìn)電機(jī)的定義、特點(diǎn)、工作原理以及應(yīng)用進(jìn)行詳細(xì)介紹,以期讀者提供全面而深入的了解。
    的頭像 發(fā)表于 06-06 15:54 ?1096次閱讀

    MathWorks與NVIDIA攜手革新醫(yī)療技術(shù)工作流

    在醫(yī)療科技領(lǐng)域,軟件定義工作流正迎來(lái)新的突破。全球知名的數(shù)學(xué)計(jì)算軟件巨頭MathWorks與圖形處理器領(lǐng)導(dǎo)者NVIDIA近日宣布達(dá)成深度合作,將MATLAB?軟件成功集成至NVIDIA的Holoscan平臺(tái)。
    的頭像 發(fā)表于 05-11 10:17 ?378次閱讀

    全新NVIDIA RTX A400和A1000 GPU全面加強(qiáng)AI設(shè)計(jì)與生產(chǎn)力工作流

    兩款 NVIDIA Ampere 架構(gòu) GPU 工作站帶來(lái)實(shí)時(shí)光線追蹤功能和生成式 AI 工具支持
    的頭像 發(fā)表于 04-18 10:29 ?533次閱讀

    NVIDIA發(fā)布Omniverse Cloud API,眾多工業(yè)數(shù)字孿生軟件工具提供助力

    Omniverse Cloud API 使開發(fā)者能夠?qū)?Omniverse 技術(shù)集成到其設(shè)計(jì)與仿真工具工作流中。 ? 美國(guó)加利福尼亞州圣何塞 —— GTC —— 太平洋時(shí)間 2024 年 3 月 18 日
    發(fā)表于 03-19 09:40 ?491次閱讀
    <b class='flag-5'>NVIDIA</b>發(fā)布Omniverse Cloud API,<b class='flag-5'>為</b>眾多工業(yè)數(shù)字孿生軟件<b class='flag-5'>工具</b><b class='flag-5'>提供</b>助力

    利用OpenVINO實(shí)現(xiàn)混合式AI部署:邁向無(wú)所不在的人工智能

    隨著人工智能技術(shù)的飛速發(fā)展,AI的應(yīng)用已經(jīng)滲透到日常生活的各個(gè)方面。為了更有效地利用AI技術(shù),混合式AI
    的頭像 發(fā)表于 03-18 15:10 ?692次閱讀
    利用OpenVINO實(shí)現(xiàn)<b class='flag-5'>混合式</b><b class='flag-5'>AI</b>部署:邁向無(wú)所不在的人工智能

    混合式 FTTA-PTTA 光纜優(yōu)勢(shì)有哪些?-赫聯(lián)電子

    能減少安裝流程步驟,還可以使發(fā)射塔的空間最大化。   Molex(莫仕) 的混合式光纜組件提供多種加固的功能,包括密封式分支端、紫外線處理光纜以及鎧裝混合光纜,可以耐受苛刻的天氣條件并防止?jié)撛诘母蓴_
    發(fā)表于 03-06 16:55

    混合式步進(jìn)電機(jī)的結(jié)構(gòu)圖

    混合式步進(jìn)電機(jī)(Hybrid Stepper Motor)結(jié)合了永磁式和變極式步進(jìn)電機(jī)的特點(diǎn),以實(shí)現(xiàn)高性能和高可靠性。 合式步進(jìn)電機(jī)融合了可變磁阻(VR)型步進(jìn)電機(jī)和永磁(PM)型步進(jìn)電機(jī)的優(yōu)勢(shì),以
    的頭像 發(fā)表于 02-06 10:01 ?954次閱讀
    <b class='flag-5'>混合式</b>步進(jìn)電機(jī)的結(jié)構(gòu)圖