0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
电子发烧友
开通电子发烧友VIP会员 尊享10大特权
海量资料免费下载
精品直播免费看
优质内容免费畅学
课程9折专享价
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

NVIDIA全新AI以太網(wǎng)絡(luò)平臺(tái)大幅提升AI云性能

麗臺(tái)科技 ? 來源:NVIDIA英偉達(dá)企業(yè)解決方案 ? 2023-11-27 14:31 ? 次閱讀

NVIDIA 近日宣布,三家頭部系統(tǒng)制造商將率先在其服務(wù)器產(chǎn)品陣容中集成專為 AI 量身定制的 NVIDIA Spectrum-X 以太網(wǎng)絡(luò)技術(shù),幫助企業(yè)客戶加速生成式 AI 業(yè)務(wù)。

Spectrum-X 專為生成式 AI 量身定制,為企業(yè)提供了一種全新的以太網(wǎng)絡(luò),相較傳統(tǒng)以太網(wǎng)方案,其 AI 通信網(wǎng)絡(luò)性能提高了 1.6 倍。

這三家頭部系統(tǒng)制造商的新系統(tǒng),整合了 Spectrum-X 與 NVIDIA Tensor Core GPU、NVIDIA AI Enterprise 軟件和 NVIDIA AI Workbench 軟件,為企業(yè)通過生成式 AI 來實(shí)現(xiàn)業(yè)務(wù)轉(zhuǎn)型奠定了基礎(chǔ)。

NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛表示:“生成式 AI 和加速計(jì)算正在推動(dòng)新一代的業(yè)務(wù)轉(zhuǎn)型,企業(yè)需要升級(jí)其數(shù)據(jù)中心來滿足新型業(yè)務(wù)的需求。加速網(wǎng)絡(luò)就是 NVIDIA 的頭部服務(wù)器制造商合作伙伴推出新一代系統(tǒng)的催化劑,加快他們邁向生成式 AI 新時(shí)代?!?/p>

專門用于加速 AI 的網(wǎng)絡(luò)

為實(shí)現(xiàn) AI 業(yè)務(wù)的出色效率,Spectrum-X 集性能優(yōu)異的 Spectrum-4 以太網(wǎng)交換機(jī)、NVIDIA BlueField-3 SuperNIC(一款可以大幅提升超大規(guī)模 AI 業(yè)務(wù)性能的新型網(wǎng)絡(luò)加速器)以及多種加速軟件于一體。領(lǐng)先的基礎(chǔ)設(shè)施計(jì)算平臺(tái) —— NVIDIA BlueField-3 DPU 就屬于 Spectrum-X 的一部分。

Spectrum-4 是專門面向 AI 的 51Tb/sec 以太網(wǎng)交換機(jī),可在大規(guī)模、滿負(fù)荷的場景下提供較高的數(shù)據(jù)吞吐量,同時(shí)在 AI 云業(yè)務(wù)的多租戶場景下將網(wǎng)絡(luò)擁塞降低,其智能的、基于微調(diào)的路由技術(shù)可以保障網(wǎng)絡(luò)基礎(chǔ)設(shè)施的利用率。

BlueField-3 SuperNIC 專為網(wǎng)絡(luò)密集型的大規(guī)模并行計(jì)算而設(shè)計(jì),可在 GPU 服務(wù)器之間提供高達(dá) 400Gb/s 的 RDMA(RoCE - RDMA over Converged Ethernet)網(wǎng)絡(luò)連接,大幅提升了集群內(nèi)部基于東西網(wǎng)絡(luò)流量的 AI 訓(xùn)練和推理性能,還能實(shí)現(xiàn)多租戶數(shù)據(jù)中心環(huán)境的安全隔離,確保租戶業(yè)務(wù)的可預(yù)測(cè)性和性能隔離。BlueField-3 SuperNIC 基于低功耗、半高半長的 PCIe 規(guī)格設(shè)計(jì),是企業(yè)級(jí)服務(wù)器的理想選擇。

NVIDIA 加速軟件包括 Cumulus Linux、SONiC 和 NetQ 三者組成的性能優(yōu)異的 Spectrum-X 軟件開發(fā)套件,以及作為 BlueField 核心的 NVIDIA DOCA 軟件框架。

NVIDIA AI Enterprise 為安全、穩(wěn)定和已經(jīng)支持的生產(chǎn)級(jí) AI 業(yè)務(wù)提供了框架、預(yù)訓(xùn)練模型和開發(fā)工具。NVIDIA AI Workbench 使開發(fā)者能夠在 PC 或工作站上快速創(chuàng)建、測(cè)試和自定義預(yù)訓(xùn)練生成式 AI 模型,然后將其擴(kuò)展至幾乎任何數(shù)據(jù)中心或云。

搭載 Spectrum-X 的 NVIDIA 超級(jí)計(jì)算機(jī)

NVIDIA 自己的一臺(tái)超級(jí)計(jì)算機(jī)就在使用 Spectrum-X,這也是新一代 AI 系統(tǒng)的參考架構(gòu)。該超級(jí)計(jì)算機(jī)由 NVIDIA 與戴爾科技聯(lián)合開發(fā),使用了基于 8 卡 NVIDIA Hopper GPU 的 HGX 平臺(tái)和 BlueField-3 DPU 及 SuperNIC 的 Dell PowerEdge XE9680 服務(wù)器,并通過 Spectrum-4 交換機(jī)組成了集群系統(tǒng)。






審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 以太網(wǎng)
    +關(guān)注

    關(guān)注

    40

    文章

    5589

    瀏覽量

    174883
  • NVIDIA
    +關(guān)注

    關(guān)注

    14

    文章

    5247

    瀏覽量

    105805
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    4912

    瀏覽量

    130691
  • 交換機(jī)
    +關(guān)注

    關(guān)注

    21

    文章

    2725

    瀏覽量

    101410
  • RDMA
    +關(guān)注

    關(guān)注

    0

    文章

    82

    瀏覽量

    9208

原文標(biāo)題:NVIDIA 全新 AI 以太網(wǎng)絡(luò)平臺(tái)大幅提升 AI 云性能

文章出處:【微信號(hào):Leadtek,微信公眾號(hào):麗臺(tái)科技】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    首創(chuàng)開源架構(gòu),天璣AI開發(fā)套件讓端側(cè)AI模型接入得心應(yīng)手

    的端側(cè)部署,Token產(chǎn)生速度提升了40%,讓端側(cè)大模型擁有更高的計(jì)算效率和推理性能,使端側(cè)AI交互響應(yīng)更及時(shí),用戶體驗(yàn)更貼心。 聯(lián)發(fā)科還與vivo和全民K歌攜手,借助天璣AI人聲萃
    發(fā)表于 04-13 19:52

    適用于數(shù)據(jù)中心和AI時(shí)代的800G網(wǎng)絡(luò)

    數(shù)據(jù)中心依賴數(shù)千甚至上萬個(gè)GPU集群進(jìn)行高性能計(jì)算,對(duì)帶寬、延遲和數(shù)據(jù)交換效率提出極高要求。 AI:以生成式AI為核心的
    發(fā)表于 03-25 17:35

    英特爾以太網(wǎng)新品:高性能與能效并重,帶來多樣化選擇

    網(wǎng)絡(luò)適配器,以及英特爾以太網(wǎng)控制器E610和網(wǎng)絡(luò)適配器,旨在滿足企業(yè)、電信、、邊緣、科學(xué)計(jì)算(HPC)和AI等領(lǐng)域日益增長的需求。這些新
    的頭像 發(fā)表于 02-25 20:17 ?208次閱讀

    英特爾推出具備高性能和能效的以太網(wǎng)解決方案

    網(wǎng)絡(luò)適配器,以及英特爾以太網(wǎng)控制器E610和網(wǎng)絡(luò)適配器,旨在滿足企業(yè)、電信、、邊緣、科學(xué)計(jì)算(HPC)和AI等領(lǐng)域日益增長的需求。這些新
    發(fā)表于 02-25 11:17 ?194次閱讀
    英特爾推出具備高<b class='flag-5'>性能</b>和能效的<b class='flag-5'>以太網(wǎng)</b>解決方案

    AI智能平臺(tái)的優(yōu)勢(shì)

    當(dāng)今,AI智能平臺(tái),正以其獨(dú)特的優(yōu)勢(shì),引領(lǐng)著技術(shù)革新和業(yè)務(wù)轉(zhuǎn)型的新篇章。接下來,AI部落小編為大家分享AI智能
    的頭像 發(fā)表于 02-10 10:55 ?338次閱讀

    使用NVIDIA推理平臺(tái)提高AI推理性能

    NVIDIA推理平臺(tái)提高了 AI 推理性能,為零售、電信等行業(yè)節(jié)省了數(shù)百萬美元。
    的頭像 發(fā)表于 02-08 09:59 ?625次閱讀
    使用<b class='flag-5'>NVIDIA</b>推理<b class='flag-5'>平臺(tái)</b>提高<b class='flag-5'>AI</b>推理<b class='flag-5'>性能</b>

    NVIDIA發(fā)布全新NIM AI Guardrail微服務(wù)

    ,致力于提升生成式AI應(yīng)用的安全性、精準(zhǔn)度和可擴(kuò)展性。 這些微服務(wù)以NeMo Guardrails為核心進(jìn)行編排,充分利用了NVIDIA NeMo平臺(tái)
    的頭像 發(fā)表于 01-18 11:48 ?719次閱讀

    NVIDIA 發(fā)布保障代理式 AI 應(yīng)用安全的 NIM 微服務(wù)

    的“知識(shí)機(jī)器人”,提升全球數(shù)十億知識(shí)工作者的生產(chǎn)力。為了開發(fā) AI 智能體,企業(yè)需要解決信任、物理安全、網(wǎng)絡(luò)安全以及合規(guī)性等關(guān)鍵問題。 全新 NVI
    發(fā)表于 01-17 16:29 ?142次閱讀

    以太網(wǎng)速率對(duì)網(wǎng)絡(luò)性能的影響

    以太網(wǎng)作為最廣泛使用的局域網(wǎng)技術(shù)之一,其速率的提高對(duì)網(wǎng)絡(luò)性能有著直接的影響。從最初的10Mbps發(fā)展到今天的100Gbps甚至更高,以太網(wǎng)速率的提升
    的頭像 發(fā)表于 11-08 09:11 ?1084次閱讀

    NVIDIA SuperNIC推進(jìn)現(xiàn)代AI基礎(chǔ)設(shè)施發(fā)展

    在生成式 AI 時(shí)代,加速網(wǎng)絡(luò)對(duì)于為大規(guī)模分布式 AI 工作負(fù)載構(gòu)建高性能計(jì)算平臺(tái)至關(guān)重要。NVIDIA
    的頭像 發(fā)表于 11-06 13:59 ?659次閱讀

    使用全新NVIDIA AI Blueprint開發(fā)視覺AI智能體

    為提高生產(chǎn)力、優(yōu)化流程和創(chuàng)造更加安全的空間,埃森哲、戴爾科技和聯(lián)想等公司正在使用全新 NVIDIA AI Blueprint 開發(fā)視覺 AI 智能體。
    的頭像 發(fā)表于 11-06 13:58 ?918次閱讀

    NVIDIA助力xAI打造全球最大AI超級(jí)計(jì)算機(jī)

    以太網(wǎng)網(wǎng)絡(luò)平臺(tái),該平臺(tái)是專為多租戶、超大規(guī)模的 AI 工廠提供卓越性能而設(shè)計(jì)的 RDMA(Remote Direct Memory Acc
    的頭像 發(fā)表于 10-30 11:38 ?747次閱讀

    NVIDIA 以太網(wǎng)加速 xAI 構(gòu)建的全球最大 AI 超級(jí)計(jì)算機(jī)

    市的 Colossus 超級(jí)計(jì)算機(jī)集群達(dá)到了 10 萬顆 NVIDIA? Hopper? GPU 的巨大規(guī)模。該集群使用了 NVIDIA Spectrum-X? 以太網(wǎng)網(wǎng)絡(luò)平臺(tái),該
    發(fā)表于 10-30 09:33 ?299次閱讀
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>以太網(wǎng)</b>加速 xAI 構(gòu)建的全球最大 <b class='flag-5'>AI</b> 超級(jí)計(jì)算機(jī)

    簡單認(rèn)識(shí)NVIDIA網(wǎng)絡(luò)平臺(tái)

    NVIDIA Spectrum-X800 平臺(tái)是業(yè)界第一代 800Gb/s 的以太網(wǎng)網(wǎng)絡(luò)平臺(tái),包括了 NVIDIA Spectrum SN5
    的頭像 發(fā)表于 09-09 09:22 ?737次閱讀

    應(yīng)用NVIDIA Spectrum-X網(wǎng)絡(luò)構(gòu)建新型主權(quán)AI

    法國服務(wù)提供商 Scaleway 正在基于 NVIDIA 的 Hopper GPU和 Spectrum-X 以太網(wǎng)網(wǎng)絡(luò)平臺(tái) 構(gòu)建區(qū)域性 GPU 集群,為用戶提供
    的頭像 發(fā)表于 07-26 18:58 ?1414次閱讀

    電子發(fā)燒友

    中國電子工程師最喜歡的網(wǎng)站

    • 2931785位工程師會(huì)員交流學(xué)習(xí)
    • 獲取您個(gè)性化的科技前沿技術(shù)信息
    • 參加活動(dòng)獲取豐厚的禮品