0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

AI網(wǎng)絡發(fā)展的四大核心技術支柱

要長高 ? 2024-08-14 17:11 ? 次閱讀

AI大模型時代,隨著模型參數(shù)量與訓練集規(guī)模的爆炸性增長,單純依賴GPU單體算力的提升已難以滿足需求,業(yè)界焦點逐漸轉(zhuǎn)向系統(tǒng)架構(gòu)層面的革新,其中,作為底層核心技術的網(wǎng)絡成為了突破的關鍵。全球科技巨頭正競相研發(fā)相關產(chǎn)品技術,AI網(wǎng)絡技術的競爭日益激烈。

在“2024開放計算中國峰會”上,英偉達網(wǎng)絡高級總監(jiān)宋慶春揭示了AI網(wǎng)絡的四大核心技術支柱:端到端RDMA流量動態(tài)路由、AI云業(yè)務性能隔離、網(wǎng)絡計算以及網(wǎng)絡數(shù)字孿生,這些技術共同構(gòu)成了推動AI云環(huán)境性能飛躍的基石。

為助力客戶在云端高效構(gòu)建生成式AI及AI工作負載,英偉達推出了其創(chuàng)新的網(wǎng)絡平臺——NVIDIA Spectrum-X加速以太網(wǎng)平臺。這一平臺并非孤立產(chǎn)品,而是集成了Spectrum-4以太網(wǎng)交換機、BlueField-3 DPU、LinkX線纜及模塊,以及配套軟件,共同為生成式AI在云端提供了前所未有的規(guī)?;芰Α?/p>

Spectrum-X平臺的亮點之一在于其動態(tài)路由技術。面對數(shù)據(jù)中心算力結(jié)構(gòu)向生成式AI云轉(zhuǎn)型的趨勢,英偉達設計了專為AI優(yōu)化的以太網(wǎng)絡,其中端到端RDMA流量動態(tài)路由技術尤為引人注目。該技術將網(wǎng)絡傳輸效率較傳統(tǒng)以太網(wǎng)絡提升了1.6倍,通過端網(wǎng)協(xié)同有效緩解了網(wǎng)絡擁塞問題。RDMA技術直接在網(wǎng)絡層面實現(xiàn)數(shù)據(jù)從源系統(tǒng)到目標系統(tǒng)存儲區(qū)的快速傳輸,無需操作系統(tǒng)介入,大幅減少了內(nèi)存復制和上下文切換的開銷,從而釋放了更多內(nèi)存帶寬和CPU資源用于提升應用性能。

性能隔離技術則是另一項關鍵創(chuàng)新。在AI云環(huán)境中,多租戶多任務并行運行是常態(tài),如何確保各任務間既相互隔離又保持高性能,成為一大挑戰(zhàn)。英偉達將InfiniBand上成熟的性能隔離技術引入Spectrum-X平臺,通過先進的擁塞控制技術,有效避免了單一AI應用突發(fā)通信導致的網(wǎng)絡擁塞對其他應用性能的影響,實現(xiàn)了以太網(wǎng)云上業(yè)務的高性能隔離。

網(wǎng)絡計算作為分布式計算的一種形式,通過在網(wǎng)絡節(jié)點間分配和協(xié)同計算任務,不僅提升了數(shù)據(jù)處理和傳輸?shù)男?,還增強了數(shù)據(jù)的安全性和并發(fā)訪問能力。這對于解決生成式AI云面臨的資源利用率、長尾問題以及多任務調(diào)度等挑戰(zhàn)具有重要意義。

最后,網(wǎng)絡數(shù)字孿生技術為AI云網(wǎng)絡的運維和優(yōu)化提供了全新視角。通過構(gòu)建物理網(wǎng)絡的虛擬鏡像,運營商可以在不干擾實際網(wǎng)絡運行的情況下,進行方案模擬、選擇、優(yōu)化和測試,大大降低了部署成本和風險。同時,結(jié)合大數(shù)據(jù)處理和建模技術,網(wǎng)絡數(shù)字孿生還能實現(xiàn)現(xiàn)狀評估、歷史診斷和未來預測,為網(wǎng)絡運維提供更為全面和精準的決策支持。

綜上所述,英偉達Spectrum-X平臺及其所代表的AI網(wǎng)絡技術,正引領著AI云環(huán)境向更高效、更靈活、更智能的方向發(fā)展。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • gpu
    gpu
    +關注

    關注

    28

    文章

    4739

    瀏覽量

    128941
  • 網(wǎng)絡
    +關注

    關注

    14

    文章

    7565

    瀏覽量

    88777
  • AI
    AI
    +關注

    關注

    87

    文章

    30887

    瀏覽量

    269068
收藏 人收藏

    評論

    相關推薦

    先進封裝成為AI時代的核心技術發(fā)展與創(chuàng)新

    發(fā)展成為延續(xù)摩爾定律、推動半導體產(chǎn)業(yè)創(chuàng)新的核心策略。這項技術不僅能夠提升芯片性能,還能實現(xiàn)更低的功耗和更小的外形尺寸,為AI和HPC應用提供了強有力的
    的頭像 發(fā)表于 12-24 09:32 ?289次閱讀
    先進封裝成為<b class='flag-5'>AI</b>時代的<b class='flag-5'>核心技術發(fā)展</b>與創(chuàng)新

    玻璃基板面臨的四大核心技術攻關難點

    人工智能的發(fā)展對高性能計算、可持續(xù)技術網(wǎng)絡硅片的需求激增,這推動了研發(fā)投資的增加,加速了半導體技術的創(chuàng)新進程。然而,隨著摩爾定律在單個芯片層面逐漸放緩,業(yè)界開始探索在ASIC封裝中集
    的頭像 發(fā)表于 12-22 15:27 ?271次閱讀
    玻璃基板面臨的<b class='flag-5'>四大</b><b class='flag-5'>核心技術</b>攻關難點

    DEKRA德凱亮相蓋世汽車2024第屆汽車電氣化核心技術論壇

    近日,蓋世汽車2024第屆汽車電氣化核心技術論壇在鵬城順利召開。論壇立足于動力電池的技術創(chuàng)新與降本增效、動力電池出海、“小三電”的集成化和大功率發(fā)展、整車高壓平臺等行業(yè)焦點,邀請領軍
    的頭像 發(fā)表于 11-08 14:16 ?233次閱讀

    AI for Science:人工智能驅(qū)動科學創(chuàng)新》第二章AI for Science的技術支撐學習心得

    人工智能在科學研究中的核心技術,包括機器學習、深度學習、神經(jīng)網(wǎng)絡等。這些技術構(gòu)成了AI for Science的基石,使得AI能夠處理和分析
    發(fā)表于 10-14 09:16

    四大核心展區(qū),英特爾在工博會展現(xiàn)AI與制造深度融合

    2024年9月25日,上?!??在第24屆中國國際工業(yè)博覽會(CIIF)上,英特爾攜手多家生態(tài)合作伙伴亮相展會,通過精心布局的 “機器視覺”、“負載整合”、“工業(yè)控制”、及“工業(yè)AI與大模型”四大
    的頭像 發(fā)表于 09-27 09:30 ?253次閱讀
    <b class='flag-5'>四大</b><b class='flag-5'>核心</b>展區(qū),英特爾在工博會展現(xiàn)<b class='flag-5'>AI</b>與制造深度融合

    聚焦物聯(lián)網(wǎng)場景,曠視科技核心技術能力持續(xù)升級

    曾經(jīng)備受青睞的“AI小龍”之一,曠視科技在更早的時候曾向港交所遞交上市申請,闖關未果后轉(zhuǎn)向上交所科創(chuàng)板。 ? 曠視科技核心技術能力 ? 曠視科技是一家聚焦物聯(lián)網(wǎng)場景的人工智能公司,其核心技術
    的頭像 發(fā)表于 07-25 00:09 ?4167次閱讀

    三星電子成功收購英國初創(chuàng)公司,致力開發(fā)AI核心技術

    7月18日,三星電子正式對外宣布了一項重要戰(zhàn)略舉措——成功收購英國新興科技企業(yè)Oxford Semantic Technologies。這家初創(chuàng)公司成立于2017年,專注于前沿的知識圖譜技術領域,致力于開發(fā)能夠賦能更復雜AI應用的核心技
    的頭像 發(fā)表于 07-18 15:40 ?533次閱讀

    又一家人工智能企業(yè)成功IPO,核心技術涉及感知、理解、執(zhí)行

    流程。主要服務于城市管理及行政、汽車及交通、通信、金融以及教育、醫(yī)療健康、電商及零售等行業(yè)。 ? 核心技術涉及感知、理解、執(zhí)行 ????????????????????????????????? 聲通科技核心技術包括交互式人工智能技術
    的頭像 發(fā)表于 07-17 00:16 ?3095次閱讀

    【大語言模型:原理與工程實踐】核心技術綜述

    我也不打算把網(wǎng)上相關的信息在總結(jié)一下,這樣的話,工作量很大。 我主要看了-大語言模型基礎技術這節(jié) 大語言模型(Large Language Models,LLMs)的核心技術涵蓋了從模型的架構(gòu)設計到
    發(fā)表于 05-05 10:56

    新能源汽車核心技術加油站-VCU

    新能源汽車核心技術加油站-VCU
    的頭像 發(fā)表于 04-20 08:10 ?357次閱讀
    新能源汽車<b class='flag-5'>核心技術</b>加油站-VCU

    字節(jié)跳動加速AI布局,F(xiàn)low部門拓展四大業(yè)務線

    字節(jié)跳動在AI領域的布局持續(xù)提速,其最新推出的AI角色互動App“話爐”引起了業(yè)界對AI社交賽道的廣泛關注。這款應用由字節(jié)跳動內(nèi)部的Flow部門傾力打造,該部門隸屬于產(chǎn)品研發(fā)與工程部(PDI),現(xiàn)已
    的頭像 發(fā)表于 03-27 11:21 ?961次閱讀

    NanoEdge AI技術原理、應用場景及優(yōu)勢

    能耗并提高數(shù)據(jù)安全性。本文將對 NanoEdge AI技術原理、應用場景以及優(yōu)勢進行綜述。 1、技術原理 NanoEdge AI核心技術
    發(fā)表于 03-12 08:09

    MES實施的四大疑惑

    電子發(fā)燒友網(wǎng)站提供《MES實施的四大疑惑.docx》資料免費下載
    發(fā)表于 03-01 15:35 ?0次下載

    大數(shù)據(jù)技術是干嘛的 大數(shù)據(jù)核心技術有哪些

    據(jù)的核心技術,包括數(shù)據(jù)采集、存儲與管理、處理與分析等方面。 一、大數(shù)據(jù)技術背景和概念 1.1 背景 隨著互聯(lián)網(wǎng)技術的迅猛發(fā)展,人們可以通過各種途徑產(chǎn)生、獲取和傳輸數(shù)據(jù),使數(shù)據(jù)量呈現(xiàn)爆炸
    的頭像 發(fā)表于 01-31 11:07 ?3464次閱讀

    邊緣AI核心技術和產(chǎn)業(yè)鏈!技術持續(xù)進步,應用不斷拓展!

    ,并保護用戶的隱私。此外,邊緣AI還可以在沒有互聯(lián)網(wǎng)連接的情況下獨立運行,這對于一些實時性要求較高的應用非常重要。 ? 邊緣AI 產(chǎn)業(yè)鏈及核心技術 ? 邊緣AI涉及的
    的頭像 發(fā)表于 01-11 01:20 ?4748次閱讀
    邊緣<b class='flag-5'>AI</b><b class='flag-5'>核心技術</b>和產(chǎn)業(yè)鏈!<b class='flag-5'>技術</b>持續(xù)進步,應用不斷拓展!