0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

異構(gòu)+Chiplet—通往數(shù)據(jù)中心的能效之路

奇異摩爾 ? 來源:奇異摩爾 ? 2023-06-21 15:50 ? 次閱讀

隨著以大模型為代表的AIGC迅速崛起,數(shù)據(jù)到算力需求的持續(xù)暴漲,為數(shù)據(jù)中心帶來了巨大的考驗(yàn)。為填補(bǔ)算力鴻溝,下一代數(shù)據(jù)中心必須要具備更高的算力密度、更大的網(wǎng)絡(luò)規(guī)模,并能夠靈活地部署和更新海量新應(yīng)用。

在這一輪新的技術(shù)方向中,異構(gòu)計(jì)算架構(gòu)和Chiplet技術(shù)因能有效提升復(fù)雜場景計(jì)算效率,算力密度和網(wǎng)絡(luò)規(guī)模,被普遍視為通往數(shù)據(jù)中心未來的能效之路。

AIGC或?qū)⑺洪_數(shù)據(jù)中心算力缺口

在AI大模型飛速發(fā)展之下,單個(gè)大語言訓(xùn)練驅(qū)動(dòng)AI訓(xùn)練服務(wù)器需求約2億美元,AI推理服務(wù)器方面,如ChatGPT在初期便可帶動(dòng)推理服務(wù)器需求約45億美元。

據(jù)中國信通院,2021年國內(nèi)IDC市場規(guī)模1500.2億元,同比增長28.5%。據(jù)信通院預(yù)計(jì),隨著我國各地區(qū)、各行業(yè)數(shù)字化轉(zhuǎn)型深入推進(jìn)、AI訓(xùn)練需求持續(xù)增長、智能終端實(shí)時(shí)計(jì)算需求增長,2022年國內(nèi)市場規(guī)模將達(dá)1900.7億元,同增26.7%。

算力作為大模型的核心引擎,計(jì)算方式簡單粗暴,即實(shí)際擁有多少的GPU芯片,將直接決定其算力的大小。以ChatGPT為例,其模型計(jì)算主要基于微軟的Azure云服務(wù)進(jìn)行,本質(zhì)上是借助微軟自有的IDC資源,在云端完成計(jì)算過程后,再將結(jié)果返回給OpenAI。

AIGC所需的算力不是固定的,而是逐次遞增的。數(shù)據(jù)中心是承接AI計(jì)算需求的直接形式,其算力需求為AIGC的能力所驅(qū)動(dòng),也就是AIGC越聰明,其背后所需要的算力就越多,而供需雙方存在的現(xiàn)實(shí)差距,則讓數(shù)據(jù)中心的算力缺口變得愈加嚴(yán)重。

互聯(lián)網(wǎng)廠商布局ChatGPT同類產(chǎn)品,或?qū)⒓哟蠛诵某鞘蠭DC算力供給缺口。艾瑞咨詢數(shù)據(jù)顯示,2021年國內(nèi)IDC行業(yè)下游客戶占比中,互聯(lián)網(wǎng)廠商居首位,占比為60%,國內(nèi)核心城市IDC算力供給缺口或?qū)⒓哟蟆?/p>

AIGC時(shí)代,智能算力崛起

隨著人工智能進(jìn)入新的發(fā)展周期,以及大模型的興起,傳統(tǒng)的芯片需求結(jié)構(gòu)發(fā)生了變化。盡管總體算力仍在增長,但通用計(jì)算力由CPU主導(dǎo)的比例正在下降,而智能計(jì)算力由GPU主導(dǎo)的比例逐漸增加。

目前,GPU在AI芯片市場的占比約為90%。根據(jù)VMR的數(shù)據(jù),2021年全球GPU行業(yè)市場規(guī)模為334.7億美元,隨著大型模型訓(xùn)練的成熟,預(yù)計(jì)到2030年將達(dá)到4773.7億美元,年均增長率為34.35%。

新華三集團(tuán)副總裁、計(jì)算存儲(chǔ)產(chǎn)品線總裁徐潤安在接受媒體采訪時(shí)表示,智能算力占比變大原因在于,x86架構(gòu)CPU單核性能強(qiáng)、通用性好。但AI場景需要多核、高并發(fā)、高帶寬芯片。綜合考慮成本、效率,GPU、DPU、NPU通常表現(xiàn)更好。CPU部分職能被其他專用芯片分擔(dān)。在他看來,大模型會(huì)帶來巨大的智能算力消耗。

Chiplet:破局數(shù)據(jù)中心未來

近20年中,單一的制程微縮已被證明無法趕上對(duì)性能需求的步伐。尤其是在數(shù)據(jù)中心,情況遠(yuǎn)比客戶端產(chǎn)品更為復(fù)雜,一個(gè)非常典型的情況是多個(gè)客戶端在同一產(chǎn)品上運(yùn)行工作負(fù)載,如多核CPU或GPU。于是,人們開始將未來依托在將計(jì)算單元、內(nèi)存等和其他模塊成在同一封裝上的Chiplet異構(gòu)集成路線之上。

Chiplet架構(gòu)對(duì)于服務(wù)器處理器而言意義非凡,大大降低了處理器的開發(fā)門檻和成本,起到了巨大的推動(dòng)作用。正如AMD開創(chuàng)性的chiplet產(chǎn)品所證明的那樣,轉(zhuǎn)向chiplet技術(shù)可以顯著改善數(shù)據(jù)中心的計(jì)算成本,并提高互連效率。迄今,全球主流服務(wù)器芯片廠商都開始將chiplet納入自身產(chǎn)品的主要路徑之一。

就此,英特爾 IO 技術(shù)解決方案團(tuán)隊(duì)?wèi)?zhàn)略家Kurt Lender 總結(jié)了 chiplet 技術(shù)的影響“有合理的預(yù)期,未來 10 年的 HPC 采購將利用 chiplet 技術(shù)更好地支持他們的科學(xué)工作負(fù)載。” AMD 的 CEO Lisa Su也表現(xiàn)出了同樣的期待,當(dāng)被問及她是否認(rèn)為未來 10 年的 HPC 采購指定定制chiplet設(shè)計(jì)的計(jì)算芯片而不是現(xiàn)成的商品時(shí),她回答“是”。

Kurt Lender 表示,創(chuàng)建基于 UCIe 的chiplet 設(shè)計(jì)在成本方面具有顯著的優(yōu)勢,“有各種縱向擴(kuò)展和橫向擴(kuò)展的成本優(yōu)勢,包括由于與單片硅設(shè)計(jì)相比占地面積更小而導(dǎo)致chiplet的高良率而節(jié)省的成本,以及能夠指定可以利用 HPC 冷卻功能的高密度、高功率封裝。在其最完整的表達(dá)中,基于chiplet 的架構(gòu)使設(shè)計(jì)人員能夠?qū)碜远鄠€(gè)供應(yīng)商的 IP 和不同職稱工藝技術(shù)的芯??焖偌傻揭粋€(gè)封裝中?!?/p>

關(guān)于隨著以大模型為代表的人工智能大規(guī)模計(jì)算的迅速崛起,數(shù)據(jù)中心的算力難題不斷加劇。而異構(gòu)和Chiplet會(huì)將數(shù)據(jù)中心的未來引向何處,還讓我們拭目以待。???????




審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • GPU芯片
    +關(guān)注

    關(guān)注

    1

    文章

    303

    瀏覽量

    5813
  • OpenAI
    +關(guān)注

    關(guān)注

    9

    文章

    1089

    瀏覽量

    6516
  • chiplet
    +關(guān)注

    關(guān)注

    6

    文章

    432

    瀏覽量

    12595
  • 奇異摩爾
    +關(guān)注

    關(guān)注

    0

    文章

    49

    瀏覽量

    3414
  • ChatGPT
    +關(guān)注

    關(guān)注

    29

    文章

    1561

    瀏覽量

    7673
  • 先進(jìn)封裝
    +關(guān)注

    關(guān)注

    2

    文章

    404

    瀏覽量

    246
  • 芯粒
    +關(guān)注

    關(guān)注

    0

    文章

    59

    瀏覽量

    135

原文標(biāo)題:異構(gòu)+Chiplet,通往數(shù)據(jù)中心的能效之路

文章出處:【微信號(hào):奇異摩爾,微信公眾號(hào):奇異摩爾】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    安森美推動(dòng)數(shù)據(jù)中心革新

    隨著數(shù)據(jù)中心為了滿足人工智能(AI)計(jì)算的龐大處理需求而變得越來越耗電,提高能變得至關(guān)重要。與一般的搜索引擎請(qǐng)求相比,搭載AI的引擎需要消耗超過10倍的電力。加快功率半導(dǎo)體的創(chuàng)新以改善
    的頭像 發(fā)表于 11-14 09:41 ?219次閱讀

    數(shù)據(jù)中心管理系統(tǒng)對(duì)配電系統(tǒng)、能耗、溫度、蓄電池等運(yùn)行狀態(tài)實(shí)時(shí)監(jiān)測

    數(shù)據(jù)中心綜合管理系統(tǒng)采集數(shù)據(jù)中心中低壓配電系統(tǒng)、環(huán)境等數(shù)據(jù),通過實(shí)時(shí)監(jiān)測、控制和預(yù)警可以幫助數(shù)據(jù)中心
    的頭像 發(fā)表于 08-22 10:09 ?379次閱讀
    <b class='flag-5'>數(shù)據(jù)中心</b><b class='flag-5'>能</b><b class='flag-5'>效</b>管理系統(tǒng)對(duì)配電系統(tǒng)、能耗、溫度、蓄電池等運(yùn)行狀態(tài)實(shí)時(shí)監(jiān)測

    安森美引領(lǐng)數(shù)據(jù)中心革命

    在當(dāng)今數(shù)字化轉(zhuǎn)型的浪潮中,數(shù)據(jù)中心作為支撐人工智能、云計(jì)算等關(guān)鍵技術(shù)的基礎(chǔ)設(shè)施,其能耗問題日益凸顯。特別是隨著AI計(jì)算的蓬勃發(fā)展,數(shù)據(jù)中心對(duì)電力的需求急劇增加,傳統(tǒng)搜索引擎請(qǐng)求相比,AI引擎的電力消耗更是高達(dá)十倍以上。因此,提升數(shù)據(jù)中心
    的頭像 發(fā)表于 08-12 11:13 ?491次閱讀

    安森美推出提高數(shù)據(jù)中心的完整電源解決方案

    650V MOSFET的強(qiáng)大組合為數(shù)據(jù)中心應(yīng)用提供了一種完整解決方案,該方案在更小的封裝尺寸下提供了無與倫比的和卓越的熱性能。
    的頭像 發(fā)表于 06-13 11:01 ?575次閱讀

    安森美新一代技術(shù)助力數(shù)據(jù)中心提升

    在人工智能飛速發(fā)展的當(dāng)下,數(shù)據(jù)中心為了滿足日益增長的計(jì)算需求,正面臨巨大的電力挑戰(zhàn)。的提高成為行業(yè)關(guān)注的焦點(diǎn),而安森美作為半導(dǎo)體技術(shù)的領(lǐng)先者,正通過其最新技術(shù)為數(shù)據(jù)中心提供解決方案
    的頭像 發(fā)表于 06-11 09:56 ?403次閱讀

    安科瑞數(shù)據(jù)中心綜合管理解決方案—中國移動(dòng)內(nèi)蒙古某項(xiàng)目案例分享

    源消耗的2%左右。為了應(yīng)對(duì)這一問題,數(shù)據(jù)中心需要采取綜合管理措施,以降低能源消耗、提高資源利用率、降低運(yùn)營成本。安科瑞數(shù)據(jù)中心綜合
    的頭像 發(fā)表于 05-08 11:05 ?421次閱讀
    安科瑞<b class='flag-5'>數(shù)據(jù)中心</b>綜合<b class='flag-5'>能</b><b class='flag-5'>效</b>管理解決方案—中國移動(dòng)內(nèi)蒙古某項(xiàng)目案例分享

    數(shù)據(jù)中心UPS系統(tǒng)運(yùn)行能耗優(yōu)化探討與應(yīng)用

    摘要:數(shù)據(jù)中心UPS系統(tǒng)合理的運(yùn)行方式對(duì)數(shù)據(jù)中心的管理和運(yùn)行具有十分重要的意義,PUE、pPUE、CLF/PLF、RER是通用的衡量數(shù)據(jù)中心
    的頭像 發(fā)表于 04-11 15:36 ?473次閱讀
    <b class='flag-5'>數(shù)據(jù)中心</b>UPS系統(tǒng)運(yùn)行能耗優(yōu)化探討與應(yīng)用

    淺析我國數(shù)據(jù)中心配電系統(tǒng)的能耗及水平

    淺析我國數(shù)據(jù)中心配電系統(tǒng)能耗及水平 張穎姣 安科瑞電氣股份有限公司?上海嘉定201801 摘要:伴隨著互聯(lián)網(wǎng)技術(shù)的深入全面發(fā)展,在“互聯(lián)網(wǎng)+”的時(shí)代,信息化進(jìn)程日益加快,我國數(shù)據(jù)中心
    的頭像 發(fā)表于 04-09 16:09 ?347次閱讀
    淺析我國<b class='flag-5'>數(shù)據(jù)中心</b>配電系統(tǒng)的能耗及<b class='flag-5'>能</b><b class='flag-5'>效</b>水平

    #mpo極性 #數(shù)據(jù)中心mpo

    數(shù)據(jù)中心MPO
    jf_51241005
    發(fā)布于 :2024年04月07日 10:05:13

    #mpo光纖跳線 #數(shù)據(jù)中心光纖跳線

    光纖數(shù)據(jù)中心
    jf_51241005
    發(fā)布于 :2024年03月22日 10:18:31

    淺析我國數(shù)據(jù)中心配電系統(tǒng)能耗及水平

    淺析我國數(shù)據(jù)中心配電系統(tǒng)能耗及水平 張穎姣 安科瑞電氣股份有限公司?上海嘉定201801 摘要:伴隨著互聯(lián)網(wǎng)技術(shù)的深入全面發(fā)展,在“互聯(lián)網(wǎng)+”的時(shí)代,信息化進(jìn)程日益加快,我國數(shù)據(jù)中心
    的頭像 發(fā)表于 03-11 15:48 ?341次閱讀
    淺析我國<b class='flag-5'>數(shù)據(jù)中心</b>配電系統(tǒng)能耗及<b class='flag-5'>能</b><b class='flag-5'>效</b>水平

    #MPO預(yù)端接 #數(shù)據(jù)中心機(jī)房 #機(jī)房布線

    數(shù)據(jù)中心MPO
    jf_51241005
    發(fā)布于 :2024年03月01日 11:12:47

    安科瑞AcrelEMS-IDC數(shù)據(jù)中心綜合管理解決方案—中國移動(dòng)內(nèi)蒙古某項(xiàng)目案例分享

    源消耗的2%左右。為了應(yīng)對(duì)這一問題,數(shù)據(jù)中心需要采取綜合管理措施,以降低能源消耗、提高資源利用率、降低運(yùn)營成本。安科瑞數(shù)據(jù)中心綜合
    的頭像 發(fā)表于 02-24 08:06 ?466次閱讀
    安科瑞AcrelEMS-IDC<b class='flag-5'>數(shù)據(jù)中心</b>綜合<b class='flag-5'>能</b><b class='flag-5'>效</b>管理解決方案—中國移動(dòng)內(nèi)蒙古某項(xiàng)目案例分享

    #永久鏈路 #信道測試 #數(shù)據(jù)中心

    數(shù)據(jù)中心
    jf_51241005
    發(fā)布于 :2024年02月23日 10:17:58

    #光纜水峰 #綜合布線光纜 #數(shù)據(jù)中心

    數(shù)據(jù)中心光纜
    jf_51241005
    發(fā)布于 :2024年01月15日 09:43:26