0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

人工智能正在引領(lǐng)數(shù)據(jù)中心物理基礎(chǔ)設(shè)施的新時(shí)代

易飛揚(yáng)通信 ? 來(lái)源:易飛揚(yáng)通信 ? 作者:易飛揚(yáng)通信 ? 2023-12-22 11:06 ? 次閱讀

人工智能AI)目前正在對(duì)數(shù)據(jù)中心行業(yè)產(chǎn)生深遠(yuǎn)影響,這種影響可歸因于OpenAI在2022年底推出的ChatGPT,該產(chǎn)品因其對(duì)查詢提供復(fù)雜且類似人類的響應(yīng)的卓越能力而迅速受到歡迎。因此,作為人工智能技術(shù)的一個(gè)子集,生成式人工智能成為2023年上半年行業(yè)活動(dòng)、財(cái)報(bào)和供應(yīng)商生態(tài)系統(tǒng)討論的焦點(diǎn)。這種興奮是有道理的,因?yàn)樯墒饺斯ぶ悄芤呀?jīng)引起了數(shù)十場(chǎng)討論。數(shù)十億美元的投資,預(yù)計(jì)到2027年將繼續(xù)讓數(shù)據(jù)中心資本支出提高到5000億美元以上。然而,由于訓(xùn)練和部署支持生成式人工智能應(yīng)用程序的大型語(yǔ)言模型(LLM)所需的計(jì)算能力顯著擴(kuò)展,因此需要對(duì)數(shù)據(jù)中心的架構(gòu)進(jìn)行更改。

雖然支持此類人工智能應(yīng)用所需的硬件對(duì)許多人來(lái)說(shuō)都是新的,但一部分?jǐn)?shù)據(jù)中心行業(yè)已經(jīng)部署此類基礎(chǔ)設(shè)施多年。該領(lǐng)域通常被稱為高性能計(jì)算 (HPC) 或超級(jí)計(jì)算行業(yè)。從歷史上看,這個(gè)細(xì)分市場(chǎng)主要得到政府和高等教育機(jī)構(gòu)的支持,以部署一些世界上最復(fù)雜和精密的計(jì)算機(jī)系統(tǒng)。

生成式人工智能正在做的事情是,將人工智能應(yīng)用程序和支持它們的基礎(chǔ)設(shè)施擴(kuò)展到更廣泛的企業(yè)和服務(wù)提供商市場(chǎng)。向HPC行業(yè)學(xué)習(xí)讓我們了解基礎(chǔ)設(shè)施可能會(huì)是什么樣子。

wKgZomWE_TiAN5EFAAEE3Hrx74M773.png


圖 1:AI硬件影響

人工智能基礎(chǔ)設(shè)施需要更多的電力和液冷設(shè)施

總結(jié)圖 1 所示的影響,人工智能工作負(fù)載將需要更多的計(jì)算能力和更高的網(wǎng)絡(luò)速度。這將導(dǎo)致更高的機(jī)架功率密度,這對(duì)數(shù)據(jù)中心物理基礎(chǔ)設(shè)施(DCPI)具有重大影響。對(duì)于電力基礎(chǔ)設(shè)施(也稱為灰色空間),預(yù)計(jì)架構(gòu)變化將受到限制。AI工作負(fù)載應(yīng)該會(huì)增加對(duì)備用電源(UPS)和IT機(jī)架(機(jī)柜PDU和母線槽)配電的需求,但不會(huì)要求任何重大的技術(shù)變革。人工智能基礎(chǔ)設(shè)施將對(duì)DCPI產(chǎn)生變革性影響的地方在于數(shù)據(jù)中心的空白區(qū)域。

首先,由于AI IT硬件的功耗較高,需要更高功率的機(jī)架式PDU。在這些額定功率下,發(fā)生潛在故障或效率低下相關(guān)造成的成本可能很高。預(yù)計(jì)這將推動(dòng)最終用戶采用智能機(jī)架PDU,并能夠遠(yuǎn)程監(jiān)控和管理功耗和環(huán)境因素。這些機(jī)架PDU的成本比基本機(jī)架PDU高出許多數(shù)量級(jí),而最終用戶無(wú)法監(jiān)控或管理其機(jī)架配電。

對(duì)于數(shù)據(jù)中心架構(gòu)來(lái)說(shuō),更具變革性的是需要液體冷卻來(lái)管理下一代CPUGPU運(yùn)行AI工作負(fù)載時(shí)產(chǎn)生的更高熱負(fù)載。液體冷卻(包括直接液體冷卻和浸沒(méi)式冷卻)在更廣泛的數(shù)據(jù)中心行業(yè)中的采用不斷增加,預(yù)計(jì)隨著人工智能基礎(chǔ)設(shè)施的部署而加速。然而,考慮到采用液冷的的跑道歷史漫長(zhǎng),Dell’Oro預(yù)計(jì)生成式人工智能對(duì)液冷的影響在短期內(nèi)將受到限制。仍然可以部署采用風(fēng)冷技術(shù)的當(dāng)前一代IT基礎(chǔ)設(shè)施,但會(huì)犧牲硬件利用率和效率。

wKgaomWE_TmAWrj2AAJ89sJx6C4131.png

為了應(yīng)對(duì)這一挑戰(zhàn),一些最終用戶正在使用閉環(huán)空氣輔助液冷系統(tǒng)改造其現(xiàn)有設(shè)施。這種基礎(chǔ)設(shè)施可以是后門熱交換器(RDHx)或直接液體冷卻的一種形式,其利用液體來(lái)捕獲機(jī)架或服務(wù)器內(nèi)產(chǎn)生的熱量,并在機(jī)架或服務(wù)器的后部將其排出,將其引導(dǎo)到熱通道中。這種設(shè)計(jì)使數(shù)據(jù)中心運(yùn)營(yíng)商能夠利用液冷的一些優(yōu)勢(shì),而無(wú)需大量投資來(lái)重新設(shè)計(jì)設(shè)施。然而,為了大規(guī)模實(shí)現(xiàn)人工智能硬件的預(yù)期效率,需要專門建造的液冷設(shè)施。預(yù)計(jì)當(dāng)前對(duì)液冷的興趣將在2025年開(kāi)始在部署中體現(xiàn)出來(lái),預(yù)計(jì)到2027年液冷收入將接近20億美元。

wKgZomWE_TqAYO2mAADf3EBqUBw873.png

電力可用性可能顛覆人工智能的炒作

將人工智能工作負(fù)載納入未來(lái)數(shù)據(jù)中心建設(shè)的計(jì)劃已經(jīng)實(shí)現(xiàn)。這是Dell’Oro上調(diào)數(shù)據(jù)中心物理基礎(chǔ)設(shè)施市場(chǎng)5年前景的主要原因,目前預(yù)計(jì)到2027年收入將以10%的復(fù)合年增長(zhǎng)率增長(zhǎng)。但是,盡管人工智能工作負(fù)載預(yù)計(jì)將為數(shù)據(jù)中心行業(yè)帶來(lái)巨大的市場(chǎng)增長(zhǎng),但仍有一些值得注意的因素可能會(huì)減緩這種增長(zhǎng)。新冠加速了數(shù)字化的步伐,掀起了新數(shù)據(jù)中心建設(shè)的浪潮。然而,隨著需求的實(shí)現(xiàn),供應(yīng)鏈難以跟上,導(dǎo)致數(shù)據(jù)中心物理基礎(chǔ)設(shè)施的交付時(shí)間在高峰時(shí)超過(guò)一年?,F(xiàn)在,隨著供應(yīng)鏈限制的緩解,DCPI供應(yīng)商正在解決積壓?jiǎn)栴},并開(kāi)始縮短交貨時(shí)間。

然而,對(duì)人工智能工作負(fù)載的需求正在形成數(shù)據(jù)中心行業(yè)的另一波增長(zhǎng)浪潮。這種雙倍增長(zhǎng)導(dǎo)致數(shù)據(jù)中心行業(yè)不斷增長(zhǎng)的能源需求與公用事業(yè)公司向所需地點(diǎn)供電的速度之間存在差異。因此,這導(dǎo)致數(shù)據(jù)中心服務(wù)提供商探索“自帶電源”模式作為潛在的解決方案。雖然該模型的可行性仍在確定中,但數(shù)據(jù)中心提供商渴望一種創(chuàng)新方法來(lái)支持其長(zhǎng)期增長(zhǎng)戰(zhàn)略,而人工智能工作負(fù)載的激增是一個(gè)核心驅(qū)動(dòng)力。

隨著對(duì)更多DCPI的需求與可用功率的平衡,有一點(diǎn)是明確的:人工智能正在開(kāi)創(chuàng)DCPI的新時(shí)代。在這個(gè)時(shí)代,DCPI不僅將在促進(jìn)數(shù)據(jù)中心發(fā)展方面發(fā)揮關(guān)鍵作用,還將定義性能、成本并幫助實(shí)現(xiàn)可持續(xù)發(fā)展。這與DCPI所扮演的歷史角色截然不同,特別是與近十年前的行業(yè)相比,當(dāng)時(shí)DCPI幾乎是事后才想到的。

隨著AI增長(zhǎng)浪潮的迅速到來(lái),在AI策略中滿足DCPI要求至關(guān)重要。如果不這樣做,可能會(huì)導(dǎo)致AI IT硬件無(wú)處可插。

參考文獻(xiàn):

AI is Ushering in a New Era for Data Center Physical Infrastructure - Lucas Beran joined Dell’Oro Group


審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 數(shù)據(jù)中心
    +關(guān)注

    關(guān)注

    16

    文章

    4794

    瀏覽量

    72190
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    31028

    瀏覽量

    269365
  • 人工智能
    +關(guān)注

    關(guān)注

    1792

    文章

    47373

    瀏覽量

    238860
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    人工智能對(duì)數(shù)據(jù)中心基礎(chǔ)設(shè)施帶來(lái)了哪些挑戰(zhàn)

    在加密貨幣和人工智能/機(jī)器學(xué)習(xí)(AI/ML)等新興應(yīng)用的驅(qū)動(dòng)下,數(shù)據(jù)中心的能耗巨大,并將快速增長(zhǎng)以滿足用戶需求。根據(jù)國(guó)際能源署(IEA)的最新報(bào)告,2022 年數(shù)據(jù)中心的耗電量將達(dá)到 460 TWh
    發(fā)表于 12-31 13:48 ?207次閱讀
    <b class='flag-5'>人工智能對(duì)數(shù)據(jù)中心</b><b class='flag-5'>基礎(chǔ)設(shè)施</b>帶來(lái)了哪些挑戰(zhàn)

    人工智能對(duì)數(shù)據(jù)中心的挑戰(zhàn)

    在加密貨幣和人工智能/機(jī)器學(xué)習(xí)(AI/ML)等新興應(yīng)用的驅(qū)動(dòng)下,數(shù)據(jù)中心的能耗巨大,并將快速增長(zhǎng)以滿足用戶需求。根據(jù)國(guó)際能源署(IEA)的最新報(bào)告,2022 年數(shù)據(jù)中心的耗電量將達(dá)到 460 TWh
    的頭像 發(fā)表于 11-13 16:05 ?381次閱讀
    <b class='flag-5'>人工智能對(duì)數(shù)據(jù)中心</b>的挑戰(zhàn)

    簡(jiǎn)述數(shù)據(jù)中心網(wǎng)絡(luò)架構(gòu)的演變

    隨著全球?qū)?b class='flag-5'>人工智能(AI)的需求不斷增長(zhǎng),數(shù)據(jù)中心作為AI計(jì)算的重要基礎(chǔ)設(shè)施,其網(wǎng)絡(luò)架構(gòu)與連接技術(shù)的發(fā)展變得尤為關(guān)鍵。
    的頭像 發(fā)表于 10-22 16:23 ?312次閱讀

    《AI for Science:人工智能驅(qū)動(dòng)科學(xué)創(chuàng)新》第一章人工智能驅(qū)動(dòng)的科學(xué)創(chuàng)新學(xué)習(xí)心得

    深刻認(rèn)識(shí)到人工智能在推動(dòng)科學(xué)進(jìn)步中的核心價(jià)值。它不僅是科技進(jìn)步的加速器,更是人類智慧拓展的催化劑,引領(lǐng)我們邁向一個(gè)更加智慧、高效、可持續(xù)的科學(xué)研究新時(shí)代
    發(fā)表于 10-14 09:12

    數(shù)據(jù)中心產(chǎn)品通常包括哪些

    人工智能快速發(fā)展帶來(lái)了海量的大數(shù)據(jù),數(shù)據(jù)中心計(jì)算機(jī)的需求正在急劇增長(zhǎng)。數(shù)據(jù)中心基礎(chǔ)設(shè)施承擔(dān)著
    的頭像 發(fā)表于 10-11 11:12 ?486次閱讀
    <b class='flag-5'>數(shù)據(jù)中心</b>產(chǎn)品通常包括哪些

    華為發(fā)布智算數(shù)據(jù)中心基礎(chǔ)設(shè)施十大建設(shè)原則

    在華為全聯(lián)接大會(huì)2024期間,華為數(shù)字能源在上海舉辦數(shù)據(jù)中心基礎(chǔ)設(shè)施峰會(huì)。來(lái)自全球300多位產(chǎn)業(yè)領(lǐng)袖和技術(shù)專家齊聚一堂,共同探討智算時(shí)代數(shù)據(jù)中心產(chǎn)業(yè)發(fā)展新趨勢(shì)和新技術(shù)。他們旨在通過(guò)加速行業(yè)智能
    的頭像 發(fā)表于 09-26 11:49 ?375次閱讀

    安森美引領(lǐng)數(shù)據(jù)中心能效革命

    在當(dāng)今數(shù)字化轉(zhuǎn)型的浪潮中,數(shù)據(jù)中心作為支撐人工智能、云計(jì)算等關(guān)鍵技術(shù)的基礎(chǔ)設(shè)施,其能耗問(wèn)題日益凸顯。特別是隨著AI計(jì)算的蓬勃發(fā)展,數(shù)據(jù)中心對(duì)電力的需求急劇增加,傳統(tǒng)搜索引擎請(qǐng)求相比,A
    的頭像 發(fā)表于 08-12 11:13 ?502次閱讀

    借助電源完整性測(cè)試提高人工智能數(shù)據(jù)中心的能效

    數(shù)據(jù)中心正在部署基于人工智能 (AI) 的技術(shù),處理器密集型服務(wù)器正在推動(dòng)能源需求的增長(zhǎng),下表說(shuō)明了這種發(fā)展趨勢(shì)所帶來(lái)的巨大影響。國(guó)際能源署 (IEA) 預(yù)測(cè),到2030年,
    的頭像 發(fā)表于 07-30 09:36 ?558次閱讀
    借助電源完整性測(cè)試提高<b class='flag-5'>人工智能</b><b class='flag-5'>數(shù)據(jù)中心</b>的能效

    數(shù)據(jù)中心的AI時(shí)代轉(zhuǎn)型:挑戰(zhàn)與機(jī)遇

    隨著人工智能(AI)的迅速發(fā)展和廣泛應(yīng)用,數(shù)據(jù)中心作為AI技術(shù)的基石,也面臨著前所未有的挑戰(zhàn)和機(jī)遇。為了滿足AI的高性能和低延遲要求,數(shù)據(jù)中心基礎(chǔ)設(shè)施必須進(jìn)行相應(yīng)的改變和升級(jí)。01、
    的頭像 發(fā)表于 07-24 08:28 ?505次閱讀
    <b class='flag-5'>數(shù)據(jù)中心</b>的AI<b class='flag-5'>時(shí)代</b>轉(zhuǎn)型:挑戰(zhàn)與機(jī)遇

    AI時(shí)代,我們需要怎樣的數(shù)據(jù)中心?AI重新定義數(shù)據(jù)中心

    超過(guò)60%的中國(guó)企業(yè)計(jì)劃在未來(lái)12至24個(gè)月內(nèi)部署生成式人工智能。AI、模型的構(gòu)建,將顛覆數(shù)據(jù)中心基礎(chǔ)設(shè)施的建設(shè)、運(yùn)維和運(yùn)營(yíng)。一個(gè)全新的數(shù)據(jù)中心智能化時(shí)代已經(jīng)拉開(kāi)序幕。
    發(fā)表于 07-16 11:33 ?718次閱讀
    AI<b class='flag-5'>時(shí)代</b>,我們需要怎樣的<b class='flag-5'>數(shù)據(jù)中心</b>?AI重新定義<b class='flag-5'>數(shù)據(jù)中心</b>

    人工智能數(shù)據(jù)中心的新型連接解決方案

    支持新型人工智能數(shù)據(jù)中心架構(gòu)的先進(jìn)連接解決方案不斷涌現(xiàn)。高速板對(duì)板連接器、下一代電纜、背板和近似集成電路連接器對(duì)電纜解決方案的運(yùn)行速度高達(dá)224Gb/s-PAM4,將加速未來(lái)計(jì)算的發(fā)展。人工智能
    的頭像 發(fā)表于 06-13 08:26 ?572次閱讀
    <b class='flag-5'>人工智能</b><b class='flag-5'>數(shù)據(jù)中心</b>的新型連接解決方案

    夏普討論建立人工智能數(shù)據(jù)中心

    近日,夏普公司宣布與KDDI公司達(dá)成重要合作意向,雙方將針對(duì)建立人工智能數(shù)據(jù)中心進(jìn)行深入討論。據(jù)悉,此次合作將圍繞英偉達(dá)的人工智能計(jì)算平臺(tái)和Supermicro平臺(tái)展開(kāi),共同探索人工智能
    的頭像 發(fā)表于 06-05 09:17 ?478次閱讀

    展望2024數(shù)據(jù)中心基礎(chǔ)設(shè)施

    前陣子,DeLL'ORO GROUP發(fā)布預(yù)測(cè)報(bào)告,回顧了23年數(shù)據(jù)中心基礎(chǔ)設(shè)施報(bào)告中的突出趨勢(shì),及展望了2024年數(shù)據(jù)中心基礎(chǔ)設(shè)施的發(fā)展情況,以下是報(bào)告內(nèi)容。
    的頭像 發(fā)表于 03-25 15:59 ?412次閱讀

    嵌入式人工智能的就業(yè)方向有哪些?

    于工業(yè)、農(nóng)業(yè)、醫(yī)療、城市建設(shè)、金融、航天軍工等多個(gè)領(lǐng)域。在新時(shí)代發(fā)展背景下,嵌入式人工智能已是大勢(shì)所趨,成為當(dāng)前最熱門的AI商業(yè)化途徑之一。
    發(fā)表于 02-26 10:17

    KakaoBank 入駐 Digital Realty 的 ICN10 數(shù)據(jù)中心以推動(dòng)人工智能創(chuàng)新

    位于首爾的?ICN10 數(shù)據(jù)服務(wù)中心建立一個(gè)人工智能?(AI) 實(shí)驗(yàn)室。此次戰(zhàn)略投資將利用?Digital Realty 的數(shù)據(jù)中心基礎(chǔ)設(shè)施和專業(yè)知識(shí),助力?KakaoBank 快速
    的頭像 發(fā)表于 02-18 09:33 ?773次閱讀
    KakaoBank 入駐 Digital Realty 的 ICN10 <b class='flag-5'>數(shù)據(jù)中心</b>以推動(dòng)<b class='flag-5'>人工智能</b>創(chuàng)新