0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

最新HBM3內(nèi)存技術(shù),速率可達(dá)8.4Gbps,Rambus從IP到系統(tǒng)再到封裝的全面優(yōu)化

花茶晶晶 ? 來源:電子發(fā)燒友網(wǎng) ? 作者:黃晶晶 ? 2021-09-01 15:59 ? 次閱讀


電子發(fā)燒友網(wǎng)報(bào)道(文/黃晶晶)近幾年,數(shù)據(jù)中心、云服務(wù)以及物聯(lián)網(wǎng)設(shè)備保持需求的高速增長(zhǎng)。在大數(shù)據(jù)的處理方面,人工智能機(jī)器學(xué)習(xí)AI/ML)的使用率也將日益提升,預(yù)計(jì)到2025年,超過25%的服務(wù)器出貨將會(huì)專供于人工智能領(lǐng)域。在AI/ML當(dāng)中,內(nèi)存和I/O帶寬是影響系統(tǒng)性能至關(guān)重要的因素,這又促進(jìn)業(yè)界不斷提供最新的技術(shù),去滿足內(nèi)存和I/O的帶寬性能需求。

英偉達(dá)、AMDGPU/CPU芯片封裝中,已經(jīng)應(yīng)用到了HBM內(nèi)存技術(shù),通過在一個(gè)2.5D封裝中將GPU/CPU與HBM內(nèi)存進(jìn)行整合能夠提升內(nèi)存帶寬、加速數(shù)據(jù)存儲(chǔ)的速度,從而應(yīng)對(duì)神經(jīng)網(wǎng)絡(luò)、AI訓(xùn)練等的內(nèi)存帶寬需求。據(jù)了解,燧原科技也在其GPU芯片中使用了HBM2技術(shù),由Rambus提供IP支持。

現(xiàn)在,Rambus公司率先在業(yè)界推出支持HBM3的內(nèi)存子系統(tǒng),速率可達(dá)8.4Gbps,能夠提供超過1TB/s的內(nèi)存帶寬,它的參數(shù)指標(biāo)較HBM2實(shí)現(xiàn)了大幅的提升。

日前,Rambus IP核產(chǎn)品營(yíng)銷高級(jí)總監(jiān)Frank Ferro,以及Rambus大中華區(qū)總經(jīng)理蘇雷接受包括電子發(fā)燒友網(wǎng)在內(nèi)的媒體采訪時(shí),詳解了Rambus HBM3-Ready內(nèi)存子系統(tǒng)的亮點(diǎn)和市場(chǎng)。

Rambus于2016年進(jìn)入HBM的市場(chǎng),得益于之前在行業(yè)領(lǐng)域長(zhǎng)期的專業(yè)知識(shí)累積,提供包括高速接口、芯片以及2.5D等復(fù)雜IP,從而在HBM市場(chǎng)保持領(lǐng)先。

Rambus HBM3的數(shù)據(jù)傳輸速率高達(dá)8.4Gbps/pin,帶寬超過1TB/s,采用標(biāo)準(zhǔn)的16通道設(shè)置,可以達(dá)到1024位寬接口。能夠支持市面上所有主流的供應(yīng)商所提供的DRAM,并大幅提高整個(gè)產(chǎn)品的密度。除了針對(duì)AI/ML訓(xùn)練的市場(chǎng)之外,HBM3還可用于高性能計(jì)算及其他數(shù)據(jù)中心相關(guān)的主要應(yīng)用場(chǎng)景、圖形應(yīng)用程序和具體網(wǎng)絡(luò)應(yīng)用。

HBM3達(dá)到8.4Gbps,提供更寬的設(shè)計(jì)裕度

從HBM性能的歷史演進(jìn)來看,最開始的HBM1,數(shù)據(jù)傳輸速率大概可以達(dá)到1Gbps左右;2016年的HBM2,最高數(shù)據(jù)傳輸速率可以達(dá)到2Gbps;接下來是2018年的HBM2E,最高數(shù)據(jù)傳輸速率可以達(dá)到3.6Gbps。



今年海力士發(fā)布了HBM3產(chǎn)品,公開的最高數(shù)據(jù)傳輸速率達(dá)到5.2Gbps。盡管JEDEC尚未發(fā)布HBM3相關(guān)的標(biāo)準(zhǔn),但是Rambus也推出了HBM3產(chǎn)品,并將最高的數(shù)據(jù)傳輸速率提升到8.4Gbps。

Frank Ferro表示,Rambus與美光、海力士、三星廠商有著非常密切的合作,為這些DRAM廠商提供HBM PHY以及其他相關(guān)方面的支持。我們推出HBM3產(chǎn)品,目前為止在數(shù)據(jù)傳輸速率上比海力士更高,8.4Gbps的速率選擇是出于未來產(chǎn)品規(guī)劃的考量,同時(shí)也可以為客戶和設(shè)計(jì)師提供更高的設(shè)計(jì)裕度,為未來的產(chǎn)品開發(fā)做好后續(xù)準(zhǔn)備。

HBM3內(nèi)存子系統(tǒng)的主要架構(gòu)

如下圖所示,最上面有4塊DRAM內(nèi)存條,通過TSV堆疊的方式疊加在一起,下面是SoC,再往下是中介層,在中介層下面就是綠色的封裝。這些部分組成了整個(gè)2.5D的系統(tǒng)架構(gòu)。



作為一個(gè)完整的內(nèi)存子系統(tǒng)產(chǎn)品,Rambus提供的并不僅僅是IP,同時(shí)也提供泛IP,以及整個(gè)系統(tǒng)的具體設(shè)計(jì),包括經(jīng)過驗(yàn)證的PHY以及數(shù)字控制器。此外,還會(huì)在中介層和封裝上給客戶提供更好的參考設(shè)計(jì)支持和框架,因?yàn)檫@些也是整個(gè)內(nèi)存子系統(tǒng)領(lǐng)域非常重要的環(huán)節(jié)。

Frank Ferro表示,得益于在HBM領(lǐng)域多年的經(jīng)驗(yàn)和專業(yè)知識(shí),Rambus在市場(chǎng)份額上排名第一,同時(shí)已經(jīng)贏得了超過50個(gè)設(shè)計(jì)訂單,這些訂單來自數(shù)據(jù)中心、ASIC的設(shè)計(jì)方等。目前為止,我們的控制器已經(jīng)應(yīng)用在了HBM市場(chǎng)超過85%的產(chǎn)品當(dāng)中。

Rambus生產(chǎn)經(jīng)驗(yàn)的支持

Rambus有著對(duì)HBM生產(chǎn)經(jīng)驗(yàn)的支持,這里展示的一款測(cè)試芯片,集成了PHY和控制器,基于HBM2E的DRAM,數(shù)據(jù)傳輸速率可以達(dá)到4Gbps,到目前為止依舊是行業(yè)的最高水平。芯片開發(fā)一次成功,無需返工,支持臺(tái)積電等晶圓代工廠的多制程節(jié)點(diǎn)。



Rambus的PHY產(chǎn)品通過完全集成的硬核方式進(jìn)行交付,在交付之時(shí)已經(jīng)包括了完整的PHY、I/O以及Decap,方便客戶進(jìn)行系統(tǒng)集成。

對(duì)于I/O設(shè)備產(chǎn)品來說,客戶也需要廠商提供非常強(qiáng)大的技術(shù)以及相關(guān)的調(diào)試糾錯(cuò)支持,Rambus不僅可以將產(chǎn)品提供給客戶,還可提供針對(duì)ASIC power up的現(xiàn)場(chǎng)客戶支持,幫助客戶進(jìn)行現(xiàn)場(chǎng)糾錯(cuò),實(shí)現(xiàn)更好的設(shè)備調(diào)試啟動(dòng)。

不同的提供商的生產(chǎn)2.5D流程本身也不一樣,是一個(gè)非常復(fù)雜的過程,不僅需要提供用于生產(chǎn)中介層的硅產(chǎn)品,還有根據(jù)廠商各有差異的封裝以及最后組裝。而Rambus可以同時(shí)支持OSAT和CoWoS生產(chǎn)2.5D流程。

此外,Rambus與各大DRAM供應(yīng)商有著非常密切的合作關(guān)系,測(cè)試芯片已經(jīng)過充分的雙向驗(yàn)證以及測(cè)試。

2.5D封裝的挑戰(zhàn)

當(dāng)前HBM采用2.5D封裝需要考慮兩個(gè)主要的挑戰(zhàn):

Frank Ferro分析,第一,確保信號(hào)的完整性,包括與中介層之間信號(hào)的互聯(lián),這是非常重要的環(huán)節(jié),也是我們首要考慮的挑戰(zhàn),這同時(shí)要求在整個(gè)封裝系統(tǒng)上具備非常良好的控制程序。

第二,2.5D封裝整體的尺寸非常小,所以必須考慮可能產(chǎn)生的散熱問題。不過HBM本身就是一個(gè)低功耗的解決方案,可以支持很大范圍內(nèi)的工作溫度。

另外,F(xiàn)rank Ferro還指出,盡管目前HBM3的速率已經(jīng)可以達(dá)到8.4Gbps,但對(duì)比GDDRDRAM已經(jīng)達(dá)到16或者18Gbps的速率,還是有差距的。簡(jiǎn)單來講,HBM發(fā)展的限制目前集中在中介層上。在HBM2的時(shí)代,中介層本身的技術(shù)是有限制的,即一代和二代的中介層最高只能做到兩層,它設(shè)計(jì)的線寬、金屬層的厚度都是非常有限的。HBM3的速率達(dá)到8.4Gbps,為此需要在中介層的設(shè)計(jì)上實(shí)現(xiàn)進(jìn)一步優(yōu)化。隨著中介層技術(shù)的發(fā)展,其本身的厚度、金屬層和線寬都有了一定的增加,這也推動(dòng)了HBM未來的發(fā)展。

HBM3面向哪些應(yīng)用領(lǐng)域

Frank Ferro解析,數(shù)據(jù)中心是HBM3最主要的應(yīng)用場(chǎng)景,但隨著設(shè)備越來越多的邊緣化,HBM3也可能被應(yīng)用在5G設(shè)備上,特別是那些對(duì)帶寬有更高要求的5G設(shè)備。

另一個(gè)應(yīng)用場(chǎng)景是AI/ML,現(xiàn)在AI/ML的數(shù)據(jù)很多時(shí)候需要上傳到云端進(jìn)行處理,然后再重新回到本地。所以HBM3未來在這個(gè)領(lǐng)域也有一定的應(yīng)用前景。

最后是HPC,它也可以充分發(fā)揮HBM在功耗以及性能上的強(qiáng)大優(yōu)勢(shì)。目前為止,已經(jīng)有一些客戶開始與Rambus進(jìn)行早期接洽,在這個(gè)領(lǐng)域展開具體的應(yīng)用嘗試。

Rambus在中國(guó)市場(chǎng)的動(dòng)作

當(dāng)前,中國(guó)在數(shù)據(jù)中心、云計(jì)算以及AI等領(lǐng)域都走在了世界前列,因此許多國(guó)外廠商更加重視中國(guó)市場(chǎng)。Rambus也不例外,蘇雷表示,從去年開始,Rambus年度的Design Summit除了總部以外,中國(guó)是全球唯一單獨(dú)舉辦的區(qū)域。圍繞中國(guó)市場(chǎng),Rambus已經(jīng)規(guī)劃了一系列的活動(dòng)。例如,Rambus今年在全球范圍內(nèi)發(fā)布了CXL內(nèi)存互聯(lián)計(jì)劃,將和中國(guó)的云服務(wù)商、數(shù)據(jù)中心、服務(wù)器OEM、ODM和內(nèi)存公司等整個(gè)生態(tài)系統(tǒng)展開合作,以加快CXL內(nèi)存互聯(lián)計(jì)劃的開發(fā)和應(yīng)用、落地和發(fā)展。

據(jù)透露,Rambus的IP產(chǎn)品特別是HBM和GDDR6系列被業(yè)界廣泛采用,覆蓋一線的AI客戶。另外緩沖芯片、DDR5市場(chǎng)也會(huì)和內(nèi)存生態(tài)系統(tǒng)的合作伙伴開展合作。

Rambus在中國(guó)擁有強(qiáng)大的銷售、市場(chǎng)、FAE和AE團(tuán)隊(duì),并且還將持續(xù)擴(kuò)大,做好長(zhǎng)期耕耘,未來將用更好的產(chǎn)品和服務(wù)來踐行Rambus“In China,for China”的承諾。

小結(jié):

雖然目前JEDEC還沒有正式發(fā)布HBM3標(biāo)準(zhǔn),也很難去推測(cè)下一代HBM(例如HBM4)的性能,不過,F(xiàn)rank Ferro表示,整個(gè)行業(yè)對(duì)帶寬的需求幾乎是無止境、并且快速上升的。這也是Rambus將要持續(xù)進(jìn)行的技術(shù)突破,以始終保持領(lǐng)先,從而不斷滿足市場(chǎng)的新需求。

本文為電子發(fā)燒友網(wǎng)原創(chuàng)文章,作者黃晶晶,微信號(hào)kittyhjj,轉(zhuǎn)載請(qǐng)注明以上來源。如需入群交流,請(qǐng)?zhí)砑游⑿舉lecfans999,投稿發(fā)郵件到huangjingjing@elecfans.com。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 內(nèi)存
    +關(guān)注

    關(guān)注

    8

    文章

    3025

    瀏覽量

    74042
  • Rambus
    +關(guān)注

    關(guān)注

    0

    文章

    60

    瀏覽量

    18809
  • HBM3
    +關(guān)注

    關(guān)注

    0

    文章

    74

    瀏覽量

    154
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    HBM格局生變!傳三星HBM3量產(chǎn)供貨英偉達(dá),國(guó)內(nèi)廠商積極布局

    電子發(fā)燒友網(wǎng)報(bào)道(文/吳子鵬)根據(jù)韓媒sedaily 的最新報(bào)道,三星華城17號(hào)產(chǎn)線已開始量產(chǎn)并向英偉達(dá)供應(yīng)HBM3內(nèi)存。同時(shí),美光已經(jīng)為英偉達(dá)供應(yīng)HBM3E。至此,高端HBM
    的頭像 發(fā)表于 07-23 00:04 ?3782次閱讀

    HBM與GDDR內(nèi)存技術(shù)全解析

    在高性能圖形處理領(lǐng)域,內(nèi)存技術(shù)起著至關(guān)重要的作用。本文介紹兩種主要的圖形內(nèi)存技術(shù):高帶寬內(nèi)存HBM
    的頭像 發(fā)表于 11-15 10:47 ?929次閱讀
    <b class='flag-5'>HBM</b>與GDDR<b class='flag-5'>內(nèi)存</b><b class='flag-5'>技術(shù)</b>全解析

    Rambus推出業(yè)界首款HBM4控制器IP

    Rambus Inc.,業(yè)界知名的芯片和半導(dǎo)體IP供應(yīng)商,近日宣布了一項(xiàng)重大突破:推出業(yè)界首款HBM4(High Bandwidth Memory 4,高帶寬內(nèi)存4代)
    的頭像 發(fā)表于 11-14 16:33 ?480次閱讀

    Rambus宣布推出業(yè)界首款HBM4控制器IP,加速下一代AI工作負(fù)載

    基于一百多項(xiàng)HBM成功設(shè)計(jì)案例,確保芯片一次流片成功 在低延遲下提供超過HBM3兩倍的吞吐量,滿足生成式AI和高性能計(jì)算(HPC)工作負(fù)載的需求 擴(kuò)展了業(yè)界領(lǐng)先的高性能內(nèi)存解決方案的半導(dǎo)體IP
    發(fā)表于 11-13 15:36 ?392次閱讀
    <b class='flag-5'>Rambus</b>宣布推出業(yè)界首款<b class='flag-5'>HBM</b>4控制器<b class='flag-5'>IP</b>,加速下一代AI工作負(fù)載

    中國(guó)AI芯片和HBM市場(chǎng)的未來

     然而,全球HBM產(chǎn)能幾乎被SK海力士、三星和美光壟斷,其中SK海力士占據(jù)AI GPU市場(chǎng)80%份額,是Nvidia HBM3內(nèi)存獨(dú)家供應(yīng)商,且已于今年3月啟動(dòng)
    的頭像 發(fā)表于 05-28 09:40 ?927次閱讀

    臺(tái)積電新版CoWoS封裝技術(shù)拓寬系統(tǒng)級(jí)封裝尺寸

    新版CoWoS技術(shù)使得臺(tái)積電能制造出面積超過光掩模(858平方毫米)約3.3倍的硅中介層。因此,邏輯電路、8個(gè)HBM3/HBM3E內(nèi)存堆棧、I/O及其他小芯片最多可占據(jù)2831平方毫米
    的頭像 發(fā)表于 04-29 16:21 ?498次閱讀

    HBM3E起飛,沖鋒戰(zhàn)鼓已然擂響

    HBM3自2022年1月誕生,便憑借其獨(dú)特的2.5D/3D內(nèi)存架構(gòu),迅速成為高性能計(jì)算領(lǐng)域的翹楚。HBM3不僅繼承了前代產(chǎn)品的優(yōu)秀特性,更在技術(shù)
    的頭像 發(fā)表于 03-30 14:34 ?2191次閱讀
    <b class='flag-5'>HBM3</b>E起飛,沖鋒戰(zhàn)鼓已然擂響

    NVIDIA預(yù)定購(gòu)三星獨(dú)家供應(yīng)的大量12層HBM3E內(nèi)存

    據(jù)悉,HBM3E 12H內(nèi)存具備高達(dá)1280GB/s的寬帶速率以及36GB的超大存儲(chǔ)容量,較8層堆疊的HBM3 8H,分別提升了50%以上的帶寬及容量。
    的頭像 發(fā)表于 03-25 15:36 ?424次閱讀

    英偉達(dá)CEO贊譽(yù)三星HBM內(nèi)存,計(jì)劃采購(gòu)

     提及此前有人預(yù)測(cè)英偉達(dá)可能向三星購(gòu)買HBM3HBM3E等內(nèi)存,黃仁勛在會(huì)上直接認(rèn)可三星實(shí)力,稱其為“極具價(jià)值的公司”。他透露目前已對(duì)三星HBM內(nèi)
    的頭像 發(fā)表于 03-20 16:17 ?843次閱讀

    什么是HBM3E內(nèi)存?Rambus HBM3E/3內(nèi)存控制器內(nèi)核

    Rambus HBM3E/3 內(nèi)存控制器內(nèi)核針對(duì)高帶寬和低延遲進(jìn)行了優(yōu)化,以緊湊的外形和高能效的封裝
    發(fā)表于 03-20 14:12 ?2540次閱讀
    什么是<b class='flag-5'>HBM3</b>E<b class='flag-5'>內(nèi)存</b>?<b class='flag-5'>Rambus</b> <b class='flag-5'>HBM3</b>E/<b class='flag-5'>3</b><b class='flag-5'>內(nèi)存</b>控制器內(nèi)核

    AMD MI300加速器將支持HBM3E內(nèi)存

    據(jù)手機(jī)資訊網(wǎng)站IT之家了解,MI300加速器配備了HBM3內(nèi)存模塊,并面向HBM3E進(jìn)行了重新設(shè)計(jì)。另外,該公司在供應(yīng)鏈交付合作方面頗為深入,不僅與主要的存儲(chǔ)器供應(yīng)商建立了穩(wěn)固的聯(lián)系,同時(shí)也與如臺(tái)積電等重要的基板供應(yīng)商以及OSA
    的頭像 發(fā)表于 02-27 15:45 ?666次閱讀

    AMD發(fā)布HBM3e AI加速器升級(jí)版,2025年推新款I(lǐng)nstinct MI

    目前,只有英偉達(dá)的Hopper GH200芯片配備了HBM3e內(nèi)存。與現(xiàn)有的HBM3相比,HBM3e的速度提升了50%,單個(gè)平臺(tái)可以達(dá)到10TB/s的帶寬,單顆芯片能夠?qū)崿F(xiàn)5TB/s的
    的頭像 發(fā)表于 02-25 11:22 ?631次閱讀

    Rambus HBM3內(nèi)存控制器IP速率達(dá)到9.6 Gbps

    在人工智能大模型浪潮的推動(dòng)下,AI訓(xùn)練數(shù)據(jù)集正極速擴(kuò)增。以ChatGPT為例,去年11月發(fā)布的GPT-3,使用1750億個(gè)參數(shù)構(gòu)建,今年3月發(fā)布的GPT-4使用超過1.5萬億個(gè)參數(shù)。海量的數(shù)據(jù)訓(xùn)練,這對(duì)算力提出了高需求。
    的頭像 發(fā)表于 01-23 11:19 ?983次閱讀
    <b class='flag-5'>Rambus</b> <b class='flag-5'>HBM3</b><b class='flag-5'>內(nèi)存</b>控制器<b class='flag-5'>IP</b><b class='flag-5'>速率</b>達(dá)到9.6 <b class='flag-5'>Gbps</b>

    深度解析HBM內(nèi)存技術(shù)

    HBM作為基于3D堆棧工藝的高性能DRAM,打破內(nèi)存帶寬及功耗瓶頸。HBM(High Bandwidth Memory)即高帶寬存儲(chǔ)器,通過使用先進(jìn)
    的頭像 發(fā)表于 01-02 09:59 ?5276次閱讀
    深度解析<b class='flag-5'>HBM</b><b class='flag-5'>內(nèi)存</b><b class='flag-5'>技術(shù)</b>

    英偉達(dá)斥資預(yù)購(gòu)HBM3內(nèi)存,為H200及超級(jí)芯片儲(chǔ)備產(chǎn)能

    據(jù)最新傳聞,英偉達(dá)正在籌劃發(fā)布兩款搭載HBM3E內(nèi)存的新品——包括141GB HBM3E的H200 GPU及GH200超級(jí)芯片,這也進(jìn)一步說明了對(duì)于HBM
    的頭像 發(fā)表于 01-02 09:27 ?780次閱讀