RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

最新HBM3內(nèi)存技術(shù),速率可達(dá)8.4Gbps,Rambus從IP到系統(tǒng)再到封裝的全面優(yōu)化

花茶晶晶 ? 來源:電子發(fā)燒友網(wǎng) ? 作者:黃晶晶 ? 2021-09-01 15:59 ? 次閱讀


電子發(fā)燒友網(wǎng)報道(文/黃晶晶)近幾年,數(shù)據(jù)中心、云服務(wù)以及物聯(lián)網(wǎng)設(shè)備保持需求的高速增長。在大數(shù)據(jù)的處理方面,人工智能機器學(xué)習(xí)AI/ML)的使用率也將日益提升,預(yù)計到2025年,超過25%的服務(wù)器出貨將會專供于人工智能領(lǐng)域。在AI/ML當(dāng)中,內(nèi)存和I/O帶寬是影響系統(tǒng)性能至關(guān)重要的因素,這又促進業(yè)界不斷提供最新的技術(shù),去滿足內(nèi)存和I/O的帶寬性能需求。

英偉達(dá)、AMDGPU/CPU芯片封裝中,已經(jīng)應(yīng)用到了HBM內(nèi)存技術(shù),通過在一個2.5D封裝中將GPU/CPU與HBM內(nèi)存進行整合能夠提升內(nèi)存帶寬、加速數(shù)據(jù)存儲的速度,從而應(yīng)對神經(jīng)網(wǎng)絡(luò)、AI訓(xùn)練等的內(nèi)存帶寬需求。據(jù)了解,燧原科技也在其GPU芯片中使用了HBM2技術(shù),由Rambus提供IP支持。

現(xiàn)在,Rambus公司率先在業(yè)界推出支持HBM3的內(nèi)存子系統(tǒng),速率可達(dá)8.4Gbps,能夠提供超過1TB/s的內(nèi)存帶寬,它的參數(shù)指標(biāo)較HBM2實現(xiàn)了大幅的提升。

日前,Rambus IP核產(chǎn)品營銷高級總監(jiān)Frank Ferro,以及Rambus大中華區(qū)總經(jīng)理蘇雷接受包括電子發(fā)燒友網(wǎng)在內(nèi)的媒體采訪時,詳解了Rambus HBM3-Ready內(nèi)存子系統(tǒng)的亮點和市場。

Rambus于2016年進入HBM的市場,得益于之前在行業(yè)領(lǐng)域長期的專業(yè)知識累積,提供包括高速接口、芯片以及2.5D等復(fù)雜IP,從而在HBM市場保持領(lǐng)先。

Rambus HBM3的數(shù)據(jù)傳輸速率高達(dá)8.4Gbps/pin,帶寬超過1TB/s,采用標(biāo)準(zhǔn)的16通道設(shè)置,可以達(dá)到1024位寬接口。能夠支持市面上所有主流的供應(yīng)商所提供的DRAM,并大幅提高整個產(chǎn)品的密度。除了針對AI/ML訓(xùn)練的市場之外,HBM3還可用于高性能計算及其他數(shù)據(jù)中心相關(guān)的主要應(yīng)用場景、圖形應(yīng)用程序和具體網(wǎng)絡(luò)應(yīng)用。

HBM3達(dá)到8.4Gbps,提供更寬的設(shè)計裕度

從HBM性能的歷史演進來看,最開始的HBM1,數(shù)據(jù)傳輸速率大概可以達(dá)到1Gbps左右;2016年的HBM2,最高數(shù)據(jù)傳輸速率可以達(dá)到2Gbps;接下來是2018年的HBM2E,最高數(shù)據(jù)傳輸速率可以達(dá)到3.6Gbps。



今年海力士發(fā)布了HBM3產(chǎn)品,公開的最高數(shù)據(jù)傳輸速率達(dá)到5.2Gbps。盡管JEDEC尚未發(fā)布HBM3相關(guān)的標(biāo)準(zhǔn),但是Rambus也推出了HBM3產(chǎn)品,并將最高的數(shù)據(jù)傳輸速率提升到8.4Gbps。

Frank Ferro表示,Rambus與美光、海力士、三星廠商有著非常密切的合作,為這些DRAM廠商提供HBM PHY以及其他相關(guān)方面的支持。我們推出HBM3產(chǎn)品,目前為止在數(shù)據(jù)傳輸速率上比海力士更高,8.4Gbps的速率選擇是出于未來產(chǎn)品規(guī)劃的考量,同時也可以為客戶和設(shè)計師提供更高的設(shè)計裕度,為未來的產(chǎn)品開發(fā)做好后續(xù)準(zhǔn)備。

HBM3內(nèi)存子系統(tǒng)的主要架構(gòu)

如下圖所示,最上面有4塊DRAM內(nèi)存條,通過TSV堆疊的方式疊加在一起,下面是SoC,再往下是中介層,在中介層下面就是綠色的封裝。這些部分組成了整個2.5D的系統(tǒng)架構(gòu)。



作為一個完整的內(nèi)存子系統(tǒng)產(chǎn)品,Rambus提供的并不僅僅是IP,同時也提供泛IP,以及整個系統(tǒng)的具體設(shè)計,包括經(jīng)過驗證的PHY以及數(shù)字控制器。此外,還會在中介層和封裝上給客戶提供更好的參考設(shè)計支持和框架,因為這些也是整個內(nèi)存子系統(tǒng)領(lǐng)域非常重要的環(huán)節(jié)。

Frank Ferro表示,得益于在HBM領(lǐng)域多年的經(jīng)驗和專業(yè)知識,Rambus在市場份額上排名第一,同時已經(jīng)贏得了超過50個設(shè)計訂單,這些訂單來自數(shù)據(jù)中心、ASIC的設(shè)計方等。目前為止,我們的控制器已經(jīng)應(yīng)用在了HBM市場超過85%的產(chǎn)品當(dāng)中。

Rambus生產(chǎn)經(jīng)驗的支持

Rambus有著對HBM生產(chǎn)經(jīng)驗的支持,這里展示的一款測試芯片,集成了PHY和控制器,基于HBM2E的DRAM,數(shù)據(jù)傳輸速率可以達(dá)到4Gbps,到目前為止依舊是行業(yè)的最高水平。芯片開發(fā)一次成功,無需返工,支持臺積電等晶圓代工廠的多制程節(jié)點。



Rambus的PHY產(chǎn)品通過完全集成的硬核方式進行交付,在交付之時已經(jīng)包括了完整的PHY、I/O以及Decap,方便客戶進行系統(tǒng)集成。

對于I/O設(shè)備產(chǎn)品來說,客戶也需要廠商提供非常強大的技術(shù)以及相關(guān)的調(diào)試糾錯支持,Rambus不僅可以將產(chǎn)品提供給客戶,還可提供針對ASIC power up的現(xiàn)場客戶支持,幫助客戶進行現(xiàn)場糾錯,實現(xiàn)更好的設(shè)備調(diào)試啟動。

不同的提供商的生產(chǎn)2.5D流程本身也不一樣,是一個非常復(fù)雜的過程,不僅需要提供用于生產(chǎn)中介層的硅產(chǎn)品,還有根據(jù)廠商各有差異的封裝以及最后組裝。而Rambus可以同時支持OSAT和CoWoS生產(chǎn)2.5D流程。

此外,Rambus與各大DRAM供應(yīng)商有著非常密切的合作關(guān)系,測試芯片已經(jīng)過充分的雙向驗證以及測試。

2.5D封裝的挑戰(zhàn)

當(dāng)前HBM采用2.5D封裝需要考慮兩個主要的挑戰(zhàn):

Frank Ferro分析,第一,確保信號的完整性,包括與中介層之間信號的互聯(lián),這是非常重要的環(huán)節(jié),也是我們首要考慮的挑戰(zhàn),這同時要求在整個封裝系統(tǒng)上具備非常良好的控制程序。

第二,2.5D封裝整體的尺寸非常小,所以必須考慮可能產(chǎn)生的散熱問題。不過HBM本身就是一個低功耗的解決方案,可以支持很大范圍內(nèi)的工作溫度。

另外,F(xiàn)rank Ferro還指出,盡管目前HBM3的速率已經(jīng)可以達(dá)到8.4Gbps,但對比GDDRDRAM已經(jīng)達(dá)到16或者18Gbps的速率,還是有差距的。簡單來講,HBM發(fā)展的限制目前集中在中介層上。在HBM2的時代,中介層本身的技術(shù)是有限制的,即一代和二代的中介層最高只能做到兩層,它設(shè)計的線寬、金屬層的厚度都是非常有限的。HBM3的速率達(dá)到8.4Gbps,為此需要在中介層的設(shè)計上實現(xiàn)進一步優(yōu)化。隨著中介層技術(shù)的發(fā)展,其本身的厚度、金屬層和線寬都有了一定的增加,這也推動了HBM未來的發(fā)展。

HBM3面向哪些應(yīng)用領(lǐng)域

Frank Ferro解析,數(shù)據(jù)中心是HBM3最主要的應(yīng)用場景,但隨著設(shè)備越來越多的邊緣化,HBM3也可能被應(yīng)用在5G設(shè)備上,特別是那些對帶寬有更高要求的5G設(shè)備。

另一個應(yīng)用場景是AI/ML,現(xiàn)在AI/ML的數(shù)據(jù)很多時候需要上傳到云端進行處理,然后再重新回到本地。所以HBM3未來在這個領(lǐng)域也有一定的應(yīng)用前景。

最后是HPC,它也可以充分發(fā)揮HBM在功耗以及性能上的強大優(yōu)勢。目前為止,已經(jīng)有一些客戶開始與Rambus進行早期接洽,在這個領(lǐng)域展開具體的應(yīng)用嘗試。

Rambus在中國市場的動作

當(dāng)前,中國在數(shù)據(jù)中心、云計算以及AI等領(lǐng)域都走在了世界前列,因此許多國外廠商更加重視中國市場。Rambus也不例外,蘇雷表示,從去年開始,Rambus年度的Design Summit除了總部以外,中國是全球唯一單獨舉辦的區(qū)域。圍繞中國市場,Rambus已經(jīng)規(guī)劃了一系列的活動。例如,Rambus今年在全球范圍內(nèi)發(fā)布了CXL內(nèi)存互聯(lián)計劃,將和中國的云服務(wù)商、數(shù)據(jù)中心、服務(wù)器OEM、ODM和內(nèi)存公司等整個生態(tài)系統(tǒng)展開合作,以加快CXL內(nèi)存互聯(lián)計劃的開發(fā)和應(yīng)用、落地和發(fā)展。

據(jù)透露,Rambus的IP產(chǎn)品特別是HBM和GDDR6系列被業(yè)界廣泛采用,覆蓋一線的AI客戶。另外緩沖芯片、DDR5市場也會和內(nèi)存生態(tài)系統(tǒng)的合作伙伴開展合作。

Rambus在中國擁有強大的銷售、市場、FAE和AE團隊,并且還將持續(xù)擴大,做好長期耕耘,未來將用更好的產(chǎn)品和服務(wù)來踐行Rambus“In China,for China”的承諾。

小結(jié):

雖然目前JEDEC還沒有正式發(fā)布HBM3標(biāo)準(zhǔn),也很難去推測下一代HBM(例如HBM4)的性能,不過,F(xiàn)rank Ferro表示,整個行業(yè)對帶寬的需求幾乎是無止境、并且快速上升的。這也是Rambus將要持續(xù)進行的技術(shù)突破,以始終保持領(lǐng)先,從而不斷滿足市場的新需求。

本文為電子發(fā)燒友網(wǎng)原創(chuàng)文章,作者黃晶晶,微信號kittyhjj,轉(zhuǎn)載請注明以上來源。如需入群交流,請?zhí)砑游⑿舉lecfans999,投稿發(fā)郵件到huangjingjing@elecfans.com。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 內(nèi)存
    +關(guān)注

    關(guān)注

    8

    文章

    3019

    瀏覽量

    74002
  • Rambus
    +關(guān)注

    關(guān)注

    0

    文章

    60

    瀏覽量

    18803
  • HBM3
    +關(guān)注

    關(guān)注

    0

    文章

    74

    瀏覽量

    154
收藏 人收藏

    評論

    相關(guān)推薦

    HBM格局生變!傳三星HBM3量產(chǎn)供貨英偉達(dá),國內(nèi)廠商積極布局

    電子發(fā)燒友網(wǎng)報道(文/吳子鵬)根據(jù)韓媒sedaily 的最新報道,三星華城17號產(chǎn)線已開始量產(chǎn)并向英偉達(dá)供應(yīng)HBM3內(nèi)存。同時,美光已經(jīng)為英偉達(dá)供應(yīng)HBM3E。至此,高端HBM
    的頭像 發(fā)表于 07-23 00:04 ?3757次閱讀

    HBM與GDDR內(nèi)存技術(shù)全解析

    在高性能圖形處理領(lǐng)域,內(nèi)存技術(shù)起著至關(guān)重要的作用。本文介紹兩種主要的圖形內(nèi)存技術(shù):高帶寬內(nèi)存HBM
    的頭像 發(fā)表于 11-15 10:47 ?856次閱讀
    <b class='flag-5'>HBM</b>與GDDR<b class='flag-5'>內(nèi)存</b><b class='flag-5'>技術(shù)</b>全解析

    Rambus推出業(yè)界首款HBM4控制器IP

    Rambus Inc.,業(yè)界知名的芯片和半導(dǎo)體IP供應(yīng)商,近日宣布了一項重大突破:推出業(yè)界首款HBM4(High Bandwidth Memory 4,高帶寬內(nèi)存4代)
    的頭像 發(fā)表于 11-14 16:33 ?456次閱讀

    Rambus宣布推出業(yè)界首款HBM4控制器IP,加速下一代AI工作負(fù)載

    基于一百多項HBM成功設(shè)計案例,確保芯片一次流片成功 在低延遲下提供超過HBM3兩倍的吞吐量,滿足生成式AI和高性能計算(HPC)工作負(fù)載的需求 擴展了業(yè)界領(lǐng)先的高性能內(nèi)存解決方案的半導(dǎo)體IP
    發(fā)表于 11-13 15:36 ?383次閱讀
    <b class='flag-5'>Rambus</b>宣布推出業(yè)界首款<b class='flag-5'>HBM</b>4控制器<b class='flag-5'>IP</b>,加速下一代AI工作負(fù)載

    中國AI芯片和HBM市場的未來

     然而,全球HBM產(chǎn)能幾乎被SK海力士、三星和美光壟斷,其中SK海力士占據(jù)AI GPU市場80%份額,是Nvidia HBM3內(nèi)存獨家供應(yīng)商,且已于今年3月啟動
    的頭像 發(fā)表于 05-28 09:40 ?905次閱讀

    臺積電新版CoWoS封裝技術(shù)拓寬系統(tǒng)封裝尺寸

    新版CoWoS技術(shù)使得臺積電能制造出面積超過光掩模(858平方毫米)約3.3倍的硅中介層。因此,邏輯電路、8個HBM3/HBM3E內(nèi)存堆棧、I/O及其他小芯片最多可占據(jù)2831平方毫米
    的頭像 發(fā)表于 04-29 16:21 ?492次閱讀

    HBM3E起飛,沖鋒戰(zhàn)鼓已然擂響

    HBM3自2022年1月誕生,便憑借其獨特的2.5D/3D內(nèi)存架構(gòu),迅速成為高性能計算領(lǐng)域的翹楚。HBM3不僅繼承了前代產(chǎn)品的優(yōu)秀特性,更在技術(shù)
    的頭像 發(fā)表于 03-30 14:34 ?2178次閱讀
    <b class='flag-5'>HBM3</b>E起飛,沖鋒戰(zhàn)鼓已然擂響

    NVIDIA預(yù)定購三星獨家供應(yīng)的大量12層HBM3E內(nèi)存

    據(jù)悉,HBM3E 12H內(nèi)存具備高達(dá)1280GB/s的寬帶速率以及36GB的超大存儲容量,較8層堆疊的HBM3 8H,分別提升了50%以上的帶寬及容量。
    的頭像 發(fā)表于 03-25 15:36 ?418次閱讀

    英偉達(dá)CEO贊譽三星HBM內(nèi)存,計劃采購

     提及此前有人預(yù)測英偉達(dá)可能向三星購買HBM3HBM3E等內(nèi)存,黃仁勛在會上直接認(rèn)可三星實力,稱其為“極具價值的公司”。他透露目前已對三星HBM內(nèi)
    的頭像 發(fā)表于 03-20 16:17 ?835次閱讀

    什么是HBM3E內(nèi)存Rambus HBM3E/3內(nèi)存控制器內(nèi)核

    Rambus HBM3E/3 內(nèi)存控制器內(nèi)核針對高帶寬和低延遲進行了優(yōu)化,以緊湊的外形和高能效的封裝
    發(fā)表于 03-20 14:12 ?2482次閱讀
    什么是<b class='flag-5'>HBM3</b>E<b class='flag-5'>內(nèi)存</b>?<b class='flag-5'>Rambus</b> <b class='flag-5'>HBM3</b>E/<b class='flag-5'>3</b><b class='flag-5'>內(nèi)存</b>控制器內(nèi)核

    AMD MI300加速器將支持HBM3E內(nèi)存

    據(jù)手機資訊網(wǎng)站IT之家了解,MI300加速器配備了HBM3內(nèi)存模塊,并面向HBM3E進行了重新設(shè)計。另外,該公司在供應(yīng)鏈交付合作方面頗為深入,不僅與主要的存儲器供應(yīng)商建立了穩(wěn)固的聯(lián)系,同時也與如臺積電等重要的基板供應(yīng)商以及OSA
    的頭像 發(fā)表于 02-27 15:45 ?655次閱讀

    AMD發(fā)布HBM3e AI加速器升級版,2025年推新款I(lǐng)nstinct MI

    目前,只有英偉達(dá)的Hopper GH200芯片配備了HBM3e內(nèi)存。與現(xiàn)有的HBM3相比,HBM3e的速度提升了50%,單個平臺可以達(dá)到10TB/s的帶寬,單顆芯片能夠?qū)崿F(xiàn)5TB/s的
    的頭像 發(fā)表于 02-25 11:22 ?615次閱讀

    Rambus HBM3內(nèi)存控制器IP速率達(dá)到9.6 Gbps

    在人工智能大模型浪潮的推動下,AI訓(xùn)練數(shù)據(jù)集正極速擴增。以ChatGPT為例,去年11月發(fā)布的GPT-3,使用1750億個參數(shù)構(gòu)建,今年3月發(fā)布的GPT-4使用超過1.5萬億個參數(shù)。海量的數(shù)據(jù)訓(xùn)練,這對算力提出了高需求。
    的頭像 發(fā)表于 01-23 11:19 ?971次閱讀
    <b class='flag-5'>Rambus</b> <b class='flag-5'>HBM3</b><b class='flag-5'>內(nèi)存</b>控制器<b class='flag-5'>IP</b><b class='flag-5'>速率</b>達(dá)到9.6 <b class='flag-5'>Gbps</b>

    深度解析HBM內(nèi)存技術(shù)

    HBM作為基于3D堆棧工藝的高性能DRAM,打破內(nèi)存帶寬及功耗瓶頸。HBM(High Bandwidth Memory)即高帶寬存儲器,通過使用先進
    的頭像 發(fā)表于 01-02 09:59 ?5219次閱讀
    深度解析<b class='flag-5'>HBM</b><b class='flag-5'>內(nèi)存</b><b class='flag-5'>技術(shù)</b>

    英偉達(dá)斥資預(yù)購HBM3內(nèi)存,為H200及超級芯片儲備產(chǎn)能

    據(jù)最新傳聞,英偉達(dá)正在籌劃發(fā)布兩款搭載HBM3E內(nèi)存的新品——包括141GB HBM3E的H200 GPU及GH200超級芯片,這也進一步說明了對于HBM
    的頭像 發(fā)表于 01-02 09:27 ?765次閱讀
    RM新时代网站-首页