RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

AI算力應(yīng)用中的光模塊產(chǎn)品

易飛揚(yáng)通信 ? 來(lái)源:易飛揚(yáng)通信 ? 作者:易飛揚(yáng)通信 ? 2024-01-02 15:32 ? 次閱讀

以ChatGPT為代表的AI大模型應(yīng)用普及將推動(dòng)算力需求快速增長(zhǎng),服務(wù)器產(chǎn)業(yè)鏈?zhǔn)瞧渲兄匾氖芤姝h(huán)節(jié)之一,AI計(jì)算的普及將推動(dòng)服務(wù)器產(chǎn)業(yè)鏈光模塊向800G升級(jí)提速。

算力網(wǎng)絡(luò)驅(qū)動(dòng)下光模塊市場(chǎng)需求預(yù)測(cè)

光模塊是數(shù)據(jù)中心內(nèi)部互連和數(shù)據(jù)中心相互連接的核心部件。100G和400G是主流產(chǎn)品,800G過(guò)去主要用在超算等領(lǐng)域。據(jù)LightCounting預(yù)計(jì),2023年800G全球普及率僅0.62%。而以ChatGPT為代表的AI大模型,對(duì)數(shù)據(jù)中心內(nèi)外的數(shù)據(jù)流量都提出了新要求,有望推動(dòng)光模塊加速向800G升級(jí)。800G光模塊將從2025年底開始主導(dǎo)光模塊市場(chǎng)。

wKgZomWTvB6ABUeHAAFeabqIMvw245.png

根據(jù)LightCounting的數(shù)據(jù),2016年至2020年,全球光模塊市場(chǎng)規(guī)模從58.6億美元增長(zhǎng)到66.7億美元,預(yù)測(cè)2025年全球光模塊市場(chǎng)將達(dá)到113億美元,為2020年的1.7倍。從結(jié)構(gòu)上看數(shù)通市場(chǎng)占60%,電信市場(chǎng)占40%左右。

wKgaomWTvB-AWz3zAAC-Zc-MRkw735.png

AI算力場(chǎng)景光模塊應(yīng)用情況

首先我們以英偉達(dá)的SuperPOD為例測(cè)算單顆GPU與光模塊的比例。測(cè)算僅考慮IB網(wǎng)絡(luò)對(duì)應(yīng)的光模塊需求。以140個(gè)節(jié)點(diǎn)的集群為例,每臺(tái)舉例服務(wù)器需要8顆GPU芯片,共需140×8=1120顆芯片;集群中每20臺(tái)服務(wù)器組成一個(gè)SU(scalable units,可擴(kuò)展單元),共7個(gè)SU。IB網(wǎng)絡(luò)架構(gòu)下實(shí)現(xiàn)了完整的胖樹(Fat-Tree)拓?fù)浣Y(jié)構(gòu),胖樹架構(gòu)在訓(xùn)練場(chǎng)景中最優(yōu)的配置是上下行端口數(shù)一樣,即無(wú)阻塞的網(wǎng)絡(luò),具體來(lái)看:

第一層:每個(gè)SU 中配置8臺(tái)葉交換機(jī),共有56臺(tái)葉交換機(jī);

第二層:每10臺(tái)脊交換機(jī)組成一個(gè)交換機(jī)組Spine Group( SG),每個(gè)SU 的第一個(gè)葉交換機(jī)連接到SG1中的每個(gè)交換機(jī),每個(gè)SU的第二個(gè)葉交換機(jī)連接到SG2中的每個(gè)交換機(jī),共有80個(gè)脊交換機(jī);

第三層:每14臺(tái)核心交換機(jī)組成一個(gè)交換機(jī)組Core Group(CG),對(duì)應(yīng)共28個(gè)核心交換機(jī)。

使用系統(tǒng)的對(duì)應(yīng)計(jì)算側(cè)和存儲(chǔ)側(cè)線纜全部采用AOC有源光纜,因此每個(gè)端口對(duì)應(yīng)一個(gè)光模塊,即每條光纜對(duì)應(yīng)2個(gè)光模塊,因此計(jì)算側(cè)和存儲(chǔ)側(cè)共需要(1120+1124+1120)×2+(280+92+288)×2=8048個(gè)光模塊,即單顆GPU對(duì)應(yīng)所需200G光模塊數(shù)量約為1:7.2

DGX GH200超級(jí)計(jì)算機(jī)搭載256個(gè)超級(jí)芯片,每個(gè)超級(jí)芯片可視為一個(gè)服務(wù)器,通過(guò)交換機(jī)進(jìn)行互聯(lián)。從結(jié)構(gòu)上來(lái)看,超級(jí)計(jì)算機(jī)采用兩層的胖樹拓?fù)浣Y(jié)構(gòu),第一、二層分別使用96個(gè)、36個(gè)交換機(jī),每臺(tái)交換機(jī)擁有32個(gè)速率為800G的端口;此外超級(jí)計(jì)算機(jī)還配備了24個(gè)IB交換機(jī)用于IB網(wǎng)絡(luò)。按照端口進(jìn)行估算,L1層距離較近因此假定使用銅纜進(jìn)行連接不涉及光模塊,L2層36個(gè)交換機(jī)在無(wú)收斂胖樹架構(gòu)下,第二層交換機(jī)端口向下與L1層交換機(jī)上行端口互聯(lián),因此共需要36×32×2=1152個(gè)800G光模塊;IB網(wǎng)絡(luò)架構(gòu)下,24臺(tái)交換機(jī)需要24×32=768個(gè)800G光模塊;則DGX GH200超級(jí)計(jì)算機(jī)共需要1152+768=1920個(gè)800G光模塊,對(duì)應(yīng)每顆芯片12個(gè)800G光模塊。則GPT-3單日完成訓(xùn)練需要8萬(wàn)顆以上200G光模塊,如果考慮到FLOPS的利用率約為20%-30%,則需要光模塊的數(shù)量將約為35萬(wàn)顆。

易飛揚(yáng)應(yīng)用于算力場(chǎng)景的光模塊

AI發(fā)展促進(jìn)了海量光模塊需求,易飛揚(yáng)則已于2023年完成800G/400G AI應(yīng)用光模塊產(chǎn)線建設(shè)任務(wù),新建成的生產(chǎn)線主要用于4×100G PAM4和8×100G PAM4光模塊和有源光纜的生產(chǎn)。

wKgZomWTvB-AWaavAAAxZYpJhRM309.png

wKgaomWTvB-Aay2pAAA1M0y3A5I336.png

得益于供應(yīng)鏈的支持,易飛揚(yáng)的系列AI光模塊量產(chǎn)順利,公司本身的產(chǎn)品多樣化設(shè)計(jì)能力、訂單能力和供應(yīng)鏈能力形成了較好的匹配關(guān)系??梢詾橹行】蛻籼峁╈`活有效的需求交付和樣品測(cè)試。

審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    30728

    瀏覽量

    268871
  • 光模塊
    +關(guān)注

    關(guān)注

    77

    文章

    1261

    瀏覽量

    58990
  • 算力
    +關(guān)注

    關(guān)注

    1

    文章

    964

    瀏覽量

    14792
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    杰和課堂|帶你認(rèn)識(shí)

    杰和課堂|帶你認(rèn)識(shí)力人工智能浪潮洶涌的今天,一詞頻繁出現(xiàn)在各類科技新聞、產(chǎn)業(yè)發(fā)展報(bào)告。了解過(guò)杰和科技產(chǎn)品的讀者們,也會(huì)在杰和各
    的頭像 發(fā)表于 12-06 10:24 ?248次閱讀
    杰和課堂|帶你認(rèn)識(shí)<b class='flag-5'>算</b><b class='flag-5'>力</b>

    企業(yè)AI租賃是什么

    企業(yè)AI租賃是指企業(yè)通過(guò)互聯(lián)網(wǎng)向?qū)I(yè)的提供商租用所需的計(jì)算資源,以滿足其AI應(yīng)用的需求。
    的頭像 發(fā)表于 11-14 09:30 ?466次閱讀

    GPU開發(fā)平臺(tái)是什么

    隨著AI技術(shù)的廣泛應(yīng)用,需求呈現(xiàn)出爆發(fā)式增長(zhǎng)。AI租賃作為一種新興的服務(wù)模式,正逐漸成為
    的頭像 發(fā)表于 10-31 10:31 ?162次閱讀

    青云科技強(qiáng)化AI架構(gòu),升級(jí)產(chǎn)品與服務(wù)體系

    10月9日,青云科技正式揭曉了其升級(jí)版的產(chǎn)品與服務(wù)陣容、行業(yè)及場(chǎng)景定制化解決方案,以及全新的生態(tài)戰(zhàn)略。該公司旨在通過(guò)AI平臺(tái)、AI
    的頭像 發(fā)表于 10-10 16:42 ?466次閱讀

    九章云極DataCanvas公司「包」產(chǎn)品璀璨亮相2024國(guó)大會(huì)!

    九章云極DataCanvas公司技術(shù)專家向與會(huì)者詳細(xì)介紹包的產(chǎn)品能力和創(chuàng)新模式,收獲行業(yè)伙伴的高度認(rèn)可。力作為AI時(shí)代的數(shù)字能源,將在
    的頭像 發(fā)表于 09-29 14:44 ?774次閱讀
    九章云極DataCanvas公司「<b class='flag-5'>算</b><b class='flag-5'>力</b>包」<b class='flag-5'>產(chǎn)品</b>璀璨亮相2024<b class='flag-5'>中</b>國(guó)<b class='flag-5'>算</b><b class='flag-5'>力</b>大會(huì)!

    大模型時(shí)代的需求

    現(xiàn)在AI已進(jìn)入大模型時(shí)代,各企業(yè)都爭(zhēng)相部署大模型,但如何保證大模型的,以及相關(guān)的穩(wěn)定性和性能,是一個(gè)極為重要的問(wèn)題,帶著這個(gè)極為重要的問(wèn)題,我需要在此書中找到答案。
    發(fā)表于 08-20 09:04

    軟通動(dòng)力亮相2024國(guó)移動(dòng)網(wǎng)絡(luò)大會(huì),共繪網(wǎng)絡(luò)新藍(lán)圖

    4月28日至29日,以“網(wǎng)絡(luò)點(diǎn)亮AI新時(shí)代”為主題的2024國(guó)移動(dòng)網(wǎng)絡(luò)大會(huì)在蘇州隆重舉
    的頭像 發(fā)表于 05-06 10:20 ?468次閱讀
    軟通動(dòng)力亮相2024<b class='flag-5'>中</b>國(guó)移動(dòng)<b class='flag-5'>算</b><b class='flag-5'>力</b>網(wǎng)絡(luò)大會(huì),共繪<b class='flag-5'>算</b><b class='flag-5'>力</b>網(wǎng)絡(luò)新藍(lán)圖

    隨著AI需求不斷增強(qiáng),800G模塊的需求不斷增大

    在人工智能芯片(AIGC)和不斷發(fā)展的背景下,模塊產(chǎn)業(yè)正在迎來(lái)快速發(fā)展的時(shí)期。隨著模塊
    的頭像 發(fā)表于 04-11 10:54 ?594次閱讀
    隨著<b class='flag-5'>AI</b><b class='flag-5'>算</b><b class='flag-5'>力</b>需求不斷增強(qiáng),800G<b class='flag-5'>光</b><b class='flag-5'>模塊</b>的需求不斷增大

    AI的需求推動(dòng)模塊行業(yè)快速迭代

    近期,由OpenAI發(fā)布的人工智能文生視頻大模型Sora再次引起了不小的轟動(dòng),繼ChatGPT之后,Sora的推出讓AIGC(生成式人工智能)再度成為行業(yè)焦點(diǎn),AI大模型的快速迭代升級(jí)對(duì)網(wǎng)絡(luò)架構(gòu)提出了更高要求,推動(dòng)模塊
    的頭像 發(fā)表于 04-10 14:07 ?333次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>算</b><b class='flag-5'>力</b>的需求推動(dòng)<b class='flag-5'>光</b><b class='flag-5'>模塊</b>行業(yè)快速迭代

    256Tops!CSA1-N8S1684X服務(wù)器

    (基于BM1684X的高服務(wù)器)高AI處理器BM1684X搭載了BM1684AI
    的頭像 發(fā)表于 03-23 08:02 ?1605次閱讀
    256Tops<b class='flag-5'>算</b><b class='flag-5'>力</b>!CSA1-N8S1684X<b class='flag-5'>算</b><b class='flag-5'>力</b>服務(wù)器

    大茉莉X16-P,5800M大稱王稱霸

    Rykj365
    發(fā)布于 :2024年01月25日 14:54:52

    立足,聚焦AI!順網(wǎng)科技全面走進(jìn)AI時(shí)代

    “立足,聚焦AI”,順網(wǎng)科技進(jìn)軍AI時(shí)代的號(hào)角已被吹響。 1月18日,順網(wǎng)科技(300113.SZ)以“躍遷·向未來(lái)”為主題的戰(zhàn)略升
    的頭像 發(fā)表于 01-19 10:57 ?456次閱讀
    立足<b class='flag-5'>算</b><b class='flag-5'>力</b>,聚焦<b class='flag-5'>AI</b>!順網(wǎng)科技全面走進(jìn)<b class='flag-5'>AI</b>智<b class='flag-5'>算</b>時(shí)代

    衛(wèi)星通信序幕拉開,AI浪潮澎湃

    AI浪潮催生要求,基礎(chǔ)設(shè)施需求持續(xù)提升。AIGC帶來(lái)的超大需求拉動(dòng)通信基礎(chǔ)設(shè)施建設(shè)及擴(kuò)容,
    發(fā)表于 01-03 10:22 ?385次閱讀
    衛(wèi)星通信序幕拉開,<b class='flag-5'>AI</b><b class='flag-5'>算</b><b class='flag-5'>力</b>浪潮澎湃

    認(rèn)識(shí)一下AI應(yīng)用模塊產(chǎn)品

    以ChatGPT為代表的AI大模型應(yīng)用普及將推動(dòng)需求快速增長(zhǎng),服務(wù)器產(chǎn)業(yè)鏈?zhǔn)瞧渲兄匾氖芤姝h(huán)節(jié)之一,AI計(jì)算的普及將推動(dòng)服務(wù)器產(chǎn)業(yè)鏈
    的頭像 發(fā)表于 12-29 16:14 ?940次閱讀
    認(rèn)識(shí)一下<b class='flag-5'>AI</b><b class='flag-5'>算</b><b class='flag-5'>力</b>應(yīng)用<b class='flag-5'>中</b>的<b class='flag-5'>光</b><b class='flag-5'>模塊</b><b class='flag-5'>產(chǎn)品</b>

    弘信電子與AI服務(wù)器合資,助力國(guó)產(chǎn)芯片落地

    此外,弘信電子近期在AI業(yè)務(wù)上取得了突破性進(jìn)展,這并非源自本土化的積累,而是依賴于團(tuán)隊(duì)敏銳的戰(zhàn)略眼光和強(qiáng)烈的創(chuàng)新動(dòng)力。此次投資是弘信電子在AI
    的頭像 發(fā)表于 12-25 09:30 ?954次閱讀
    RM新时代网站-首页