RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

云端算力芯片為什么是科技石油?

jf_C6sANWk1 ? 來(lái)源:阿寶1990 ? 2023-07-12 10:21 ? 次閱讀

在追逐智能化的道路上,云端算力芯片扮演著不可或缺的角色。其強(qiáng)大的計(jì)算能力和無(wú)限的潛力,推動(dòng)著科技的創(chuàng)新和進(jìn)步。隨著技術(shù)的不斷發(fā)展,我們有理由相信云端算力芯片將繼續(xù)引領(lǐng)人工智能的未來(lái),為我們帶來(lái)更加智能、高效的世界。

自人類開采第一口油井開始,石油就深深融入進(jìn)了人類生活的方方面面。小到鍋碗瓢盆芯片,大到飛機(jī)火箭航母,沒(méi)有哪個(gè)環(huán)節(jié)離得開石油的參與。如果說(shuō)石油是工業(yè)的血液,電力與網(wǎng)絡(luò)信息時(shí)代社會(huì)的骨架,那么算力就是AI時(shí)代構(gòu)建萬(wàn)物的基礎(chǔ)。

21世紀(jì)前后,人類逐漸從工業(yè)時(shí)代步入信息時(shí)代,當(dāng)下AI時(shí)代的大門又再度緩緩開啟。2023年以來(lái),以ChatGPT為首的生成式AI逐漸滲透到了各行各業(yè)中,有人說(shuō),這或許又是一個(gè)IPhone時(shí)刻。AI起舞,算力搭臺(tái),算力,或者說(shuō)是算力芯片就是AI時(shí)代的石油、電力與網(wǎng)絡(luò)。

算力從哪來(lái)?如何理解算力?國(guó)產(chǎn)云端算力芯片如今怎么樣了。今天,與非網(wǎng)邀請(qǐng)到了多位企業(yè)專家,共同探討AI時(shí)代下云端算力芯片發(fā)展的挑戰(zhàn)和機(jī)遇。

AI時(shí)代,算力有多重要

算力,其本質(zhì)就是計(jì)算能力,它可以反映芯片對(duì)信息數(shù)據(jù)的收集、處理與輸出能力。計(jì)算本質(zhì)上是一種抽象概念,加減乘數(shù)是計(jì)算,三角運(yùn)算是計(jì)算,積分與微分也是計(jì)算。在如今的計(jì)算機(jī)時(shí)代,每一種復(fù)雜的計(jì)算都可以拆分成多個(gè)簡(jiǎn)單的計(jì)算,現(xiàn)在通常用每秒鐘計(jì)算的浮點(diǎn)運(yùn)算次數(shù)作為評(píng)價(jià)算力的指標(biāo)。每秒計(jì)算1次就是1FLOPS。不過(guò)算力這個(gè)概念并不是芯片獨(dú)有的,我們?nèi)祟惖拇竽X也無(wú)時(shí)無(wú)刻不在進(jìn)行著計(jì)算,從買菜購(gòu)物到數(shù)學(xué)考試,從雞兔同籠到多元微分,計(jì)算貫穿了人類的一生。

放眼人類的發(fā)展歷史,人類對(duì)于計(jì)算的渴求就一直在進(jìn)步。石器時(shí)代人類就開始結(jié)繩計(jì)數(shù),后來(lái)各類算籌、算盤等輔助計(jì)算技術(shù)誕生,讓人類擁有了更大規(guī)模的計(jì)算能力。如果這時(shí)算力能被計(jì)算出具體數(shù)值,那一根系滿繩結(jié)的繩子的算力會(huì)低于1FLOPS。

1946年,世界上第一臺(tái)計(jì)算機(jī)“埃尼阿克(ENIAC)”出現(xiàn),讓人類的計(jì)算能進(jìn)一步提升,計(jì)算速度也進(jìn)一步提升,其計(jì)算速度達(dá)到到了300FLOPS,也就是每秒鐘可以進(jìn)行300次浮點(diǎn)運(yùn)算,遠(yuǎn)超當(dāng)時(shí)任何人類與機(jī)械計(jì)算器的計(jì)算速度。

緊接著人類便進(jìn)入到了集成電路大發(fā)展時(shí)代。1978年,英特爾推出了跨時(shí)代的8086芯片,它包含29000個(gè)晶體管,主頻達(dá)到4.77MHz,其算力也達(dá)到了700000 FLOPS以上。此后,集成電路產(chǎn)業(yè)飛速發(fā)展,至今已經(jīng)形成英特爾、AMD英偉達(dá)三家爭(zhēng)霸,還有TI、ST、瑞薩MCU大廠緊隨其后,不同廠商不同種類的芯片用途五花八門,但其證明芯片性能的關(guān)鍵參數(shù)仍是“算力”。

不過(guò),算力一詞用到頻率最高的領(lǐng)域仍舊是GPU。GPU起初是用來(lái)專門處理圖像的硬件,相比CPU,GPU具有更多計(jì)算核心,也更擅長(zhǎng)進(jìn)行并行計(jì)算。如今世界上單芯片算力頂峰是英偉達(dá)的Thor芯片,其算力已經(jīng)達(dá)到200TOPS。TOPS即tera operations per second,1TOPS代表該芯片可以每秒計(jì)算1×1012 次運(yùn)算。

AI時(shí)代,算力已經(jīng)不僅是一項(xiàng)描述芯片計(jì)算能力的參數(shù),它更像是一種資源,和石油與電力一樣,成為信息時(shí)代不可或缺的重要一環(huán)。而算力之所以如此重要,在于它對(duì)于AI來(lái)說(shuō)的必要性。

AI模型,本質(zhì)上是算力與算法的結(jié)合。模型的“大”與“小”,其實(shí)就是算法規(guī)模量的區(qū)別,模型輸出的精度也與訓(xùn)練AI的數(shù)據(jù)量呈正相關(guān),然而計(jì)算機(jī)處理越大的數(shù)據(jù)量,它所需要的算力也呈指數(shù)上升。其原因是因?yàn)锳I算法可以理解為超大規(guī)模的矩陣運(yùn)算,矩陣的維度就是數(shù)據(jù)特征數(shù)量,也就是數(shù)據(jù)的參數(shù)量。矩陣維度越多,參數(shù)越多,模型越復(fù)雜,它輸出的數(shù)據(jù)準(zhǔn)確度越高,但所需求的算力也就越大。AI時(shí)代,算力已經(jīng)不僅是一項(xiàng)描述芯片計(jì)算能力的參數(shù),它更像是一種資源,和石油與電力一樣,成為信息時(shí)代不可或缺的重要一環(huán)。AI時(shí)代,也可以說(shuō)是算力時(shí)代。

算力芯片也可以分為云端與終端兩種。云端算力芯片通常負(fù)責(zé)訓(xùn)練和推理兩種場(chǎng)景,可在不要求延時(shí)與高網(wǎng)絡(luò)帶寬下運(yùn)行幾乎全流程的AI算法。終端算力芯片通常用于自動(dòng)駕駛、智能家居、智慧城市等AIOT場(chǎng)景中。通常來(lái)說(shuō),云算力芯片的難度更高,成本也更高,還需要用戶負(fù)擔(dān)額外的網(wǎng)絡(luò)通信費(fèi)用,那是不是云端就不重要了呢?

如果沒(méi)有云計(jì)算,企業(yè)在需要算力場(chǎng)景的時(shí)候就要搭建私有云,也就是自己的服務(wù)器。而為了應(yīng)對(duì)更加復(fù)雜的應(yīng)用,支撐更加穩(wěn)定的計(jì)算環(huán)境,企業(yè)就必須不停的升級(jí)采購(gòu)新設(shè)備,例如服務(wù)器、存儲(chǔ)、帶寬等,還需要組建完整的運(yùn)維團(tuán)隊(duì)來(lái)保證這些設(shè)備的正常運(yùn)行。綜合計(jì)算下來(lái),布置企業(yè)自身的算力中心花銷巨大。這對(duì)于中小微企業(yè)來(lái)說(shuō)更是一筆難以承受的支出。

而云計(jì)算可以一勞永逸的解決上述問(wèn)題,相當(dāng)于多個(gè)企業(yè)共享硬件設(shè)施,只有當(dāng)企業(yè)需要算力的時(shí)候才會(huì)購(gòu)買,并不需要一直持有大量空閑算力。簡(jiǎn)單來(lái)說(shuō),云計(jì)算就相當(dāng)于家庭用電,只有打開電燈,電表才會(huì)計(jì)數(shù)。

總的來(lái)說(shuō),云端+邊端能夠滿足AI時(shí)代下所有應(yīng)用場(chǎng)景的要求。如今AI大模型不斷涌現(xiàn),同時(shí)滿足訓(xùn)練與推理,還具有性價(jià)比優(yōu)勢(shì)的云算力芯片已經(jīng)成為AI大亂斗背景下的必爭(zhēng)之地。但在高需求刺激之下,極速涌入云端算力芯片的資本還面臨著更加嚴(yán)峻的問(wèn)題,高門檻。

挑戰(zhàn)與變局

過(guò)去,云端算力芯片僅受到部分企業(yè)關(guān)注。普通人對(duì)于它的理解往往僅限于大型服務(wù)器,云計(jì)算,神威太湖之光等名詞上。2023年以來(lái),ChatGPT的橫空出世讓普通人對(duì)AI的了解更進(jìn)一步。AI大模型爆火后,給全球AI芯片市場(chǎng)帶來(lái)了哪些影響?

摩爾線程專家認(rèn)為,大模型的火熱對(duì)芯片市場(chǎng)的影響,最直接的就是對(duì)算力基礎(chǔ)設(shè)施的需求猛增,GPU作為大模型背后的關(guān)鍵算力基礎(chǔ)設(shè)施,尤其受到追捧。與此同時(shí),大模型全新的算法方式對(duì)傳統(tǒng)的芯片架構(gòu)提出了挑戰(zhàn)。

那,挑戰(zhàn)是什么呢?

隨著OpenAI的一聲炮響,全世界都被轟開了AI世界的大門。不過(guò)大規(guī)模計(jì)算所需要的高算力芯片挑戰(zhàn)頗多。摩爾線程專家認(rèn)為挑戰(zhàn)主要來(lái)自芯片的通用性、功耗墻與顯存墻上。

奇異摩爾聯(lián)合創(chuàng)始人兼產(chǎn)品及解決方案副總裁??|認(rèn)為,目前云端算力芯片還面對(duì)著五大挑戰(zhàn):架構(gòu)、系統(tǒng)、場(chǎng)景、互聯(lián)以及快速迭代。

記者綜合分析得出:

從架構(gòu)上來(lái)說(shuō),運(yùn)算算力芯片對(duì)算力提升的需求與日俱增,但目前傳統(tǒng)SoC提升單芯片面積已經(jīng)達(dá)到瓶頸,摩爾定律極限在時(shí)刻限制芯片發(fā)展,內(nèi)存墻的限制也使得傳統(tǒng)架構(gòu)芯片難以提升,更讓芯片在散熱、功耗等方面處處掣肘。因此需要異構(gòu)計(jì)算架構(gòu)來(lái)尋求芯片新的突破,其中就包括繞開摩爾定律的more than more——異構(gòu)計(jì)算。

從系統(tǒng)角度來(lái)看,隨著大模型的廣泛運(yùn)用,模型參數(shù)與規(guī)模都呈現(xiàn)指數(shù)級(jí)增長(zhǎng),因此需要更大規(guī)模的整合計(jì)算系統(tǒng)來(lái)應(yīng)對(duì)大模型訓(xùn)練和計(jì)算的需求。換句話說(shuō),盡管芯片算力不斷增長(zhǎng),但仍舊需要軟件端配合才能更好的發(fā)揮硬件性能。畢竟兵器是否趁手得看使用者的功力高低。

從應(yīng)用場(chǎng)景來(lái)看,隨著ChatGPT爆火,AICG賽道上涌現(xiàn)了越來(lái)越多的玩家,未來(lái)AI領(lǐng)域還將出現(xiàn)更多應(yīng)用場(chǎng)景,這也意味著還會(huì)有新賽道出現(xiàn)。因此,作為“AI起舞的舞臺(tái)”,運(yùn)算算力芯片需要具備一定的通用性,也要有能力應(yīng)對(duì)當(dāng)今乃至未來(lái)日益多元化的專用計(jì)算場(chǎng)景。

從互聯(lián)來(lái)看,云端算力芯片需要高帶寬配合傳輸數(shù)據(jù)。未來(lái)大模型大算力應(yīng)用涌現(xiàn),云與端之間的快速交互,也將對(duì)帶寬和延時(shí)提出更高要求。

最后,AICG與算力芯片市場(chǎng)還處于快速變化階段,競(jìng)爭(zhēng)者不斷入行,藍(lán)??赡芤灰怪g就變成紅海。因此企業(yè)必須快速迭代產(chǎn)品,尤其在云端算力芯片上,需要不斷調(diào)整產(chǎn)品策略來(lái)迎合未來(lái)產(chǎn)品的新需求,同時(shí)還要縮短TTM乃至量產(chǎn)時(shí)間。

總的來(lái)說(shuō)云端算力芯片目前挑戰(zhàn)頗多,無(wú)論是從技術(shù)角度還是市場(chǎng)角度,國(guó)內(nèi)涌現(xiàn)的諸多AICG與算力芯片玩家都需要更多的突破。更重要的一點(diǎn)是,目前全球算力芯片絕大部分市場(chǎng)都在英偉達(dá)手中,國(guó)產(chǎn)算力芯片在市場(chǎng)上仍舊處于弱勢(shì)。但在新興市場(chǎng)中,有著強(qiáng)力GPU先發(fā)優(yōu)勢(shì)的英偉達(dá)面對(duì)的問(wèn)題是什么呢?

除了AICG之外,目前自動(dòng)駕駛技術(shù)同樣發(fā)展迅速,值得關(guān)注,這也激發(fā)出了全新的算力芯片需求。自動(dòng)駕駛中,受限于延時(shí)與傳輸,對(duì)于雷達(dá)與攝像頭信號(hào)處理屬于邊或終端計(jì)算。但云計(jì)算對(duì)自動(dòng)駕駛算法與系統(tǒng)的支持仍舊重要,云與端的結(jié)合成為更多汽車廠商的選擇,但新的挑戰(zhàn)也如期而至。英偉達(dá)技術(shù)專家在自動(dòng)駕駛上的云端結(jié)合的挑戰(zhàn)上指出,云在用于自動(dòng)駕駛汽車的人工智能軟件的開發(fā)中發(fā)揮著重要作用。數(shù)據(jù)被收集、整理、攝取、標(biāo)記并用于訓(xùn)練深度神經(jīng)網(wǎng)絡(luò),從計(jì)算角度來(lái)看是一項(xiàng)艱巨的任務(wù)。這是一個(gè)增強(qiáng)人工智能模型的迭代過(guò)程。創(chuàng)建模型后,將使用模擬在云中對(duì)其進(jìn)行測(cè)試和驗(yàn)證。

英偉達(dá)的專家表示,自動(dòng)駕駛汽車運(yùn)行時(shí),不需要連接到云,但這是一個(gè)額外的好處,可以從交通、基礎(chǔ)設(shè)施和天氣等各種來(lái)源獲取信息,以實(shí)現(xiàn)安全駕駛操作。但自動(dòng)駕駛汽車必須完全保持自主性,因此駕駛決策必須在車上做出,而不是在云端做出。連接到云的軟件定義汽車還為汽車制造商提供了新的商業(yè)模式和訂閱服務(wù)機(jī)會(huì),同時(shí)為消費(fèi)者帶來(lái)價(jià)值。過(guò)去,汽車在購(gòu)買時(shí)處于最佳狀態(tài),但隨后就會(huì)貶值。對(duì)于軟件定義的汽車來(lái)說(shuō),它處于最基本的銷售水平,隨著時(shí)間的推移,通過(guò)基于云,也就是云端算力芯片支持下的的軟件更新,它會(huì)變得更好、更安全。

在挑戰(zhàn)中育新機(jī),于變局中開新局

AI“躁動(dòng)”的這幾年,也讓下游應(yīng)用場(chǎng)景百花齊放,這其中,AI與國(guó)產(chǎn)電動(dòng)汽車全面崛起,讓AI駕駛,也就是自動(dòng)駕駛技術(shù)成為資本寵兒。

針對(duì)自動(dòng)駕駛領(lǐng)域的云端算力芯片機(jī)遇,??|認(rèn)為,受自動(dòng)駕駛技術(shù)的快速發(fā)展驅(qū)動(dòng),大算力AI芯片正在汽車領(lǐng)域迎來(lái)廣闊的機(jī)遇和前景。通過(guò)高效的計(jì)算和深度學(xué)習(xí)算法,大算力AI芯片可以提供更精準(zhǔn)和可靠的駕駛決策,提升行車安全性和駕駛體驗(yàn)。而在云和端的結(jié)合中,最大的難點(diǎn)在于自動(dòng)駕駛技術(shù)對(duì)實(shí)時(shí)性和低延遲要求非常高,將算力分布在云端和邊緣端之間會(huì)面臨數(shù)據(jù)傳輸和處理的挑戰(zhàn)。大量的傳感器數(shù)據(jù)和圖像到云端進(jìn)行處理可能會(huì)導(dǎo)致較高的網(wǎng)絡(luò)延遲和消耗大量的帶寬。

他認(rèn)為,異構(gòu)芯片可以將AI算力和邏輯算力集成在一起,在不同的計(jì)算場(chǎng)景中發(fā)揮不同的效用。這種集成能夠提供更高的計(jì)算性能和效率,滿足自動(dòng)駕駛技術(shù)對(duì)算力的需求。同時(shí),異構(gòu)集成高帶寬、低延時(shí)的互聯(lián)特性,也能有效幫助自動(dòng)駕駛進(jìn)行云與端的交互,有效提升自動(dòng)駕駛系統(tǒng)的性能和效率。

跳出應(yīng)用,回頭看云端算力芯片本身。GPU或GPGPU是云端算力算力芯片或AI芯片的主流形態(tài)。不過(guò)也有人認(rèn)為目前的AI芯片是過(guò)渡形態(tài),未來(lái)所有AI芯片還會(huì)向ASIC方向靠攏。這對(duì)這一觀點(diǎn),摩爾線程專家認(rèn)為,目前AI算法還在快速迭代和變化,在這個(gè)過(guò)程沒(méi)有放緩或停止之前,GPU仍具有特別強(qiáng)的優(yōu)勢(shì)。對(duì)于云端算力芯片未來(lái)的看法,摩爾線程專家認(rèn)為,云端基礎(chǔ)設(shè)施需要具備對(duì)未來(lái)技術(shù)的兼容性,GPU仍是首選。未來(lái)的變化,在摩爾線程看來(lái)主要包括幾個(gè)方面:工藝制程向前推進(jìn),算力、帶寬不斷上升;通過(guò)chiplet方案,進(jìn)一步提高芯片級(jí)別的計(jì)算密度和系統(tǒng)集成度3、云端AI芯片將不斷融合新算法所需的功能和加速模塊。

??|認(rèn)為,在AI芯片領(lǐng)域,作為通用芯片和專用芯片的代表,GPU和ASIC各有優(yōu)勢(shì)。但是專用芯片與通用芯片永遠(yuǎn)都不是互相替代的關(guān)系,二者必須協(xié)同工作才能發(fā)揮出最大的價(jià)值。通過(guò)異構(gòu)計(jì)算架構(gòu),可以把如GPU為代表的通用芯片與ASIC等專用芯片集合起來(lái),兼顧通用性和專用性的雙重優(yōu)勢(shì),提供更全面和高效的解決方案。異構(gòu)計(jì)算也有助于客戶根據(jù)AI任務(wù)的實(shí)際需求,調(diào)整通用芯片和專用芯片的比重,以滿足不斷變化的AI應(yīng)用領(lǐng)域的需求。

寫在最后

總的來(lái)說(shuō),云端算力芯片為AI時(shí)代的創(chuàng)新和應(yīng)用注入了無(wú)限活力,它已經(jīng)成為當(dāng)之無(wú)愧的“AI石油”。面臨挑戰(zhàn)與機(jī)遇,云端算力芯片未來(lái)還會(huì)不斷突破創(chuàng)新,驅(qū)動(dòng)著智能化世界的前行。

在追逐智能化的道路上,云端算力芯片扮演著不可或缺的角色。以其強(qiáng)大的計(jì)算能力和無(wú)限的潛力,它推動(dòng)著科技的創(chuàng)新和進(jìn)步。隨著技術(shù)的不斷發(fā)展,我們有理由相信云端算力芯片將繼續(xù)引領(lǐng)人工智能的未來(lái),為我們帶來(lái)更加智能、高效的世界。

最后感謝摩爾線程、奇異摩爾以及英偉達(dá)三位專家接受采訪。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 芯片
    +關(guān)注

    關(guān)注

    455

    文章

    50714

    瀏覽量

    423113
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    30728

    瀏覽量

    268871
  • 智能化
    +關(guān)注

    關(guān)注

    15

    文章

    4869

    瀏覽量

    55341

原文標(biāo)題:云端算力芯片為什么是科技石油?

文章出處:【微信號(hào):阿寶1990,微信公眾號(hào):阿寶1990】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    調(diào)度的基礎(chǔ)知識(shí)

    編者按 “調(diào)度”的概念,這幾年越來(lái)越多的被提及。剛聽(tīng)到這個(gè)概念的時(shí)候,我腦海里一直拐不過(guò)彎。作為底層芯片出身的我,一直認(rèn)為:是硬件的
    的頭像 發(fā)表于 11-27 17:13 ?147次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>調(diào)度的基礎(chǔ)知識(shí)

    基礎(chǔ)篇:從零開始了解

    即計(jì)算能力(Computing Power),狹義上指對(duì)數(shù)字問(wèn)題的運(yùn)算能力,而廣義上指對(duì)輸入信息處理后實(shí)現(xiàn)結(jié)果輸出的一種能力。雖然處理的內(nèi)容不同,但處理過(guò)程的能力都可抽象為。比
    的頭像 發(fā)表于 11-15 14:22 ?530次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>基礎(chǔ)篇:從零開始了解<b class='flag-5'>算</b><b class='flag-5'>力</b>

    GPU開發(fā)平臺(tái)是什么

    隨著AI技術(shù)的廣泛應(yīng)用,需求呈現(xiàn)出爆發(fā)式增長(zhǎng)。AI租賃作為一種新興的服務(wù)模式,正逐漸成為企業(yè)獲取
    的頭像 發(fā)表于 10-31 10:31 ?162次閱讀

    【「芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗(yàn)】--全書概覽

    本帖最后由 1653149838.791300 于 2024-10-16 22:19 編輯 感謝平臺(tái)提供的書籍,厚厚的一本,很有分量,感謝作者的傾力付出成書。 本書主要講芯片CPU
    發(fā)表于 10-15 22:08

    名單公布!【書籍評(píng)測(cè)活動(dòng)NO.43】 芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析

    試用評(píng)測(cè)資格! 前言 不知不覺(jué)中,我們來(lái)到一個(gè)計(jì)算機(jī)科學(xué)飛速發(fā)展的時(shí)代,手機(jī)和計(jì)算機(jī)中各類便捷的軟件已經(jīng)融入日常生活,在此背景下,硬件特別是強(qiáng)勁的芯片,對(duì)于軟件服務(wù)起到不可替代的支撐作用。
    發(fā)表于 09-02 10:09

    大模型時(shí)代的需求

    現(xiàn)在AI已進(jìn)入大模型時(shí)代,各企業(yè)都爭(zhēng)相部署大模型,但如何保證大模型的,以及相關(guān)的穩(wěn)定性和性能,是一個(gè)極為重要的問(wèn)題,帶著這個(gè)極為重要的問(wèn)題,我需要在此書中找到答案。
    發(fā)表于 08-20 09:04

    蘭洋科技與燧原科技深化江蘇地區(qū)智合作 共筑基石

    供需正呈現(xiàn)“雙向奔赴”的趨勢(shì)。 近日,國(guó)內(nèi)領(lǐng)先的浸沒(méi)式液冷解決方案技術(shù)服務(wù)提供商蘭洋(寧波)科技有限公司(以下簡(jiǎn)稱“蘭洋科技”),與專注人工智能領(lǐng)域云端產(chǎn)品的上海燧原科技有限公司(以下簡(jiǎn)稱“燧原科技”)
    的頭像 發(fā)表于 08-16 10:53 ?270次閱讀

    基礎(chǔ)設(shè)施的風(fēng)險(xiǎn)與挑戰(zhàn)

    編者按網(wǎng)絡(luò)有一個(gè)美好的愿景,就是希望網(wǎng),能像電力和電網(wǎng)一樣:
    的頭像 發(fā)表于 06-13 08:27 ?540次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>基礎(chǔ)設(shè)施的風(fēng)險(xiǎn)與挑戰(zhàn)

    商湯科技采購(gòu)40000顆英偉達(dá)芯片,縮小中美差距

    徐冰認(rèn)為,國(guó)產(chǎn)芯片崛起以及商品化帶來(lái)的投資價(jià)值,使中美差距有望逐步縮小。只要中國(guó)持續(xù)在
    的頭像 發(fā)表于 05-28 11:25 ?1227次閱讀

    揭秘芯片:為何它如此關(guān)鍵?

    在數(shù)字化時(shí)代,芯片作為電子設(shè)備的核心組件,其性能直接關(guān)系到設(shè)備的運(yùn)行速度和處理能力。而芯片,即其計(jì)算能力,更是衡量芯片性能的重要指標(biāo)。
    的頭像 發(fā)表于 05-09 08:27 ?997次閱讀
    揭秘<b class='flag-5'>芯片</b><b class='flag-5'>算</b><b class='flag-5'>力</b>:為何它如此關(guān)鍵?

    力系列基礎(chǔ)篇——101:從零開始了解

    相信大家已經(jīng)感受到,我們正處在一個(gè)人工智能時(shí)代。如果要問(wèn)在人工智能時(shí)代最重要的是什么?那必須是:!
    的頭像 發(fā)表于 04-24 08:05 ?1002次閱讀
    <b class='flag-5'>算</b>力系列基礎(chǔ)篇——<b class='flag-5'>算</b><b class='flag-5'>力</b>101:從零開始了解<b class='flag-5'>算</b><b class='flag-5'>力</b>

    芯片:未來(lái)科技的加速器?

    在數(shù)字化時(shí)代,芯片作為電子設(shè)備的核心組件,其性能直接關(guān)系到設(shè)備的運(yùn)行速度和處理能力。而芯片,即其計(jì)算能力,更是衡量芯片性能的重要指標(biāo)。
    的頭像 發(fā)表于 02-27 09:42 ?925次閱讀
    高<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>芯片</b>:未來(lái)科技的加速器?

    智能規(guī)模超通用,大模型對(duì)智能提出高要求

    電子發(fā)燒友網(wǎng)報(bào)道(文/李彎彎)是設(shè)備通過(guò)處理數(shù)據(jù),實(shí)現(xiàn)特定結(jié)果輸出的計(jì)算能力,常用FLOPS作為計(jì)量單位。FLOPS是Floating-point Operations Per Second
    的頭像 發(fā)表于 02-06 00:08 ?6306次閱讀

    大茉莉X16-P,5800M大稱王稱霸

    Rykj365
    發(fā)布于 :2024年01月25日 14:54:52

    ChatGPT芯片如何做輸出

    卡的核心當(dāng)然還是計(jì)算芯片,會(huì)搭配大容量高帶寬的內(nèi)存、緩存,以及搭載CPU用于調(diào)度,為了幫助數(shù)據(jù)傳輸,便會(huì)使用高速通道,這便是PCIe(高速串行計(jì)算機(jī)擴(kuò)展總線標(biāo)準(zhǔn))在系統(tǒng)中的作用:提供總線通道。
    發(fā)表于 01-11 10:01 ?490次閱讀
    ChatGPT<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>芯片</b>如何做<b class='flag-5'>算</b><b class='flag-5'>力</b>輸出
    RM新时代网站-首页