RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

浪潮存儲:新數(shù)據(jù)時代整體面臨的三大挑戰(zhàn)

銘瑄存儲合作伙伴 ? 來源:DOIT傳媒 ? 作者:DOIT傳媒 ? 2021-08-23 14:23 ? 次閱讀

2021全球閃存峰會期間,浪潮存儲產(chǎn)品線孫磊發(fā)表了題為《巨“浪潮”起——全閃存儲系統(tǒng) 加速數(shù)字轉(zhuǎn)型》的主題演講,分享過去一年浪潮在全閃存方面的進(jìn)步和發(fā)展。

從去年開始,浪潮一直在談新數(shù)據(jù)時代,在談新數(shù)據(jù)時代整體面臨的三大挑戰(zhàn)。

新時代的三大挑戰(zhàn)

挑戰(zhàn)1

數(shù)據(jù)成為生產(chǎn)要素

新數(shù)據(jù)時代,數(shù)據(jù)應(yīng)用已經(jīng)滲透到了經(jīng)濟(jì)社會各個領(lǐng)域,數(shù)據(jù)已成為核心生產(chǎn)要素,成為與勞動力、資本、土地和技術(shù)并駕的生產(chǎn)要素。作為生產(chǎn)要素,數(shù)據(jù)具有乘數(shù)作用,它可以放大勞動力、資本等生產(chǎn)要素在社會各行業(yè)價值鏈流轉(zhuǎn)中產(chǎn)生的價值。

發(fā)揮好數(shù)據(jù)生產(chǎn)要素的創(chuàng)新引擎作用,可以催生和推動新產(chǎn)業(yè)、新業(yè)態(tài)、新模式,有助于推動質(zhì)量變革、效率變革、動力變革,實現(xiàn)高質(zhì)量發(fā)展。

比如,利用數(shù)據(jù)來做疫情防控。疫情早期,需要輔以CT來確認(rèn)感染者,這導(dǎo)致CT量暴漲10倍,為一線醫(yī)生帶來了巨大工作量和非常高的診斷難度。

很快,數(shù)據(jù)專家基于大量的CT影像數(shù)據(jù),訓(xùn)練出了閱片機(jī)器人,用機(jī)器人幫助醫(yī)生進(jìn)行診斷,從而大大節(jié)省了醫(yī)生看片子的時間,同時提高了診斷的準(zhǔn)確性。

挑戰(zhàn)2

大規(guī)模應(yīng)用

既然數(shù)據(jù)如此重要,就應(yīng)該考慮解決數(shù)據(jù)保存、使用和管理的問題,解決存儲的容量和效率問題。數(shù)據(jù)的數(shù)量級變化帶來了巨大挑戰(zhàn)。比如:

百度在北京有1萬輛自動駕駛汽車,每天300PB數(shù)據(jù),如果未來自動駕駛投入商業(yè)應(yīng)用,一個城市幾十萬上百萬輛車將產(chǎn)生ZB(100萬個PB)級數(shù)據(jù)。

在數(shù)據(jù)容量和性能上,新興應(yīng)用場景產(chǎn)生了幾十上百倍的提升,需要存儲具備高容量、大并發(fā)、高帶寬、更高性能和更低時延,這需要采用新技術(shù)來應(yīng)對挑戰(zhàn)。

挑戰(zhàn)3

新數(shù)據(jù)需求

當(dāng)前和未來很長一段時間,我們將采用多種技術(shù)來構(gòu)建終端-邊緣-兩地三中心-混合云/公有云基礎(chǔ)設(shè)施,這些技術(shù)的進(jìn)步都非常快。

新技術(shù)背后還需要用新的存儲,提供更高水平的數(shù)據(jù)流動、數(shù)據(jù)處理、數(shù)據(jù)共享、實時在線、永久安全等能力,實現(xiàn)信息高效計算和交互,在這一領(lǐng)域,軟件定義存儲有著天然優(yōu)勢。

浪潮存儲堅持雙輪驅(qū)動策略,緊跟技術(shù)趨勢和應(yīng)用需求,浪潮在存儲的技術(shù)上也在做一些變革和突破,從而來讓產(chǎn)品能夠具備應(yīng)對變化的能力。

上述提到的閱片機(jī)器人、自動駕駛的本質(zhì)上是通過大量的機(jī)器學(xué)習(xí)所訓(xùn)練出來的一套帶有自我預(yù)測能力的算法,而在當(dāng)今社會,效率就是生命,各領(lǐng)域除了算法的優(yōu)化,算力的存儲方面唯有全閃介質(zhì)才能提供更高的效率;

如何利用全閃介質(zhì)發(fā)揮出更高的性能,浪潮全閃存儲為您解答。

以新存儲應(yīng)對三大挑戰(zhàn)

從2020年8月起,浪潮提出了新存儲之道,所謂新存儲之道,其核心就是通過極致的技術(shù)創(chuàng)新和產(chǎn)品創(chuàng)新來應(yīng)對挑戰(zhàn)。

浪潮用包括極簡架構(gòu)、極致安全、極致穩(wěn)定、極致性能、極致容量、極致云化和極易管理,七大極致的技術(shù)路線來設(shè)計開發(fā)創(chuàng)新的HF系列全閃存儲。

HF系列全閃存儲目前在三個方面做出了比較大的創(chuàng)新:

1.架構(gòu)層面。國內(nèi)外存儲廠商往往有多個軟件棧,比如混閃和全閃的軟件棧就不同,而浪潮同一套架構(gòu)支持NVMe、SAS,一套架構(gòu)支持所有的存儲應(yīng)用,這就是極簡架構(gòu)。

2.軟件棧的重構(gòu),具體表現(xiàn)在以下幾個方面。

2.1 當(dāng)閃存介質(zhì)達(dá)到一定數(shù)量時,CPU將成為性能瓶頸,浪潮通過多核多線程性能優(yōu)化,充分發(fā)揮CPU的作用,從而進(jìn)一步拔高全閃陣列的極限性能。

2.2 浪潮通過實時壓縮重刪進(jìn)一步提高了數(shù)據(jù)的存儲效率,保護(hù)用戶投資,降低了TCO。

浪潮全閃陣列支持實時無損在線重刪壓縮

1、壓縮數(shù)據(jù)8byte對齊,拿8K字節(jié)數(shù)據(jù)舉例,壓縮空間利用率99.8%;

2、內(nèi)置獨立加速芯片,對性能時延無影響;

3、當(dāng)寫入數(shù)據(jù)時,弱哈希+字節(jié)對比,確保重刪效率數(shù)據(jù)一致性;

4、基于前壓縮方式,數(shù)據(jù)在緩存中壓縮(專用緩存。和壓縮芯片),數(shù)據(jù)存入到磁盤是壓縮后的數(shù)據(jù)量,固定條帶,充分利用空間。數(shù)據(jù)庫類應(yīng)用壓縮比例21,日志型應(yīng)用最大壓縮比例可達(dá)10:1;

2.3 持續(xù)的快速迭代。2020年,浪潮發(fā)布過iTurbo 1.0,2021年,iTurbo升級到2.0,iTurbo 2.0重點優(yōu)化了三個方面。

第一個重點在于在I/O路徑的優(yōu)化上。iTurbo 2.0用智能數(shù)據(jù)路徑打包整個I/O棧,使得I/O棧大大縮短,延遲得以明顯降低。

第二個重點在于智能多核。如今的存儲系統(tǒng)普遍沒能發(fā)揮處理器的核數(shù)和主頻性能優(yōu)勢,而iTurbo 2.0優(yōu)化了對多核的利用,實現(xiàn)了對多核的智能調(diào)度,當(dāng)發(fā)現(xiàn)有應(yīng)用對性能有更高要求時,可以為應(yīng)用綁定對應(yīng)的CPU資源,能定向提升性能。

第三是重點是冷熱分流。思路是,首先分離有效和無效數(shù)據(jù),然后盡量把垃圾數(shù)據(jù)和無效數(shù)據(jù)聚合到同一個bolck里,減少數(shù)據(jù)刷新的波及范圍,這樣一來,不僅垃圾回收效率得以提高,而且,整體性能提升了1.5倍,時延降低了50%。

3.支持使用傲騰SSD,為了使用新型存儲介質(zhì),浪潮和友商做了聯(lián)合的定制開發(fā),使用傲騰后,在數(shù)據(jù)分層的場景的IOPS提升了70%,帶寬提高了100%,延時也降低了50%。

為了使用NVMe全閃協(xié)議,浪潮對整體軟件棧,從底層硬件驅(qū)動層到上層協(xié)議全都進(jìn)行了重構(gòu),實現(xiàn)了端到端的NVMe的協(xié)議,使得存儲系統(tǒng)在讀寫性能和時延上都得到了大幅提升。

取得的成績在SPC-1測試中已經(jīng)得到體現(xiàn)

浪潮全閃存儲HF18000G5-I,在即將發(fā)布的SPC-1榜單中將會有非常亮眼的成績,再次打破世界記錄,達(dá)到2300萬IOPS,且延時在0.29ms內(nèi)。

浪潮存儲的優(yōu)異市場表現(xiàn)

在市場表現(xiàn)中,浪潮是國內(nèi)唯二進(jìn)入Gartner魔力象限的主存儲廠商,經(jīng)過過去一段時間的發(fā)展,浪潮存儲從利基象限跨越提升到了挑戰(zhàn)者象限。

從用戶滿意度調(diào)查報告Gartner Peer Insight 的數(shù)據(jù)來看,浪潮存儲在滿意度調(diào)查報告中評分也非常高,達(dá)到了5分的滿意度,可見整體的客戶對于浪潮存儲有高度認(rèn)可。

受疫情影響,各個存儲細(xì)分市場也受到了不同程度的影響,2020年第一季度,中國外部存儲市場同比下降7.8%,出貨量同比下降18.4%,全閃和混閃存儲銷售額分別同比增長16.1%和11.1%。

在這樣的大背景下,浪潮在整體的集中式存儲領(lǐng)域完成了大幅增長,出貨量增長了50%,全閃的增速也達(dá)到了將近500%。

浪潮閃存存儲的行業(yè)落地案例

某金融行業(yè)用戶采用了浪潮的全閃方案。替換之后,在性能方面,整體系統(tǒng)性能提升了2倍。與此同時,浪潮對該客戶所有存儲產(chǎn)品進(jìn)行了異構(gòu)整合,整合完成后,客戶運(yùn)維成本和整體TCO有明顯降低,設(shè)備利用率也有了明顯提升。

某政府用戶采用了浪潮整體解決方案,采用了包括關(guān)鍵應(yīng)用主機(jī)系統(tǒng)浪潮天梭K1、Power主機(jī)、浪潮服務(wù)器以及浪潮存儲等方案,該用戶對于高端存儲特別是高端全閃的可靠性有極致要求,配合K1主機(jī)以及OpenPower做了一個聯(lián)合解決方案,在核心系統(tǒng)里構(gòu)建了6個9的可靠性。

基于出色的產(chǎn)品能力,浪潮全閃存儲贏得了越來越多的認(rèn)可,正廣泛應(yīng)用于各行業(yè)、各場景,在各行各業(yè)里都有非常多的頂級客戶。

比如,金融領(lǐng)域的六大行都有部署,而且,在許多銀行有非常大規(guī)模的部署,在某大銀行的核心系統(tǒng)里面,占比超20%。

某農(nóng)信ODS業(yè)務(wù)使用了多臺浪潮AS5600G2,為前端8臺POWER小型機(jī)組成的Oracle RAC提供存儲服務(wù)。為聯(lián)社統(tǒng)一數(shù)據(jù)平臺服務(wù)提供有力支撐。

在某大型國有銀行數(shù)據(jù)中心建設(shè)中,浪潮存儲全面對接OpenStack、兼容多家云平臺,在各種業(yè)務(wù)系統(tǒng)尤其是網(wǎng)絡(luò)交易相關(guān)的業(yè)務(wù)中,得到了用戶青睞,浪潮存儲助力其將所有業(yè)務(wù)放到云上,成為最快實現(xiàn)云化三數(shù)據(jù)中心(3DC)的國有大型銀行。

在PB級客戶方面,浪潮存儲的客戶數(shù)量同比增長150%,重復(fù)購買、擴(kuò)容超過40%。

孫磊還表示,采用全閃的集中式存儲未來面向就是核心應(yīng)用。

浪潮認(rèn)為,未來在核心應(yīng)用和核心產(chǎn)品中,閃存將占主導(dǎo)地位。而浪潮還將繼續(xù)堅持創(chuàng)新,以全閃存儲系統(tǒng)加速數(shù)字轉(zhuǎn)型。

編輯:jq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    211

    文章

    28379

    瀏覽量

    206912
  • 數(shù)據(jù)
    +關(guān)注

    關(guān)注

    8

    文章

    7002

    瀏覽量

    88940
  • CT
    CT
    +關(guān)注

    關(guān)注

    2

    文章

    189

    瀏覽量

    32052
  • 自動駕駛
    +關(guān)注

    關(guān)注

    784

    文章

    13784

    瀏覽量

    166382

原文標(biāo)題:浪潮存儲:以全閃存儲加速數(shù)字轉(zhuǎn)型

文章出處:【微信號:Maxsun,微信公眾號:銘瑄存儲合作伙伴】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    探討大模型時代背景下數(shù)據(jù)存儲的變革之道

    在當(dāng)今數(shù)字化浪潮洶涌澎湃的時代背景下,大模型技術(shù)猶如一顆璀璨的明星,照亮了科技發(fā)展的廣闊蒼穹,而存儲技術(shù)的變革,作為這一進(jìn)程中的堅實基石,正日益成為產(chǎn)業(yè)界與學(xué)術(shù)界共同矚目的核心焦點。
    的頭像 發(fā)表于 12-16 14:05 ?143次閱讀

    浪潮信息如何應(yīng)對智能時代下的數(shù)據(jù)存儲需求

    隨著智能時代的全面到來,數(shù)據(jù)量呈現(xiàn)出爆炸性增長,這對存儲系統(tǒng)提出了前所未有的高標(biāo)準(zhǔn)要求。從早期的“百模大戰(zhàn)”演進(jìn)至“千模大戰(zhàn)”,現(xiàn)已邁入了一個以數(shù)據(jù)為核心的新
    的頭像 發(fā)表于 11-26 13:42 ?203次閱讀

    半導(dǎo)體存儲器在數(shù)據(jù)中心中的應(yīng)用

    半導(dǎo)體存儲器在數(shù)據(jù)中心中的應(yīng)用是極其重要且廣泛的,它們不僅是數(shù)據(jù)中心存儲系統(tǒng)的核心組件,還直接關(guān)系到數(shù)據(jù)處理的效率、可靠性和安全性。以下將詳細(xì)闡述半導(dǎo)體
    的頭像 發(fā)表于 08-20 10:17 ?610次閱讀

    浪潮信息趙帥:開放計算創(chuàng)新 應(yīng)對Scaling Law挑戰(zhàn)

    Scaling Law帶來的AI基礎(chǔ)設(shè)施Scale up和Scale out的挑戰(zhàn),數(shù)據(jù)中心需要以開放創(chuàng)新加速算力系統(tǒng)、管理和基礎(chǔ)設(shè)施的全向Scale進(jìn)程,推動AI產(chǎn)業(yè)的創(chuàng)新發(fā)展。 ? 開源開放推動人工智能創(chuàng)新與算力生態(tài)的全面發(fā)展 生成式人工智能的飛躍式進(jìn)步正在加速智能
    的頭像 發(fā)表于 08-15 16:02 ?277次閱讀
    <b class='flag-5'>浪潮</b>信息趙帥:開放計算創(chuàng)新 應(yīng)對Scaling Law<b class='flag-5'>挑戰(zhàn)</b>

    探討數(shù)字化背景下PMC的挑戰(zhàn)和機(jī)遇

    在數(shù)字化浪潮的席卷下,各行各業(yè)都面臨著前所未有的變革。對于負(fù)責(zé)產(chǎn)品物料控制(PMC)的企業(yè)來說,這一變革既是挑戰(zhàn)也是機(jī)遇。如何在數(shù)字化背景下,抓住時代的脈搏,推動PMC管理的創(chuàng)新與升級
    的頭像 發(fā)表于 07-05 11:03 ?453次閱讀

    浪潮信息引領(lǐng)數(shù)據(jù)編排新紀(jì)元,加速釋放數(shù)據(jù)潛能

    在2024年數(shù)據(jù)基礎(chǔ)設(shè)施技術(shù)峰會的璀璨舞臺上,浪潮信息分布式存儲產(chǎn)品線架構(gòu)師Lance Sun博士以其深厚的行業(yè)洞察與前瞻視角,發(fā)表了題為“高效數(shù)據(jù)編排,加速釋放
    的頭像 發(fā)表于 07-03 15:30 ?374次閱讀

    浪潮信息推出AIGC存儲解決方案

    信息隆重推出了基于其新一代分布式存儲平臺AS13000G7的AIGC存儲解決方案,這一創(chuàng)新成果無疑為當(dāng)前大模型應(yīng)用面臨存儲挑戰(zhàn)提供了強(qiáng)有力
    的頭像 發(fā)表于 07-03 11:16 ?713次閱讀

    浪潮信息推出基于新一代分布式存儲平臺AS13000G7的AIGC存儲解決方案

    、新一代分布式存儲AS13000G7自身產(chǎn)品優(yōu)勢,新方案從容應(yīng)對大模型應(yīng)用對存儲性能、容量以及數(shù)據(jù)管理等方面的苛刻要求。同時,浪潮信息嘗試性提出GPU計算集群算力與
    的頭像 發(fā)表于 07-01 19:00 ?1425次閱讀
    <b class='flag-5'>浪潮</b>信息推出基于新一代分布式<b class='flag-5'>存儲</b>平臺AS13000G7的AIGC<b class='flag-5'>存儲</b>解決方案

    CCF-TCIST走進(jìn)浪潮信息 共話AI時代存儲創(chuàng)新

    ”活動啟動,來自CCF信息存儲技術(shù)專委會、清華大學(xué)、北京大學(xué)、華中科技大學(xué)、華東師范大學(xué)、上海交通大學(xué)、上海理工大學(xué)等單位的十余位存儲領(lǐng)域?qū)<摇W(xué)者走進(jìn)浪潮信息,在“大模型時代數(shù)據(jù)中心存儲
    的頭像 發(fā)表于 06-07 14:27 ?281次閱讀
    CCF-TCIST走進(jìn)<b class='flag-5'>浪潮</b>信息 共話AI<b class='flag-5'>時代</b><b class='flag-5'>存儲</b>創(chuàng)新

    浪潮信息存儲平臺的&quot;南征北戰(zhàn)&quot;:釋放數(shù)據(jù)價值的核心力量

    劉希猛以"數(shù)聚向新 共贏未來"為主題,結(jié)合當(dāng)前對數(shù)據(jù)價值釋放的迫切需求,對構(gòu)建相適應(yīng)的先進(jìn)存儲基礎(chǔ)設(shè)施進(jìn)行了全面而詳盡的分析。 ?"關(guān)鍵在于存儲基礎(chǔ)設(shè)施的平臺化。" 劉希猛說。 開啟"南征北戰(zhàn)"新
    的頭像 發(fā)表于 06-04 16:41 ?242次閱讀

    浪潮信息發(fā)布AS13000G7-N系列分布式全閃存儲

    浪潮信息近日推出了專為大型AI模型優(yōu)化的AS13000G7-N系列分布式全閃存儲。該系列基于浪潮信息自研的分布式文件系統(tǒng),結(jié)合新一代數(shù)據(jù)加速引擎DataTurbo,為用戶提供卓越的
    的頭像 發(fā)表于 05-14 10:03 ?562次閱讀

    為大模型專門優(yōu)化 浪潮信息發(fā)布分布式全閃存儲AS13000G7-N系列

    DataTurbo,通過盤控協(xié)同、GPU直訪存儲、全局一致性緩存等技術(shù)為AI大模型數(shù)據(jù)歸集、訓(xùn)練、數(shù)據(jù)歸檔與管理等階段提供強(qiáng)大存儲支撐能力,助力用戶加速大模型系統(tǒng)的創(chuàng)新及應(yīng)用落地。 ?
    的頭像 發(fā)表于 05-10 16:37 ?428次閱讀
    為大模型專門優(yōu)化 <b class='flag-5'>浪潮</b>信息發(fā)布分布式全閃<b class='flag-5'>存儲</b>AS13000G7-N系列

    在機(jī)遇與挑戰(zhàn)并存的AI時代,星如何在DRAM領(lǐng)域開拓創(chuàng)新?

    在機(jī)遇與挑戰(zhàn)并存的AI時代,星如何在DRAM領(lǐng)域開拓創(chuàng)新?
    發(fā)表于 05-09 18:46 ?470次閱讀
    在機(jī)遇與<b class='flag-5'>挑戰(zhàn)</b>并存的AI<b class='flag-5'>時代</b>,<b class='flag-5'>三</b>星如何在DRAM領(lǐng)域開拓創(chuàng)新?

    AI時代,HBM掀起存儲芯片新浪潮

    2022年末,ChatGPT的面世無疑成為了引領(lǐng)人工智能浪潮的標(biāo)志性事件,宣告著新一輪科技革命的到來。
    的頭像 發(fā)表于 03-27 09:40 ?851次閱讀
    AI<b class='flag-5'>時代</b>,HBM掀起<b class='flag-5'>存儲</b>芯片新<b class='flag-5'>浪潮</b>

    面臨罷工,存儲市場供需引關(guān)注

    星電子與與“星電子全國工會”代表之間的薪資談判破裂,以及工會可能發(fā)起的罷工行動,確實引發(fā)了市場對存儲供需市場的關(guān)注。作為全球存儲龍頭廠商,
    的頭像 發(fā)表于 03-20 11:37 ?877次閱讀
    RM新时代网站-首页