紫光的該項專利提出的基于對象存儲的隨機(jī)讀寫對象的方法,以索引對象和多個數(shù)據(jù)對象來構(gòu)成一個向用戶提供服務(wù)的完整對象,在索引對象中記錄各個數(shù)據(jù)對象中的數(shù)據(jù)在整個數(shù)據(jù)段中的位置關(guān)系,基于這樣的存儲方式能夠大大縮短隨機(jī)讀寫時間。
集微網(wǎng)消息,作為中國三大半導(dǎo)體存儲企業(yè)之一的紫光集團(tuán),為了促進(jìn)存儲產(chǎn)業(yè)的建設(shè),在武漢長江存儲項目之后,又在南京展開了產(chǎn)業(yè)基地的重大項目。
隨著互聯(lián)網(wǎng)、Web2 .0的快速發(fā)展,人們上傳海量的照片、視頻、音樂,社交軟件每天都新增數(shù)十億條內(nèi)容,人們每天發(fā)送數(shù)千億封電子郵件。據(jù)IDC統(tǒng)計未來在10年間數(shù)據(jù)將增長44倍,到2020年全球數(shù)據(jù)將增加到35ZB,其中80%是非結(jié)構(gòu)化數(shù)據(jù),且大部分是非活躍數(shù)據(jù)。
面對如此龐大的數(shù)據(jù)量,僅具備PB級擴(kuò)展能力的塊存儲(例如SAN架構(gòu))和文件存儲(例如NAS架構(gòu))顯得有些無能為力。人們需要一種全新架構(gòu)的存儲系統(tǒng),這種存儲系統(tǒng)需要具備極高的可擴(kuò)展性,能夠滿足人們對存儲容量TB到EB規(guī)模的擴(kuò)展需求,于是對象存儲應(yīng)運(yùn)而生。然而面對大量隨機(jī)讀寫的場景,特別是針對GB和TB級別大小的對象,對象存儲的缺點就暴露出來了,對CPU、內(nèi)存和網(wǎng)絡(luò)帶寬的要求非常高,即使在資源條件很高的情況下,隨機(jī)讀寫耗時也很長。
針對現(xiàn)有技術(shù)的不足,南京紫光申請了一項名為“基于對象存儲的隨機(jī)讀寫對象的方法和系統(tǒng)”的發(fā)明專利(申請?zhí)枺?01810554758.8),申請人為南京紫光云信息科技有限公司。
圖1
圖1是該專利提出的對象存儲方式的組成示意圖,一個完整的對象包括一個索引對象和多個數(shù)據(jù)對象,數(shù)據(jù)存儲在這些數(shù)據(jù)對象中,索引對象用來記錄完整對象的基本信息以及數(shù)據(jù)對象中的數(shù)據(jù)在整個數(shù)據(jù)段中的位置。索引對象主要包括索引頭信息和數(shù)據(jù)段信息,索引頭信息中提供了對象的基本信息,包含對象大小等,數(shù)據(jù)段信息記錄了數(shù)據(jù)段與數(shù)據(jù)對象中的數(shù)據(jù)的對應(yīng)關(guān)系。
圖2
上圖是該專利提出的一種對象存儲系統(tǒng)的結(jié)構(gòu)示意圖。該存儲系統(tǒng)包括客戶端和對象存儲設(shè)備。對象存儲設(shè)備指的是向用戶提供對象存儲服務(wù)的設(shè)備或資源 ,比如存儲云等??蛻舳朔譃閮煞N,一種是標(biāo)準(zhǔn)客戶端 ,一種是集成SDK (Software Development Kit,軟件開發(fā)工具包)的客戶端,由SDK提供相關(guān)接口來讀寫。
我們通過圖2對該系統(tǒng)結(jié)構(gòu)做一個簡要說明。網(wǎng)關(guān)由請求分析模塊、透傳模塊、SDK讀取模塊、SDK遍歷模塊和SDK刪除模塊組成。首先S3客戶端發(fā)送請求給網(wǎng)關(guān),網(wǎng)關(guān)收到請求后,通過請求分析模塊解析請求類型,根據(jù)請求類型和請求目標(biāo)調(diào)用其他模塊進(jìn)行相應(yīng)操作。請求類型包括讀取(GET)對象、刪除(DELETE)對象、遍歷對象、寫入(PUT)對象等。當(dāng)請求類型是讀取、刪除或遍歷請求時,判斷被請求的對象是否為索引對象,如果是,則調(diào)用相應(yīng)的SDK模塊進(jìn)行處理;如果被請求的對象為標(biāo)準(zhǔn)對象,讀取請求可以直接通過透傳模塊獲取數(shù)據(jù),刪除請求直接刪除對象,而對于遍歷請求則不做任何處理;如果請求類型是其他請求,那么直接通過透傳模塊將請求透傳到對象存儲設(shè)備中,由對象存儲設(shè)備來處理。
該專利提出的這種基于對象存儲的隨機(jī)讀寫對象的方法,以索引對象和多個數(shù)據(jù)對象來構(gòu)成一個向用戶提供服務(wù)的完整對象,在索引對象中記錄各個數(shù)據(jù)對象中的數(shù)據(jù)在整個數(shù)據(jù)段中的位置關(guān)系,基于這樣的存儲方式能夠大大縮短隨機(jī)讀寫時間。
在相關(guān)政策的支持下,國內(nèi)的存儲產(chǎn)業(yè)發(fā)展迅猛,誕生了許多諸如紫光集團(tuán)這樣的存儲公司。為了打破國外的壟斷,它們?yōu)榭萍紕?chuàng)新、產(chǎn)品升級注入了許多心血,為我國存儲行業(yè)的發(fā)展貢獻(xiàn)出自己的力量。
-
cpu
+關(guān)注
關(guān)注
68文章
10854瀏覽量
211568 -
內(nèi)存
+關(guān)注
關(guān)注
8文章
3019瀏覽量
74001 -
紫光
+關(guān)注
關(guān)注
2文章
412瀏覽量
34016
發(fā)布評論請先 登錄
相關(guān)推薦
評論