紫光的該項(xiàng)專利提出的基于對象存儲的隨機(jī)讀寫對象的方法,以索引對象和多個(gè)數(shù)據(jù)對象來構(gòu)成一個(gè)向用戶提供服務(wù)的完整對象,在索引對象中記錄各個(gè)數(shù)據(jù)對象中的數(shù)據(jù)在整個(gè)數(shù)據(jù)段中的位置關(guān)系,基于這樣的存儲方式能夠大大縮短隨機(jī)讀寫時(shí)間。
集微網(wǎng)消息,作為中國三大半導(dǎo)體存儲企業(yè)之一的紫光集團(tuán),為了促進(jìn)存儲產(chǎn)業(yè)的建設(shè),在武漢長江存儲項(xiàng)目之后,又在南京展開了產(chǎn)業(yè)基地的重大項(xiàng)目。
隨著互聯(lián)網(wǎng)、Web2 .0的快速發(fā)展,人們上傳海量的照片、視頻、音樂,社交軟件每天都新增數(shù)十億條內(nèi)容,人們每天發(fā)送數(shù)千億封電子郵件。據(jù)IDC統(tǒng)計(jì)未來在10年間數(shù)據(jù)將增長44倍,到2020年全球數(shù)據(jù)將增加到35ZB,其中80%是非結(jié)構(gòu)化數(shù)據(jù),且大部分是非活躍數(shù)據(jù)。
面對如此龐大的數(shù)據(jù)量,僅具備PB級擴(kuò)展能力的塊存儲(例如SAN架構(gòu))和文件存儲(例如NAS架構(gòu))顯得有些無能為力。人們需要一種全新架構(gòu)的存儲系統(tǒng),這種存儲系統(tǒng)需要具備極高的可擴(kuò)展性,能夠滿足人們對存儲容量TB到EB規(guī)模的擴(kuò)展需求,于是對象存儲應(yīng)運(yùn)而生。然而面對大量隨機(jī)讀寫的場景,特別是針對GB和TB級別大小的對象,對象存儲的缺點(diǎn)就暴露出來了,對CPU、內(nèi)存和網(wǎng)絡(luò)帶寬的要求非常高,即使在資源條件很高的情況下,隨機(jī)讀寫耗時(shí)也很長。
針對現(xiàn)有技術(shù)的不足,南京紫光申請了一項(xiàng)名為“基于對象存儲的隨機(jī)讀寫對象的方法和系統(tǒng)”的發(fā)明專利(申請?zhí)枺?01810554758.8),申請人為南京紫光云信息科技有限公司。

圖1
圖1是該專利提出的對象存儲方式的組成示意圖,一個(gè)完整的對象包括一個(gè)索引對象和多個(gè)數(shù)據(jù)對象,數(shù)據(jù)存儲在這些數(shù)據(jù)對象中,索引對象用來記錄完整對象的基本信息以及數(shù)據(jù)對象中的數(shù)據(jù)在整個(gè)數(shù)據(jù)段中的位置。索引對象主要包括索引頭信息和數(shù)據(jù)段信息,索引頭信息中提供了對象的基本信息,包含對象大小等,數(shù)據(jù)段信息記錄了數(shù)據(jù)段與數(shù)據(jù)對象中的數(shù)據(jù)的對應(yīng)關(guān)系。

圖2
上圖是該專利提出的一種對象存儲系統(tǒng)的結(jié)構(gòu)示意圖。該存儲系統(tǒng)包括客戶端和對象存儲設(shè)備。對象存儲設(shè)備指的是向用戶提供對象存儲服務(wù)的設(shè)備或資源 ,比如存儲云等。客戶端分為兩種,一種是標(biāo)準(zhǔn)客戶端 ,一種是集成SDK (Software Development Kit,軟件開發(fā)工具包)的客戶端,由SDK提供相關(guān)接口來讀寫。
我們通過圖2對該系統(tǒng)結(jié)構(gòu)做一個(gè)簡要說明。網(wǎng)關(guān)由請求分析模塊、透傳模塊、SDK讀取模塊、SDK遍歷模塊和SDK刪除模塊組成。首先S3客戶端發(fā)送請求給網(wǎng)關(guān),網(wǎng)關(guān)收到請求后,通過請求分析模塊解析請求類型,根據(jù)請求類型和請求目標(biāo)調(diào)用其他模塊進(jìn)行相應(yīng)操作。請求類型包括讀取(GET)對象、刪除(DELETE)對象、遍歷對象、寫入(PUT)對象等。當(dāng)請求類型是讀取、刪除或遍歷請求時(shí),判斷被請求的對象是否為索引對象,如果是,則調(diào)用相應(yīng)的SDK模塊進(jìn)行處理;如果被請求的對象為標(biāo)準(zhǔn)對象,讀取請求可以直接通過透傳模塊獲取數(shù)據(jù),刪除請求直接刪除對象,而對于遍歷請求則不做任何處理;如果請求類型是其他請求,那么直接通過透傳模塊將請求透傳到對象存儲設(shè)備中,由對象存儲設(shè)備來處理。
該專利提出的這種基于對象存儲的隨機(jī)讀寫對象的方法,以索引對象和多個(gè)數(shù)據(jù)對象來構(gòu)成一個(gè)向用戶提供服務(wù)的完整對象,在索引對象中記錄各個(gè)數(shù)據(jù)對象中的數(shù)據(jù)在整個(gè)數(shù)據(jù)段中的位置關(guān)系,基于這樣的存儲方式能夠大大縮短隨機(jī)讀寫時(shí)間。
在相關(guān)政策的支持下,國內(nèi)的存儲產(chǎn)業(yè)發(fā)展迅猛,誕生了許多諸如紫光集團(tuán)這樣的存儲公司。為了打破國外的壟斷,它們?yōu)榭萍紕?chuàng)新、產(chǎn)品升級注入了許多心血,為我國存儲行業(yè)的發(fā)展貢獻(xiàn)出自己的力量。
-
cpu
+關(guān)注
關(guān)注
68文章
11279瀏覽量
224995 -
內(nèi)存
+關(guān)注
關(guān)注
9文章
3210瀏覽量
76373 -
紫光
+關(guān)注
關(guān)注
2文章
426瀏覽量
35059
發(fā)布評論請先 登錄
對象存儲與傳統(tǒng)網(wǎng)絡(luò)存儲有什么區(qū)別?
什么是對象存儲?
容器實(shí)現(xiàn)持久存儲的3個(gè)基礎(chǔ)類型:塊存儲、對象存儲和文件系統(tǒng)
一種面向高性能計(jì)算的分布式對象存儲系統(tǒng)
對象存儲與塊存儲的工作方式有何不同?
對象存儲是什么?看過就明白了
杉巖海量對象存儲系統(tǒng)完美替代Documentum
為什么物聯(lián)網(wǎng)存儲基于對象
對象存儲、統(tǒng)一存儲與塊存儲有什么差異
對象存儲的優(yōu)勢有哪些?
人工智能和深度學(xué)習(xí)的對象存儲挑戰(zhàn)
對象存儲的原理分析
對象存儲是什么 對象存儲的優(yōu)勢
什么是對象存儲?
虹科分享 | 網(wǎng)絡(luò)仿真器 | 預(yù)測云中對象存儲系統(tǒng)的實(shí)際性能
南京紫光基于對象存儲系統(tǒng)的隨機(jī)讀寫對象的方法
評論