在曙光舉辦的技術(shù)圓桌派上，來(lái)自業(yè)內(nèi)的多位大咖和專家就數(shù)字化轉(zhuǎn)型與分布式存儲(chǔ)發(fā)展趨勢(shì)展開討論。

支撐海量數(shù)據(jù)

分布式存儲(chǔ)該如何應(yīng)戰(zhàn)

伴隨著云計(jì)算、大數(shù)據(jù)、物聯(lián)網(wǎng)等信息技術(shù)的快速發(fā)展和傳統(tǒng)產(chǎn)業(yè)數(shù)字化的轉(zhuǎn)型，新技術(shù)的應(yīng)用與推廣帶來(lái)海量數(shù)據(jù)的規(guī)?；奂?。用戶對(duì)存儲(chǔ)系統(tǒng)的穩(wěn)定性、性能和彈性擴(kuò)展能力有著更高的期待，而傳統(tǒng)集中式存儲(chǔ)煙囪式的部署模式在擴(kuò)展性和管理上都遇到非常多的挑戰(zhàn)，主持人黃海峰在圓桌派一開始向嘉賓們提出了這一問(wèn)題。

“2021年，分布式存儲(chǔ)和云存儲(chǔ)在量和銷售額方面的增速分別達(dá)到30%和20%，相較于傳統(tǒng)存儲(chǔ)的20%和8%，分布式存儲(chǔ)遠(yuǎn)遠(yuǎn)勝于傳統(tǒng)存儲(chǔ)?！辟惖项檰?wèn)業(yè)務(wù)總監(jiān)高丹對(duì)2021年的存儲(chǔ)市場(chǎng)格局做出了總結(jié)。

“面對(duì)海量爆發(fā)的數(shù)據(jù)，以前傳統(tǒng)集中式的存儲(chǔ)已經(jīng)不是最優(yōu)選了?！敝锌剖锕獯鎯?chǔ)事業(yè)部副總經(jīng)理張新鳳表示，“對(duì)分布式存儲(chǔ)本身來(lái)說(shuō)，破解海量數(shù)據(jù)存儲(chǔ)難題，也是有非常多的挑戰(zhàn)?！?/p>

首先，就是解決海量數(shù)據(jù)的存儲(chǔ)。海量不簡(jiǎn)簡(jiǎn)單單的是設(shè)備的堆集，技術(shù)難度是指數(shù)級(jí)的增長(zhǎng)。要看廠商是否有豐富的超大部署規(guī)模和實(shí)施經(jīng)驗(yàn);第二是能對(duì)5G、AI、區(qū)塊鏈等新技術(shù)有更好的支持。這就需要統(tǒng)一協(xié)議的支持，打通從數(shù)據(jù)的采集、應(yīng)用、分析到歸檔的鏈路，做到異構(gòu)數(shù)據(jù)的融合;第三，針對(duì)用戶實(shí)際應(yīng)用，在產(chǎn)品性能和功能上做到深度的定制。

自研優(yōu)勢(shì)盡顯

曙光分布式存儲(chǔ)領(lǐng)跑市場(chǎng)

“存儲(chǔ)的市場(chǎng)，是一個(gè)需要很深的技術(shù)積累和很大資金投入的市場(chǎng)。曙光推出的產(chǎn)品是自研的。自研的路線，對(duì)客戶節(jié)約成本角度來(lái)說(shuō)，還是對(duì)我們自己安全的角度來(lái)說(shuō)，都是一套比較好的技術(shù)路線，我也希望我們自己國(guó)家的自研路線走的越來(lái)越好?！备叩け硎?。

“曙光做存儲(chǔ)，一開始就選擇了分布式存儲(chǔ)路線?！睆埿馒P介紹，2009年，曙光推出第一代全自主研發(fā)的分布式存儲(chǔ)系統(tǒng)ParaStor，基于POSIX協(xié)議，在做數(shù)據(jù)處理的時(shí)候有很好的性能體驗(yàn);2013年，數(shù)據(jù)中心已經(jīng)開始比較規(guī)模化的部署，這個(gè)時(shí)候我們完成了對(duì)NAS共享的支持;2019年，基本各個(gè)行業(yè)都在普及云化，我們?yōu)榱私鉀Q業(yè)務(wù)上云的問(wèn)題，又推出分布式塊協(xié)議?，F(xiàn)在， 曙光分布式存儲(chǔ)系統(tǒng)ParaStor完成了對(duì)文件、塊、對(duì)象和大數(shù)據(jù)協(xié)議的支持，基本覆蓋所有應(yīng)用場(chǎng)景。

基于自研優(yōu)勢(shì)，曙光可根據(jù)不同行業(yè)用戶的不同需求，進(jìn)行代碼級(jí)的定制化設(shè)計(jì)與開發(fā)，產(chǎn)品功能和性能指標(biāo)可大大優(yōu)于同類產(chǎn)品。“比如我們的分布式對(duì)象，單桶就可以實(shí)現(xiàn)4K小文件千億級(jí)別的存儲(chǔ)，一個(gè)系統(tǒng)TPS的聚合性能可以達(dá)到百萬(wàn)級(jí)，這種水平是業(yè)內(nèi)一流的?！睆埿馒P說(shuō)。

曙光成就產(chǎn)業(yè)數(shù)字化轉(zhuǎn)型

最佳實(shí)踐

“分布式的應(yīng)用越來(lái)越廣泛，但細(xì)化到具體的應(yīng)用場(chǎng)景里，又會(huì)發(fā)現(xiàn)應(yīng)用需求是千差萬(wàn)別的?！泵鎸?duì)當(dāng)前分布式存儲(chǔ)多樣化的應(yīng)用需求，張新鳳表示“要快速的響應(yīng)市場(chǎng)需求，推出合適的產(chǎn)品，首先要有強(qiáng)有力的團(tuán)隊(duì)支撐，其次是對(duì)行業(yè)的深耕和理解，基于以上兩者的優(yōu)勢(shì)，對(duì)用戶推出定制化的產(chǎn)品及運(yùn)維服務(wù)?！?/p>

張新鳳介紹，在某科研機(jī)構(gòu)氣候模擬和科學(xué)研究項(xiàng)目中，為了幫助用戶解決業(yè)務(wù)流程時(shí)間過(guò)長(zhǎng)的問(wèn)題，曙光集結(jié)專業(yè)研發(fā)團(tuán)隊(duì)為客戶定制加速技術(shù)。在計(jì)算和存儲(chǔ)節(jié)點(diǎn)之間，配備了大內(nèi)存和高速NVMe的性能加速節(jié)點(diǎn)，把大量4K非對(duì)齊IO在這個(gè)節(jié)點(diǎn)上先做聚合，再到存儲(chǔ)上面。最后用戶實(shí)測(cè)使用性能提升8到10倍。“對(duì)存儲(chǔ)技術(shù)有了一定的積累，對(duì)應(yīng)用有相當(dāng)?shù)睦斫?，才能迅速抓到用戶需求痛點(diǎn)，快速響應(yīng)?！?/p>

“在石油勘探過(guò)程中，數(shù)據(jù)存儲(chǔ)和分析處理的需求呈幾何倍增長(zhǎng)，對(duì)存儲(chǔ)容量以及擴(kuò)展性都提了很高的要求;石油勘探領(lǐng)域?qū)κ占蟻?lái)的數(shù)據(jù)，需要提供TB級(jí)及PB級(jí)的讀寫性能，來(lái)滿足我們現(xiàn)在前端的密集計(jì)算和模擬?！?，中石化石油物探技術(shù)研究院信息中心技術(shù)主管葛鑫提及。

“在輿情數(shù)據(jù)智能分析時(shí)，客戶要求系統(tǒng)架構(gòu)能融合訓(xùn)練、分析及推理，傳統(tǒng)存算一體化的模式就不太適用。”中科天璣區(qū)域拓展部總經(jīng)理劉維秦在分布式存儲(chǔ)應(yīng)用中談到，”曙光原生HDFS協(xié)議的支持，在存算分離的基礎(chǔ)上，保證了性能的指數(shù)級(jí)提升，還可以支持更多大數(shù)據(jù)高級(jí)功能。”

“未來(lái)的存儲(chǔ)系統(tǒng)要很好地支撐應(yīng)用，無(wú)論是性能的極致優(yōu)化，或者是功能的定制”，張新鳳對(duì)存儲(chǔ)市場(chǎng)的未來(lái)發(fā)展演進(jìn)做出判斷，“沒(méi)有一蹴而就的捷徑可以走，更多的是天長(zhǎng)日久的積累和演進(jìn)”，作為國(guó)內(nèi)第一批做自研分布式存儲(chǔ)的廠商，曙光將以更扎實(shí)的科研技術(shù)、更先進(jìn)的存儲(chǔ)產(chǎn)品、更優(yōu)質(zhì)的存儲(chǔ)服務(wù)，助力產(chǎn)業(yè)升級(jí)和數(shù)字化轉(zhuǎn)型。

原文標(biāo)題：曙光技術(shù)圓桌派——分布式是新存儲(chǔ)時(shí)代的破題密鑰

文章出處：【微信公眾號(hào)：中科曙光】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

審核編輯：湯梓紅