chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

對象存儲中的五個要素

電子工程師 ? 來源:開源云中文社區(qū) ? 作者:開源云中文社區(qū) ? 2019-11-11 14:30 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

一般來說,當(dāng)人們考慮對象存儲時,只考慮一件事——每TB/GB的價格。盡管這是一個不錯的成本指標(biāo),但它的作用是使對象存儲一維化,并將其降級為存檔用例。此外,它扭曲了企業(yè)技術(shù)堆棧中這一日益重要的部分的價值。

坦率地說,這應(yīng)該歸咎于傳統(tǒng)對象存儲廠商。多年來,它們在技術(shù)方面創(chuàng)新不足,轉(zhuǎn)而提供更便宜的產(chǎn)品。它們還會說這就是顧客想要的,但它們錯了。

AWS去年收入達(dá)250億美元可作為證據(jù)——其中絕大多數(shù)是高性能的主要對象存儲。如果我們保守地將S3存儲服務(wù)的規(guī)模算為200億美元,可以說,S3的規(guī)模是其他廠商的總和。再加上價格相似、增長迅速的Azure Blob和Google Cloud,情況就明朗了——成本只是一個考慮因素。

這就是為什么現(xiàn)代企業(yè)關(guān)注的是更廣泛的一系列指標(biāo)——強(qiáng)調(diào)性能、運維效率、靈活性和價格的指標(biāo),而不僅僅是價格。他們認(rèn)識到將數(shù)據(jù)放在“冰上”會降低其價值。在目標(biāo)是最大化組織數(shù)據(jù)的價值的時候,供應(yīng)商的方法似乎與之背道而馳。

企業(yè)應(yīng)該考慮什么?這分為五大類:性能、可擴(kuò)展性、S3兼容性、故障響應(yīng)、一致性。成本之外,這五個要素定義了對象存儲中的新指標(biāo)。

性能

傳統(tǒng)上,對象存儲并不以性能著稱。在價格競爭中,廠商不斷犧牲性能?,F(xiàn)代對象存儲改變了這一點。

從Amazon到Minio,我們都看到了接近甚至超過Hadoop的速度。新的對象存儲指標(biāo)涉及到讀寫速度(HDD為10GB/s,NVMe為35+GB/s)。對于Spark、Presto、Tensorflow、Teradata、Vertica、Splunk和分析堆棧中的其他現(xiàn)代計算框架來說,這種吞吐量非常快。MPP數(shù)據(jù)庫以對象存儲為目標(biāo)這一事實證明,對象存儲越來越成為主要存儲。

如果對象存儲系統(tǒng)無法提供這些速度,則無法與所有數(shù)據(jù)交互,也無法從中提取價值。即使你將數(shù)據(jù)從傳統(tǒng)對象存儲中提取到內(nèi)存中的處理框架中,你仍然需要吞吐量來將數(shù)據(jù)往返于該內(nèi)存中——你根本無法從傳統(tǒng)對象設(shè)備獲得這樣的吞吐量。

這是一個關(guān)鍵點。新的性能指標(biāo)是吞吐量,而不是延遲。這是大規(guī)模數(shù)據(jù)所需要的——這是現(xiàn)代數(shù)據(jù)基礎(chǔ)設(shè)施中的一個標(biāo)準(zhǔn)。

應(yīng)該注意的是,雖然性能基準(zhǔn)是一個很好的代理,但是只有在該環(huán)境中運行了特定的應(yīng)用程序之后,才能真正知道性能是什么樣子的。只有這樣,它們才能理解瓶頸到底是什么,是存儲軟件、驅(qū)動器、網(wǎng)絡(luò)還是計算層。

可伸縮性

可伸縮性通常指一個命名空間中的PB數(shù)。每個供應(yīng)商都聲稱zeta規(guī)模,但隱藏了這樣一個事實:隨著規(guī)模的擴(kuò)大,龐大的、單體的系統(tǒng)變得脆弱、復(fù)雜、不穩(wěn)定和昂貴。

可伸縮性的新指標(biāo)是你可以處理多少個不同的命名空間或租戶。

這個指標(biāo)是直接從hyper-scaler中獲取的,其中,構(gòu)建塊很小,但可以擴(kuò)展到數(shù)十億個。簡而言之,這是云原生的方式。

當(dāng)構(gòu)建塊很小時,一切都可以更有效地理解和優(yōu)化——安全性、訪問控制、策略管理、生命周期管理、無中斷升級和更新以及最終的性能。構(gòu)建塊的大小是故障域可管理性的函數(shù)。這就是高彈性系統(tǒng)的架構(gòu)。

多租戶在現(xiàn)代企業(yè)中具有多個維度。當(dāng)然,它指的是企業(yè)如何組織對數(shù)據(jù)和應(yīng)用程序的訪問,它也指應(yīng)用程序本身以及它們在邏輯上如何相互隔離。

現(xiàn)代多租戶方法具有以下特點:

——租戶可以在短時間內(nèi)從幾百個發(fā)展到幾百萬個。

——租戶之間完全隔離,使它們能夠運行具有不同配置、權(quán)限、功能、安全性和服務(wù)級別的同一對象存儲軟件的不同版本。當(dāng)擴(kuò)展新服務(wù)器、更新和地理位置時,這是一個實際的運維問題。

——有彈性和按需。

——每個操作都是API驅(qū)動的,自動化的,沒有人看儀表板。

——軟件足夠輕量,可以進(jìn)行容器化,并利用Kubernetes等行業(yè)標(biāo)準(zhǔn)的編排服務(wù)。

S3兼容性

Amazon S3 API是對象存儲的事實標(biāo)準(zhǔn),以至于每個對象存儲軟件供應(yīng)商都聲稱與之兼容。也就是說,AWS S3的兼容性實際上是二元的。S3兼容性的指標(biāo)是1。

這意味著,有成百上千的“角落”用例并沒有如你所愿發(fā)生。這對專有軟件或設(shè)備供應(yīng)商來說尤其具有挑戰(zhàn)性。原因是,它們的大多數(shù)用例都是直接存檔或備份,因此API調(diào)用的多樣性很低,而且用例非常同質(zhì)。顯然,這是一個開源軟件具有顯著優(yōu)勢的領(lǐng)域。考慮到應(yīng)用程序、操作系統(tǒng)和硬件架構(gòu)的大小和多樣性,足以覆蓋大多數(shù)“角落”用例。

對應(yīng)用程序創(chuàng)建者來說,這很重要。你需要測試應(yīng)用程序。開源使評估供應(yīng)商聲明和確定平臺對應(yīng)用程序性能的影響變得容易。如果你的供應(yīng)商足夠好,可以作為一個門戶,并被其他人作為一個門戶,那么你可以有信心,它能滿足你的需要。關(guān)于開源和S3的最后一點是,開源意味著企業(yè)避免了供應(yīng)商鎖定,提高了透明度。

關(guān)于S3兼容,如果你正在運行大數(shù)據(jù)應(yīng)用程序,S3 SELECT通過用SQL從對象存儲中只提取所需的內(nèi)容,可以大大提高性能和效率。

另外,對bucket通知的支持也是關(guān)鍵。bucket通知有助于無服務(wù)器計算——這是任何基于微服務(wù)的功能即服務(wù)中的關(guān)鍵組件。假設(shè)對象存儲是云中存儲的事實標(biāo)準(zhǔn),那么當(dāng)將對象服務(wù)器公開給云原生應(yīng)用程序時,此功能是必須的。

最后,S3實現(xiàn)需要支持Amazon S3服務(wù)器端加密API(SSE-C、SSE-S3、SSE-KMS)。更棒的是,它應(yīng)該支持可證明足夠安全的防篡改。

故障

在對象存儲中,最容易被忽略的指標(biāo)可能是系統(tǒng)如何處理故障。故障會發(fā)生,有多種形式。對象存儲系統(tǒng)需要優(yōu)雅地處理所有這些問題。

例如,如果存在單點故障,那么這個指標(biāo)是零。

不幸的是,許多對象存儲系統(tǒng)將使用“特殊”節(jié)點,這些節(jié)點必須啟動才能使集群正常工作。其中包括名稱節(jié)點或元數(shù)據(jù)服務(wù)器。這就會造成單點故障。

即使有多個故障點,承受災(zāi)難性失敗的能力也是至關(guān)重要的。驅(qū)動器會出現(xiàn)故障,服務(wù)器會壞。關(guān)鍵是采用將故障視為正常情況的軟件。這意味著,當(dāng)磁盤或節(jié)點關(guān)閉時,軟件可以不受影響地繼續(xù)運行。

inline erasure coding和bitrot protection帶來的革命確保在軟件返回數(shù)據(jù)之前,你可以丟失與奇偶校驗塊一樣多的磁盤或節(jié)點(這通常是驅(qū)動器的一半)。

故障很少大規(guī)模測試,但應(yīng)該是強(qiáng)制性的。模擬負(fù)載下的故障將提供故障總成本(數(shù)據(jù)丟失、時間和技能)的準(zhǔn)確消息。

一致性

一致性的指標(biāo)是100%。一致性是任何存儲系統(tǒng)中的一個關(guān)鍵組件,但嚴(yán)格的一致性很少。例如,Amazon S3 ListObject不是嚴(yán)格一致的,它只是最終一致的。

嚴(yán)格一致性是什么意思?對于確認(rèn)的PUT操作之后的所有操作,必須保持以下狀態(tài):更新的值在從任何節(jié)點讀取時都可見;更新帶有冗余,免受節(jié)點故障的影響。

這意味著,如果在寫入過程中拔出插頭,不會丟失任何內(nèi)容。結(jié)果是系統(tǒng)永遠(yuǎn)不會返回?fù)p壞或過時的數(shù)據(jù)。這是一個很高的標(biāo)準(zhǔn),對交易型應(yīng)用程序到備份和恢復(fù)用例都有影響。

結(jié)論

這些是對象存儲中的新指標(biāo),反映了現(xiàn)代企業(yè)的使用模式,其中性能、一致性、可伸縮性、故障域和S3兼容性是云原生應(yīng)用程序和大數(shù)據(jù)分析的基礎(chǔ)。在構(gòu)建現(xiàn)代數(shù)據(jù)堆棧時,除了考慮成本之外,別忘了這幾個指標(biāo)。

責(zé)任編輯:zl

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 驅(qū)動器
    +關(guān)注

    關(guān)注

    54

    文章

    8689

    瀏覽量

    149910
  • 存儲
    +關(guān)注

    關(guān)注

    13

    文章

    4531

    瀏覽量

    87431
  • API
    API
    +關(guān)注

    關(guān)注

    2

    文章

    1609

    瀏覽量

    64008
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    SMT貼片加工的那些關(guān)鍵要素,你了解嗎?

    一站式PCBA智造廠家今天為大家講講SMT貼片加工流程的關(guān)鍵要素有哪些?SMT貼片加工流程的關(guān)鍵要素。隨著電子產(chǎn)品日益小型化、輕量化的發(fā)展趨勢,SMT貼片加工作為電子制造
    的頭像 發(fā)表于 04-01 09:46 ?324次閱讀

    軟國際推出基于DeepSeek的數(shù)據(jù)要素保障基地平臺

    為深度盤活數(shù)據(jù)資源、釋放數(shù)據(jù)要素的價值,推動數(shù)據(jù)要素市場的健康發(fā)展,軟國際依托深厚行業(yè)積累,推出了以DeepSeek深度賦能的數(shù)據(jù)要素保障基地平臺, 作為推動數(shù)據(jù)資源化、資產(chǎn)化、資本
    的頭像 發(fā)表于 03-03 17:16 ?576次閱讀

    RTOS的本地存儲指針使用

    本地存儲指針是RTOS的一重要特性,增強(qiáng)了任務(wù)管理和數(shù)據(jù)處理能力。在RTOS上下文中,本地存儲是指存儲在本地的特定任務(wù)或
    的頭像 發(fā)表于 02-28 16:33 ?915次閱讀
    RTOS<b class='flag-5'>中</b>的本地<b class='flag-5'>存儲</b>指針使用

    存儲控電腦,云存儲控電腦如何實現(xiàn)文件同步?

    煩惱,一切都變得如此簡單和高效。今天小編給大家分享云存儲控電腦如何實現(xiàn)文件同步。 ? ?云存儲控電腦實現(xiàn)文件同步的步驟如下: ? ?1.選擇云
    的頭像 發(fā)表于 02-10 11:19 ?384次閱讀
    云<b class='flag-5'>存儲</b><b class='flag-5'>中</b>控電腦,云<b class='flag-5'>存儲</b><b class='flag-5'>中</b>控電腦如何實現(xiàn)文件同步?

    對象存儲是什么結(jié)構(gòu)類型?

    對象存儲屬于非結(jié)構(gòu)化數(shù)據(jù)存儲架構(gòu),采用扁平化命名空間結(jié)構(gòu)。其核心通過唯一標(biāo)識符(ObjectID)定位數(shù)據(jù)對象,突破傳統(tǒng)文件系統(tǒng)的層級目錄限制,形成"桶-
    的頭像 發(fā)表于 02-10 11:14 ?329次閱讀

    HPC工作負(fù)載管理的關(guān)鍵要素

    HPC工作負(fù)載管理是一復(fù)雜而精細(xì)的過程,涉及資源分配、作業(yè)調(diào)度、性能監(jiān)控與優(yōu)化以及故障處理與恢復(fù)等多個關(guān)鍵要素。下面,AI部落小編帶您了解HPC工作負(fù)載管理的關(guān)鍵要素。
    的頭像 發(fā)表于 02-08 09:53 ?328次閱讀

    PCB的基本要素

    網(wǎng)絡(luò)。同時PCB板還具有絕緣,隔熱,防潮等功能。 3、PCB的基本要素用 01 要素一:載板 PCB的載板又稱為基
    的頭像 發(fā)表于 01-07 09:30 ?1753次閱讀

    EMMC存儲在手機(jī)的應(yīng)用

    存儲技術(shù),它集成了控制器和NAND閃存在一單一的封裝。這種集成設(shè)計簡化了手機(jī)制造商的設(shè)計和制造過程,因為它減少了需要集成的組件數(shù)量。EMMC遵循JEDEC標(biāo)準(zhǔn),支持多種接口,如eMMC 4.5、eMMC 5.0和eMMC
    的頭像 發(fā)表于 12-25 09:36 ?1748次閱讀

    為什么選不中PCB上的對象?

    圖就是一封裝的“鎖定”屬性: “鎖定”用來確保對象不會被誤操作修改,所以被“鎖定”的du當(dāng)然輕易是選不中的(默認(rèn)情況)!對于PCB已經(jīng)完全布局、布線且不希望被改動的對象,就可以進(jìn)行
    的頭像 發(fā)表于 11-12 12:23 ?2810次閱讀
    為什么選不中PCB上的<b class='flag-5'>對象</b>?

    關(guān)于對象存儲和云硬盤區(qū)別,你了解多少?

    掛載到云服務(wù)器上使用,適合高性能、低延遲的數(shù)據(jù)庫和文件系統(tǒng)存儲。選擇哪種方案應(yīng)根據(jù)具體業(yè)務(wù)需求和數(shù)據(jù)類型決定。UU云小編將從定義特點、使用方式與共享、存儲與訪問特性、應(yīng)用場景等四方面對對象
    的頭像 發(fā)表于 11-01 10:57 ?522次閱讀

    Jtti:云存儲網(wǎng)關(guān)的定義及用例

    存儲網(wǎng)關(guān),也稱為邊緣文件服務(wù)器,是一種混合云存儲設(shè)備,可將本地網(wǎng)絡(luò)連接到一或多個云存儲服務(wù),通常是對象
    的頭像 發(fā)表于 10-30 16:11 ?541次閱讀

    oss對象存儲費用是多少一年?#費用 #對象存儲

    存儲
    jf_57681485
    發(fā)布于 :2024年10月15日 15:38:19

    機(jī)械振動的三基本要素

    機(jī)械振動是物體或質(zhì)點在其平衡位置附近進(jìn)行的往復(fù)運動。在物理學(xué),機(jī)械振動是一種非常普遍的現(xiàn)象,它涉及到許多不同的物理過程和應(yīng)用。機(jī)械振動的三基本要素是:振幅、周期和頻率。 1. 振幅
    的頭像 發(fā)表于 09-26 14:55 ?2591次閱讀

    正弦量的三要素是什么

    正弦量是一非常重要的概念,它描述了隨時間變化的交流電信號。為了更好地理解和分析正弦量,我們需要掌握其基本要素等相關(guān)知識。下面將詳細(xì)介紹這些內(nèi)容。 一、正弦量的基本要素 正弦量具有三
    的頭像 發(fā)表于 09-24 18:11 ?2556次閱讀

    基于分布式對象存儲WDS的信托非結(jié)構(gòu)化數(shù)據(jù)整合平臺

    基于分布式對象存儲WDS的信托非結(jié)構(gòu)化數(shù)據(jù)整合平臺
    的頭像 發(fā)表于 08-28 09:56 ?642次閱讀
    基于分布式<b class='flag-5'>對象</b><b class='flag-5'>存儲</b>WDS的信托非結(jié)構(gòu)化數(shù)據(jù)整合平臺