chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

對(duì)象存儲(chǔ)適合AI和機(jī)器學(xué)習(xí)工作負(fù)載的三個(gè)原因

如意 ? 來(lái)源:51cto ? 作者:51cto ? 2020-07-06 09:27 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

各種各樣的企業(yè)在加快AI機(jī)器學(xué)習(xí)項(xiàng)目,但要真正發(fā)揮潛力,需要克服重大的技術(shù)障礙。雖然計(jì)算基礎(chǔ)架構(gòu)常常是關(guān)注的重點(diǎn),但存儲(chǔ)同樣重要。這三個(gè)主要的原因表明了為什么對(duì)象存儲(chǔ)(而不是文件存儲(chǔ)或塊存儲(chǔ))特別適合AI和機(jī)器學(xué)習(xí)工作負(fù)載:

1. 可擴(kuò)展性——有龐大且多樣的數(shù)據(jù)源可供學(xué)習(xí)時(shí),AI和機(jī)器學(xué)習(xí)最有效。數(shù)據(jù)科學(xué)家利用這些豐富的數(shù)據(jù)來(lái)訓(xùn)練領(lǐng)域模型。在“大數(shù)據(jù)的五個(gè)V”(容量、種類、速度、準(zhǔn)確性和價(jià)值)中,前兩個(gè)(容量和種類)最重要。簡(jiǎn)而言之,AI和機(jī)器學(xué)習(xí)依賴大量多樣化的數(shù)據(jù)(圖像、文本、結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)),構(gòu)建有用的模型、提供準(zhǔn)確的結(jié)果并最終提供業(yè)務(wù)價(jià)值。

對(duì)象存儲(chǔ)是最具擴(kuò)展性的存儲(chǔ)架構(gòu),特別適合支持AI和機(jī)器學(xué)習(xí)所需的大量數(shù)據(jù)。對(duì)象存儲(chǔ)旨在通過(guò)橫向擴(kuò)展方法支持無(wú)限增長(zhǎng),使企業(yè)組織能夠通過(guò)隨時(shí)隨地添加節(jié)點(diǎn)來(lái)擴(kuò)大部署范圍。由于對(duì)象存儲(chǔ)使用單個(gè)全局命名空間,也可以同時(shí)跨多個(gè)地方進(jìn)行這種擴(kuò)展。另一方面,文件和塊系統(tǒng)通常采用縱向擴(kuò)展方法。這意味著這種平臺(tái)通過(guò)為單個(gè)節(jié)點(diǎn)添加更多計(jì)算資源實(shí)現(xiàn)縱向擴(kuò)展,這種方法最終受到限制。它們無(wú)法通過(guò)部署額外節(jié)點(diǎn)來(lái)增加計(jì)算資源以高效地橫向擴(kuò)展。

2. API——健壯靈活的數(shù)據(jù)API對(duì)于AI和機(jī)器學(xué)習(xí)很重要,如前所述,AI和機(jī)器學(xué)習(xí)使用多種類型的數(shù)據(jù)。存儲(chǔ)平臺(tái)需要支持API以容納各種數(shù)據(jù)。此外,AI和機(jī)器學(xué)習(xí)方面的創(chuàng)新日益在公共云上完成,但是仍有相當(dāng)一部分的AI和機(jī)器學(xué)習(xí)在本地或私有云中進(jìn)行,這取決于使用場(chǎng)合的具體情況(比如說(shuō),科學(xué)研究和醫(yī)療保健等領(lǐng)域的容量密集型工作負(fù)載往往最適合私有云)。這意味著企業(yè)需要在公共云和本地/私有云中都支持工作負(fù)載的存儲(chǔ)API。

文件和塊存儲(chǔ)平臺(tái)在它們支持的API方面受到限制,部分原因是它們是較舊的架構(gòu)。相比之下,對(duì)象存儲(chǔ)使用云端更高級(jí)的API,這種API旨在以應(yīng)用程序?yàn)?a target="_blank">中心,并支持比文件和塊存儲(chǔ)更廣泛的API,包括版本控制、生命周期管理、加密、對(duì)象鎖定和元數(shù)據(jù)。此外,支持AI和機(jī)器學(xué)習(xí)使用場(chǎng)景的新對(duì)象存儲(chǔ)API(比如支持流數(shù)據(jù)和海量數(shù)據(jù)集的查詢)也有可能。

由于對(duì)象存儲(chǔ)API圍繞Amazon S3實(shí)現(xiàn)了標(biāo)準(zhǔn)化,更容易整合本地和公共云中的軟件。企業(yè)可以輕松地將部署的AI和機(jī)器學(xué)習(xí)從本地/私有云環(huán)境擴(kuò)展到公共云,或者將云原生的AI和機(jī)器學(xué)習(xí)工作負(fù)載遷移到本地環(huán)境,功能不會(huì)減損。這種雙模式方法使企業(yè)能夠以合作、可互換的方式利用本地/私有云和公共云上的資源。

由于S3 API已成為對(duì)象存儲(chǔ)事實(shí)上的標(biāo)準(zhǔn),許多軟件工具和庫(kù)都可以充分利用該API。這允許共享代碼、軟件和工具,促進(jìn)AI/機(jī)器學(xué)習(xí)社區(qū)更快速的開(kāi)發(fā)。例子包括流行的機(jī)器學(xué)習(xí)平臺(tái),比如擁有內(nèi)置S3 API的TensorFlow和Apache Spark。

3.元數(shù)據(jù)——與API一樣,使用AI和機(jī)器學(xué)習(xí)的企業(yè)利用無(wú)限制、可自定義的元數(shù)據(jù)顯得至關(guān)重要。元數(shù)據(jù)就是關(guān)于數(shù)據(jù)的數(shù)據(jù)——從最基本的層面上講,某個(gè)數(shù)據(jù)何時(shí)在何地創(chuàng)建、創(chuàng)建者是誰(shuí)。但是元數(shù)據(jù)可以描述更多信息:用戶可以創(chuàng)建任意的元數(shù)據(jù)標(biāo)簽來(lái)描述他們需要的任何屬性。

數(shù)據(jù)科學(xué)家需要豐富的元數(shù)據(jù)來(lái)查找特定數(shù)據(jù)以構(gòu)建和使用AI和機(jī)器學(xué)習(xí)模型。隨著更多信息添加到數(shù)據(jù)中,元數(shù)據(jù)注釋便于逐步積累知識(shí)。

文件和塊存儲(chǔ)僅支持有限的元數(shù)據(jù),比如上述基本屬性。這在很大程度上歸結(jié)為可擴(kuò)展性,因?yàn)槲募蛪K系統(tǒng)無(wú)力支持快速無(wú)縫的增長(zhǎng),如果存儲(chǔ)系統(tǒng)為依賴龐大數(shù)據(jù)集的AI和機(jī)器學(xué)習(xí)應(yīng)用程序支持豐富的元數(shù)據(jù),自然會(huì)出現(xiàn)這種情況。然而,對(duì)象存儲(chǔ)支持無(wú)限制的、完全可自定義的元數(shù)據(jù),從而更容易找到用于AI和機(jī)器學(xué)習(xí)算法的數(shù)據(jù),并從中獲得更準(zhǔn)確的信息。

以一家醫(yī)院針對(duì)X射線圖像使用圖像識(shí)別應(yīng)用程序?yàn)槔河辛嗽獢?shù)據(jù),可以使用TensorFlow模型來(lái)分析添加到對(duì)象存儲(chǔ)系統(tǒng)的每個(gè)圖像,然后為每個(gè)圖像分配細(xì)化的元數(shù)據(jù)標(biāo)簽(比如,傷病類型、基于骨骼大小或生長(zhǎng)情況來(lái)判斷患者的年齡或性別)。然后可以針對(duì)該元數(shù)據(jù)訓(xùn)練TensorFlow模型,并加以分析,對(duì)患者獲得新的寶貴信息(比如說(shuō),二三十歲的女性比五年前更容易患骨骼疾病)。

幾乎每家《財(cái)富》 500強(qiáng)公司都在大張旗鼓地搞AI和機(jī)器學(xué)習(xí),可以想象這些技術(shù)在可預(yù)見(jiàn)的將來(lái)將是最重要的企業(yè)IT項(xiàng)目。然而,AI/機(jī)器學(xué)習(xí)項(xiàng)目要獲得回報(bào),企業(yè)就要使用合適的存儲(chǔ)基礎(chǔ)架構(gòu)。由于可擴(kuò)展性、支持各種API(尤其是S3)和豐富的元數(shù)據(jù),對(duì)象存儲(chǔ)可謂是AI和機(jī)器學(xué)習(xí)的最佳支柱。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 存儲(chǔ)
    +關(guān)注

    關(guān)注

    13

    文章

    4749

    瀏覽量

    89787
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    三個(gè)經(jīng)典開(kāi)關(guān)電源實(shí)際問(wèn)題解析

    下面三個(gè)關(guān)于多路輸出電源連續(xù)工作模式的問(wèn)題,測(cè)試一下您的電源設(shè)計(jì)知識(shí)。然后核對(duì)您的答案。
    的頭像 發(fā)表于 01-22 16:08 ?364次閱讀
    <b class='flag-5'>三個(gè)</b>經(jīng)典開(kāi)關(guān)電源實(shí)際問(wèn)題解析

    未來(lái)工業(yè)AI發(fā)展的三個(gè)必然階段

    與優(yōu)化 能力的深層革命。 未來(lái)十年,工業(yè)AI的發(fā)展將經(jīng)歷三個(gè)清晰的階段:? 智能輔助 → 智能決策 → 自主優(yōu)化 。這次進(jìn)化,構(gòu)成了工業(yè)從“人控機(jī)器”到“
    的頭像 發(fā)表于 10-27 15:47 ?356次閱讀
    未來(lái)工業(yè)<b class='flag-5'>AI</b>發(fā)展的<b class='flag-5'>三個(gè)</b>必然階段

    科技云報(bào)到:西湖大學(xué)、智元機(jī)器人都選它,存儲(chǔ)成為AI下一個(gè)風(fēng)口

    科技云報(bào)到:西湖大學(xué)、智元機(jī)器人都選它,存儲(chǔ)成為AI下一個(gè)風(fēng)口
    的頭像 發(fā)表于 09-03 11:24 ?613次閱讀

    醫(yī)療AI進(jìn)化的三個(gè)關(guān)鍵技術(shù)路徑

    2025年第二十二屆中國(guó)腦血管病論壇(CFCVD)上上演了一場(chǎng)顛覆性對(duì)決——“Deepseek”、“豆包”和“39AIAI(人工智能)模型與數(shù)位臨床醫(yī)生圍繞腦梗死、腦出血、顱內(nèi)動(dòng)脈瘤
    的頭像 發(fā)表于 07-17 14:19 ?5156次閱讀

    【「零基礎(chǔ)開(kāi)發(fā)AI Agent」閱讀體驗(yàn)】+ 入門(mén)篇學(xué)習(xí)

    很高興又有機(jī)會(huì)學(xué)習(xí)ai技術(shù),這次試讀的是「零基礎(chǔ)開(kāi)發(fā)AI Agent」,作者葉濤、管鍇、張心雨。 大模型的普及是近年來(lái)的一件大事,萬(wàn)物皆可大模型已成為趨勢(shì)。作為大模型開(kāi)發(fā)應(yīng)用中重要組
    發(fā)表于 05-02 09:26

    【「零基礎(chǔ)開(kāi)發(fā)AI Agent」閱讀體驗(yàn)】+初品Agent

    期待中的《零基礎(chǔ)開(kāi)發(fā)AI Agent——手把手教你用扣子做智能體》終于寄到了,該書(shū)由葉濤、 管鍇、張心雨完成,并由電子工業(yè)出版社出版發(fā)行。 全書(shū)分為三個(gè)部分,即入門(mén)篇、工具篇及實(shí)踐篇。由此可見(jiàn)這是
    發(fā)表于 04-22 11:51

    NanoEdge AI Studio 面向STM32開(kāi)發(fā)人員機(jī)器學(xué)習(xí)(ML)技術(shù)

    最佳ML庫(kù)。 *附件:nanoedgeaistudio.pdf 軟件下載: https://stm32ai.st.com/download-nanoedgeai/ 演示版可免費(fèi)試用三個(gè)月。專業(yè)版為
    的頭像 發(fā)表于 04-22 11:09 ?1197次閱讀
    NanoEdge <b class='flag-5'>AI</b> Studio 面向STM32開(kāi)發(fā)人員<b class='flag-5'>機(jī)器</b><b class='flag-5'>學(xué)習(xí)</b>(ML)技術(shù)

    面向AI機(jī)器學(xué)習(xí)應(yīng)用的開(kāi)發(fā)平臺(tái) AMD/Xilinx Versal? AI Edge VEK280

    AMD/Xilinx Versal? AI Edge VEK280評(píng)估套件是一款面向AI機(jī)器學(xué)習(xí)應(yīng)用的開(kāi)發(fā)平臺(tái),專為邊緣計(jì)算場(chǎng)景優(yōu)化設(shè)計(jì)。以下從核心配置、技術(shù)特性、應(yīng)用場(chǎng)景及開(kāi)發(fā)支持
    的頭像 發(fā)表于 04-11 18:33 ?2210次閱讀
    面向<b class='flag-5'>AI</b>與<b class='flag-5'>機(jī)器</b><b class='flag-5'>學(xué)習(xí)</b>應(yīng)用的開(kāi)發(fā)平臺(tái) AMD/Xilinx Versal? <b class='flag-5'>AI</b> Edge VEK280

    **【技術(shù)干貨】Nordic nRF54系列芯片:傳感器數(shù)據(jù)采集與AI機(jī)器學(xué)習(xí)的完美結(jié)合**

    【技術(shù)干貨】nRF54系列芯片:傳感器數(shù)據(jù)采集與AI機(jī)器學(xué)習(xí)的完美結(jié)合 近期收到不少伙伴咨詢nRF54系列芯片的應(yīng)用與技術(shù)細(xì)節(jié),今天我們整理幾個(gè)核心問(wèn)題與解答,帶你快速掌握如何在nRF54上部署
    發(fā)表于 04-01 00:00

    Linux系統(tǒng)中最重要的三個(gè)命令

    Linux劍客是Linux系統(tǒng)中最重要的三個(gè)命令,它們以其強(qiáng)大的功能和廣泛的應(yīng)用場(chǎng)景而聞名。這三個(gè)工具的組合使用幾乎可以完美應(yīng)對(duì)Shell中的數(shù)據(jù)分析場(chǎng)景,因此被統(tǒng)稱為L(zhǎng)inux
    的頭像 發(fā)表于 03-03 10:37 ?964次閱讀

    AI Agent 應(yīng)用與項(xiàng)目實(shí)戰(zhàn)》閱讀心得2——客服機(jī)器人、AutoGen框架 、生成式代理

    了分層存儲(chǔ)架構(gòu),將記憶分為短期記憶、工作記憶和長(zhǎng)期記憶三個(gè)層次,通過(guò)注意力機(jī)制和遺忘機(jī)制來(lái)管理記憶的存儲(chǔ)和調(diào)用。反思機(jī)制的創(chuàng)新之處在于引入了元認(rèn)知模型,使代理能夠?qū)ψ陨淼男袨楹蜎Q策進(jìn)行
    發(fā)表于 02-25 21:59

    NetApp革新塊存儲(chǔ),賦能現(xiàn)代工作負(fù)載

    智能數(shù)據(jù)基礎(chǔ)設(shè)施領(lǐng)域的領(lǐng)先企業(yè)NetApp?,近日宣布對(duì)其企業(yè)存儲(chǔ)產(chǎn)品組合進(jìn)行了重大更新,以更好地滿足現(xiàn)代工作負(fù)載的多樣化需求。此次更新重點(diǎn)擴(kuò)充了NetApp ASA A系列,推出了一系列專為加速
    的頭像 發(fā)表于 02-17 10:07 ?767次閱讀

    對(duì)象存儲(chǔ)是什么結(jié)構(gòu)類型?

    對(duì)象存儲(chǔ)屬于非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)架構(gòu),采用扁平化命名空間結(jié)構(gòu)。其核心通過(guò)唯一標(biāo)識(shí)符(ObjectID)定位數(shù)據(jù)對(duì)象,突破傳統(tǒng)文件系統(tǒng)的層級(jí)目錄限制,形成"桶-
    的頭像 發(fā)表于 02-10 11:14 ?800次閱讀

    負(fù)載箱與單相負(fù)載箱的區(qū)別與優(yōu)勢(shì)對(duì)比

    負(fù)載箱與單相負(fù)載箱在電力系統(tǒng)中扮演著不同的角色,它們各自具有獨(dú)特的優(yōu)勢(shì)和適用場(chǎng)景。以下是對(duì)這兩種負(fù)載箱的區(qū)別與優(yōu)勢(shì)對(duì)比: 區(qū)別 工作原理
    發(fā)表于 02-08 13:00

    HPC工作負(fù)載管理的關(guān)鍵要素

    HPC工作負(fù)載管理是一個(gè)復(fù)雜而精細(xì)的過(guò)程,涉及資源分配、作業(yè)調(diào)度、性能監(jiān)控與優(yōu)化以及故障處理與恢復(fù)等多個(gè)關(guān)鍵要素。下面,AI部落小編帶您了解HPC
    的頭像 發(fā)表于 02-08 09:53 ?592次閱讀