chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

智慧有數(shù) 浪潮信息發(fā)布生成式AI存儲解決方案

全球TMT ? 來源:全球TMT ? 作者:全球TMT ? 2023-07-11 09:46 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

當前,生成式AI(AIGC)已經(jīng)成為AI產(chǎn)業(yè)化發(fā)展的主戰(zhàn)場,隨著大模型參數(shù)量和數(shù)據(jù)量的爆發(fā)式增長,多源異構數(shù)據(jù)的傳、用、管、存,正在成為制約生成式AI落地的瓶頸之一。為了化解生成式AI的數(shù)據(jù)存儲與管理瓶頸,浪潮信息在"數(shù)智未來"AIGC數(shù)據(jù)應用創(chuàng)新論壇上,正式發(fā)布面向生成式AI的存儲解決方案,該方案以極致融合、極致性能、極致節(jié)能,和熱溫冷冰四級數(shù)據(jù)全生命周期管理,助力開啟生成式AI新局面,創(chuàng)造智慧時代新機遇。

生成式AI亟待突破多源異構和存儲性能瓶頸

生產(chǎn)式AI是人工智能從1.0時代進入2.0時代的重要標志,其具備強大的認知智能,在搜索引擎、藝術創(chuàng)作、影音游戲,以及金融、教育、醫(yī)療、工業(yè)等領域有著廣闊的應用前景。Gartner預測,到2023年將有20%的內(nèi)容被AIGC所創(chuàng)建;到2025 年人工智能生成數(shù)據(jù)占比將達到10%。據(jù)分析師預測,到2032年,生成式人工智能市場規(guī)模將達到2,000億美元,占據(jù)人工智能支出總額的約20%,顯著高出當前的5%。換言之,未來十年市場規(guī)模可能每兩年就會翻一番。

生成式AI主要應用場景涵蓋文本生成、語音生成、圖片生成、視頻生成、代碼生成、虛擬人生成等,在每種應用的背后是基于行業(yè)上下游對數(shù)據(jù)進行采集、標注、訓練、推理、歸檔,其特征是數(shù)據(jù)量大、多元數(shù)據(jù)類型復雜、服務協(xié)議多樣、性能要求苛刻、要求服務持續(xù)在線。生成式AI對數(shù)據(jù)存儲提出如下挑戰(zhàn):

異構數(shù)據(jù)的融合:生成式AI訓練模型的數(shù)據(jù)呈現(xiàn)來源多、格式多的多源異構現(xiàn)狀,傳統(tǒng)存儲面向單一數(shù)據(jù)類型設計,需要以搬移數(shù)據(jù)的方式實現(xiàn)多協(xié)議訪問,存儲成為應用平臺的關鍵瓶頸;

持續(xù)的低延遲與高帶寬:模型訓練過程中,頻繁地從數(shù)據(jù)集取Token,每個Token一般4字節(jié),實時高并發(fā)小IO性能需要極低的延遲;存儲模型Checkpoint時,為Checkpoint數(shù)據(jù)可快速寫入,需要高帶寬;

EB級大容量存儲需求:越多的數(shù)據(jù)投喂結果越精準的工作原理,決定了大模型訓練存在深度學習網(wǎng)絡層數(shù)多、連接多、參數(shù)和數(shù)據(jù)集種類復雜、數(shù)據(jù)量大的特征,隨著模型參數(shù)和數(shù)據(jù)量的快速增長,對于存儲的大容量和擴展需求也迫在眉睫。

數(shù)據(jù)存儲產(chǎn)業(yè)需要進行全方位的技術升級,通過在多源異構融合、數(shù)據(jù)高速傳輸、海量數(shù)據(jù)管理等方面持續(xù)創(chuàng)新,打造專業(yè)的生成式AI存儲產(chǎn)品與解決方案。

浪潮信息讓生成式AI智慧有數(shù)

浪潮信息是最早布局大模型的企業(yè)之一,打造了算力、算法、數(shù)據(jù)全棧的解決方案能力。在數(shù)據(jù)存儲領域,浪潮信息準確識別行業(yè)痛點、積極布局,經(jīng)過持續(xù)攻關,在融合存儲架構、系統(tǒng)性能設計、數(shù)據(jù)全生命周期管理算法等方面不斷突破,打造出生成式AI存儲解決方案。

浪潮信息生成式AI存儲解決方案基于AS13000融合存儲系統(tǒng),可以支撐AIGC產(chǎn)業(yè)上中下游業(yè)務應用,并針對不同業(yè)務階段的數(shù)據(jù)存儲需求,提供熱溫冷冰四級存儲,實現(xiàn)數(shù)據(jù)在各級存儲間自動流轉。用高性能節(jié)點形態(tài)來滿足數(shù)據(jù)訓練、數(shù)據(jù)推理兩個階段的高帶寬、低延時、高并行讀寫性能存儲需求,用大容量節(jié)點形態(tài)來滿足數(shù)據(jù)采集、數(shù)據(jù)準備、數(shù)據(jù)歸檔三個階段的海量多元數(shù)據(jù)存儲需求,方案具備極致融合、極致性能、極致節(jié)能三大能力,以及熱、溫、冷、冰四級數(shù)據(jù)全生命周期存儲管理能力,助力生成式AI突破海量數(shù)據(jù)存力瓶頸,加速釋放數(shù)據(jù)的價值。

極致融合。為了應對不同模態(tài)的多樣性需求,浪潮信息提出"協(xié)議互通、數(shù)據(jù)融合"設計理念,一個集群內(nèi)支持多個存儲池,一個存儲池內(nèi)支持文本、圖片、音頻、視頻等多種類型數(shù)據(jù)存儲,一份數(shù)據(jù)又可以被前端不同業(yè)務場景同時以文件、對象、大數(shù)據(jù)、視頻四種存儲協(xié)議進行并行訪問。用一套存儲實現(xiàn)支持多模態(tài)場景應用,免除了數(shù)據(jù)跨應用時的復制,實現(xiàn)真正意義上非結構化數(shù)據(jù)的協(xié)議互訪互通,讓數(shù)據(jù)融合。

極致性能。AIGC場景數(shù)據(jù)類型多樣化,文件大小不一、數(shù)量多,且讀寫頻繁,對存儲系統(tǒng)的百GB級高帶寬、百萬級IOPS需求成了常態(tài)。浪潮信息在軟件方面,通過數(shù)控分離架構減少東西向數(shù)據(jù)量的轉發(fā),通過GDS、RMDA技術縮短I/O路徑,通過SPDK、緩存零拷貝技術減少I/O路徑上的數(shù)據(jù)拷貝,以及基于自研NVMe SSD開發(fā)的盤控協(xié)同技術,減少I/O訪問SSD盤的次數(shù),使存儲性能得到進一步釋放。在硬件方面,優(yōu)化IO路徑通道,均衡IO路徑,最大化發(fā)揮硬件性能,全閃單節(jié)點帶寬超過50GB/s,IOPS超過50萬;此外,創(chuàng)新性地引入雙控全閃節(jié)點,帶寬超100GB/s,IOPS超100萬,真正使系統(tǒng)具備千萬級IOPS、EB級帶寬,充分滿足AIGC場景對存儲系統(tǒng)的苛刻要求。

極致節(jié)能。浪潮信息近期最新發(fā)布了G7硬件平臺,存儲專用的液冷服務器涵蓋性能型和容量型,且均采用模塊化冷板組件設計模式。在系統(tǒng)方案層面,浪潮信息具有風液式、液液式等完善的端到端解決方案,能夠為用戶全方位打造液冷數(shù)據(jù)中心交鑰匙工程,并且完成了業(yè)界首次液冷整機柜批量交付,實現(xiàn)PUE<1.1。

端到端的數(shù)據(jù)全生命周期管理。除了三大"極致"能力之外,得益于"資源互通、管理融合"的設計理念,浪潮生成式AI存儲方案基于閃存、磁盤、磁帶、光盤四種介質(zhì)提供熱溫冷冰四種存儲資源,通過資源互通實現(xiàn)數(shù)據(jù)全生命周期管理?;跀?shù)據(jù)的熱度識別,自動釋放在線存儲空間,可以將海量數(shù)據(jù)自動歸檔到光盤庫,降低長期存儲成本;實現(xiàn)冷數(shù)據(jù)的分鐘級快速回調(diào),滿足0~4級應用的存儲需求。四種介質(zhì)、四類存儲節(jié)點,提供熱溫冷冰自動流轉,滿足各類應用的靈活配置需求,通過性能型、均衡型、容量型、高密容量型四種機型的按需靈活配置,進一步降低整體投入。

目前,浪潮信息生成式AI存儲解決方案已經(jīng)在全球領先的中文語言大模型"源1.0"中成功落地,面對千億級參數(shù)量和數(shù)據(jù)量帶來的挑戰(zhàn),浪潮信息通過AS13000高吞吐并行存儲系統(tǒng)實現(xiàn)了多存儲協(xié)議互通、數(shù)據(jù)融合,利用全閃的極致性能,助力"源1.0"大模型實現(xiàn)了16天完成訓練的超高效率。國內(nèi)AI獨角獸公司采用浪潮信息提供的并行文件存儲,承載5000億參數(shù)量的NLP語言類大模型的數(shù)據(jù)集Token和CheckPoint文件,輕松應對大/小文件的讀寫挑戰(zhàn),配置AS13000全閃存儲集群,支持高性能RocE組網(wǎng)和GPU直通存儲功能,帶寬超過300GB、存儲性能超過350萬 IOPS,保證存儲集群的高可用與敏捷擴容。

面對生成式AI掀起的變革熱潮,誰能掌握數(shù)字化變革的先機,誰就能把握未來AI革命的致勝關鍵,而數(shù)據(jù)底座將成為千行百業(yè)創(chuàng)新變革的重要基石。浪潮信息存儲秉承"存儲即平臺"的產(chǎn)品理念,精耕數(shù)據(jù)存儲產(chǎn)品與解決方案,攜手合作伙伴,助力生成式AI在金融虛擬客服、圖片編輯設計、智能駕駛、跨模態(tài)檢索等場景的落地,激活數(shù)據(jù)要素新潛能,駕馭智慧化轉型新趨勢,在機遇與挑戰(zhàn)并存的新格局下,為行業(yè)轉型注入新價值、新動能。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4533

    瀏覽量

    87466
  • 浪潮
    +關注

    關注

    1

    文章

    475

    瀏覽量

    24703
  • AI
    AI
    +關注

    關注

    88

    文章

    35164

    瀏覽量

    280016
  • 生成式AI
    +關注

    關注

    0

    文章

    531

    瀏覽量

    817
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    飛利信與浪潮信息達成戰(zhàn)略合作

    近日,2025年浪潮信息北京ISP戰(zhàn)略伙伴簽約授牌儀式成功舉辦。浪潮信息與北京飛利信電子技術有限公司等22家戰(zhàn)略合作伙伴達成簽約,其中將面向北京人工智能應用大市場,在產(chǎn)品技術共創(chuàng)、行業(yè)場景深化及區(qū)域
    的頭像 發(fā)表于 06-24 17:37 ?557次閱讀

    浪潮信息存儲SATA SSD:技術創(chuàng)新引領數(shù)據(jù)存儲新時代

    解決方案。 近期,浪潮信息推出了自研的SATA SSD新品——TS6000G1。這款SSD產(chǎn)品憑借出色的性能和穩(wěn)定的品質(zhì),成為了浪潮信息存儲產(chǎn)品線中的一顆璀璨明珠。 TS6000G1采
    的頭像 發(fā)表于 02-07 13:41 ?649次閱讀

    浪潮信息存儲SATA SSD:以技術創(chuàng)新,開啟數(shù)據(jù)存儲新篇章

    計算平臺以及個人用戶的數(shù)字化需求,迫切需要高效、可靠的存儲解決方案浪潮信息存儲積極響應市場需求,通過自主研發(fā)不斷積累技術優(yōu)勢,推出了SATA、NVMe、雙端口、ZNS等全系列
    的頭像 發(fā)表于 01-24 10:02 ?454次閱讀

    博研智通攜手浪潮信息打造香港智慧交通

    近日,為了將有限的物理空間發(fā)揮到極致,香港率先在多個繁華地段的十字路口升級為智慧路口。通過浪潮信息助力博研智通打造的「云邊協(xié)同的全息智慧路口整體解決方案」,實現(xiàn)了燈隨車變、燈候人行的智
    的頭像 發(fā)表于 01-03 11:40 ?630次閱讀

    浪潮信息剖析智能時代數(shù)據(jù)存儲領域面臨的挑戰(zhàn)與機遇

    在當今數(shù)字化時代,算力與存力的協(xié)同增長已成為驅動各行各業(yè)發(fā)展的關鍵力量。特別是在人工智能(AI)這一前沿領域,隨著數(shù)據(jù)量的爆炸增長,對存儲系統(tǒng)的需求日益復雜和多樣。近期,在首屆CCF中國存儲
    的頭像 發(fā)表于 12-30 09:43 ?781次閱讀

    浪潮信息與17家元腦伙伴共簽億級分銷協(xié)議

    。 此次簽約標志著浪潮信息與這些元腦伙伴將在產(chǎn)品技術創(chuàng)新、市場拓展及解決方案等多個領域展開深入合作。雙方將充分發(fā)揮各自優(yōu)勢,共同推動技術革新,加速智能化轉型的步伐,為千行百業(yè)的數(shù)字化轉型注入強勁動力。 浪潮信息作為國內(nèi)領先
    的頭像 發(fā)表于 12-25 15:46 ?761次閱讀

    浪潮信息發(fā)布KOS AI定制版,大幅提升大模型訓練效率

    浪潮信息近期推出了“元腦服務器操作系統(tǒng)KOS AI定制版”,為人工智能領域帶來了革命性的變化。這款定制版操作系統(tǒng)通過簡單的兩步操作,即可實現(xiàn)大模型訓練環(huán)境的快速部署。
    的頭像 發(fā)表于 10-30 17:23 ?970次閱讀

    浪潮信息AI存儲性能測試的領先之道

    AI技術的無限可能。近日,在MLCommons的子項目MLPerf Storage v1.0性能基準評測中,浪潮信息再度展現(xiàn)了在AI存儲領域的卓越實力。
    的頭像 發(fā)表于 10-29 16:30 ?659次閱讀
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>AI</b><b class='flag-5'>存儲</b>性能測試的領先之道

    浪潮信息AS13000G7榮獲MLPerf? AI存儲基準測試五項性能全球第一

    北京2024年9月27日?/美通社/ -- 9月25日,MLCommons協(xié)會發(fā)布最新MLPerf? Storage v1.0 AI存儲基準測試成績。浪潮信息分布
    的頭像 發(fā)表于 09-28 16:46 ?411次閱讀
    <b class='flag-5'>浪潮信息</b>AS13000G7榮獲MLPerf? <b class='flag-5'>AI</b><b class='flag-5'>存儲</b>基準測試五項性能全球第一

    浪潮信息:元腦企智EPAI助力金融大模型快速落地

    浪潮信息AI算力底座建設、大模型開發(fā)領域積累的成熟、成功經(jīng)驗工具化,助力金融機構又快、又穩(wěn)地部署生成AI應用,助力金融數(shù)智化跨越
    的頭像 發(fā)表于 09-20 16:07 ?706次閱讀
    <b class='flag-5'>浪潮信息</b>:元腦企智EPAI助力金融大模型快速落地

    浪潮信息趙帥:開放計算創(chuàng)新 應對Scaling Law挑戰(zhàn)

    北京2024年8月15日?/美通社/ -- 日前在2024開放計算中國峰會上,浪潮信息服務器產(chǎn)品線總經(jīng)理趙帥表示,智能時代,開源模型和開放計算激發(fā)了人工智能產(chǎn)業(yè)生態(tài)的創(chuàng)新活力,面對大模型
    的頭像 發(fā)表于 08-15 16:02 ?505次閱讀
    <b class='flag-5'>浪潮信息</b>趙帥:開放計算創(chuàng)新 應對Scaling Law挑戰(zhàn)

    33家元腦區(qū)域伙伴與浪潮信息簽署戰(zhàn)略合作協(xié)議

    近日,2024年浪潮信息區(qū)域ISP伙伴戰(zhàn)略簽約儀式圓滿落幕,標志著浪潮信息在人工智能領域的合作版圖再度擴大。此次盛會匯聚了全國范圍內(nèi)33家實力雄厚的億級及千萬級元腦區(qū)域伙伴,共同簽署戰(zhàn)略合作協(xié)議,攜手開啟AI應用新篇章。
    的頭像 發(fā)表于 08-14 16:25 ?746次閱讀

    33家區(qū)域ISP伙伴與浪潮信息簽署戰(zhàn)略合作協(xié)議

    ,涉及互聯(lián)網(wǎng)、電信、金融和制造等人工智能應用落地的前沿行業(yè),雙方將依托浪潮信息元腦生態(tài)體系,以大模型開發(fā)平臺"元腦企智"EPAI為引擎,結合區(qū)域伙伴的行業(yè)優(yōu)勢,共同把握人工智能時代的新機遇,推動AI產(chǎn)業(yè)的發(fā)展。 ? 區(qū)域ISP伙伴:架起
    的頭像 發(fā)表于 08-14 15:43 ?616次閱讀
    33家區(qū)域ISP伙伴與<b class='flag-5'>浪潮信息</b>簽署戰(zhàn)略合作協(xié)議

    長擎安全操作系統(tǒng)24與浪潮信息HF/AS存儲系列成功兼容

    在數(shù)字化轉型浪潮席卷全球的今天,信息安全與數(shù)據(jù)存儲的穩(wěn)定高效成為企業(yè)不可忽視的兩大核心要素。近日,一項重要的技術兼容性測試認證結果揭曉,標志著長擎安全操作系統(tǒng)24與浪潮信息集中式
    的頭像 發(fā)表于 07-22 16:20 ?1086次閱讀

    澎湃認證:浪潮信息集中式存儲攜手長擎安全操作系統(tǒng)24完成兼容性認證

    北京2024年7月19日?/美通社/ -- 近日,長擎安全操作系統(tǒng)24與浪潮信息集中式存儲HF/AS系列產(chǎn)品完成并通過浪潮信息澎湃技術相互兼容性測試認證,長擎安全操作系統(tǒng)24與浪潮信息
    的頭像 發(fā)表于 07-19 13:53 ?508次閱讀
    澎湃認證:<b class='flag-5'>浪潮信息</b>集中式<b class='flag-5'>存儲</b>攜手長擎安全操作系統(tǒng)24完成兼容性認證