chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

算力呈指數(shù)級(jí)增長,服務(wù)器有哪些進(jìn)展?

花茶晶晶 ? 來源:電子發(fā)燒友網(wǎng) ? 作者:黃晶晶 ? 2023-05-17 09:07 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報(bào)道(文/黃晶晶)人工智能的基座包括數(shù)據(jù)、算力和算法。其中算力更是數(shù)據(jù)和算法的支撐。各類模型基于數(shù)據(jù)量、算法的訓(xùn)練和推理推動(dòng)了算力需求。

根據(jù)OpenAI的測算數(shù)據(jù),AI訓(xùn)練運(yùn)行所使用的算力每3-4個(gè)月增長一倍。AI訓(xùn)練運(yùn)行所使用的算力已增長超30萬倍。IDC數(shù)據(jù)顯示,2022年我國智能算力規(guī)模達(dá)到268百億億次/秒(EFLOPS),超過通用算力規(guī)模;預(yù)計(jì)未來5年我國智能算力規(guī)模的年復(fù)合增長率將達(dá)52.3%。

構(gòu)筑算力必然離不開服務(wù)器的建設(shè)。作為全球頂級(jí)的人工智能/高性能計(jì)算服務(wù)器制造商和解決方案提供商,Supermicro公司日前向電子發(fā)燒友網(wǎng)表示,新業(yè)務(wù)合約有很大一部分來自人工智能/高性能計(jì)算領(lǐng)域,而且許多與ChatGPT有關(guān)。

Supermicro高管表示,人工智能界并不知道未來還會(huì)遇到多少計(jì)算密集型問題。以GPT-3為例,它需要323 Zetta FLOPS的算力和1750億個(gè)參數(shù)來訓(xùn)練模型,更需要龐大的算力來執(zhí)行推理工作。更加智能的GPT-4將會(huì)有更多的參數(shù),有可能達(dá)到一萬億甚至更多。

為了運(yùn)轉(zhuǎn)這樣的大模型和大規(guī)模參數(shù),如何有效運(yùn)用服務(wù)器顯得十分重要,這關(guān)乎服務(wù)器的性價(jià)比選擇。Supermicro公司高管說到,當(dāng)大量的GPU服務(wù)器集群起來時(shí),人工智能/高性能計(jì)算應(yīng)用的每一微秒都很重要。Supermicro設(shè)計(jì)開發(fā)了各種不同架構(gòu)的GPU服務(wù)器,提升了CPU和GPU之間或從GPU到GPU的數(shù)據(jù)傳輸速度。通過合理選擇系統(tǒng)SKU,解決方案的設(shè)計(jì)可以將每個(gè)CPU/GPU核心利用到極致。從邊緣到云,從訓(xùn)練到推理,當(dāng)前市面上所需的人工智能/高性能計(jì)算應(yīng)用,Supermicro都可以提供全方位的GPU服務(wù)器,能讓客戶充分利用計(jì)算資源上花費(fèi)的每一分錢。

更大的服務(wù)器存儲(chǔ)空間


隨著CPU、GPU和內(nèi)存技術(shù)的發(fā)展,現(xiàn)代計(jì)算集群處理數(shù)據(jù)的速度和數(shù)量不斷增加,因此有必要增強(qiáng)存儲(chǔ)性能,以便將數(shù)據(jù)饋送給應(yīng)用時(shí)不會(huì)形成減緩整個(gè)系統(tǒng)的速度的瓶頸。

最近,Supermicro推出了超高性能、高密度PB級(jí)All-Flash NVMe服務(wù)器新機(jī)型。更新產(chǎn)品系列中初步推出的產(chǎn)品將在1U 16槽機(jī)架式安裝系統(tǒng)中支持高達(dá)1/2 PB的儲(chǔ)存空間,隨后的產(chǎn)品則將在2U 32槽機(jī)架式安裝系統(tǒng)中為IntelAMD PCIe Gen5平臺(tái)提供1 PB儲(chǔ)存空間。

Supermicro高管表示,Supermicro的Petascale All-Flash服務(wù)器提供業(yè)界領(lǐng)先的存儲(chǔ)性能和容量,可以減少滿足熱存儲(chǔ)和溫存儲(chǔ)要求所需的機(jī)架式系統(tǒng)數(shù)量,并通過諸多功能特點(diǎn)降低總體擁有成本。

具體來說,容量擴(kuò)展,更廣泛的PCB有助于實(shí)現(xiàn)更靈活的NAND芯片布局;性能擴(kuò)展,可擴(kuò)展連接器設(shè)計(jì),多鏈路寬度(x4、x8、x16),支持不同電源配置;熱效率,散熱和制冷管理改進(jìn);面向未來,通用連接器適用于各種尺寸規(guī)格,可以為未來幾代PCIe提供更加強(qiáng)大的信號(hào)完整性;解決方案范圍,各種功率配置(20W-70W),適用于更高容量/性能的固態(tài)硬盤。

“安裝了速度更快的固態(tài)硬盤之后,系統(tǒng)的平衡就變得更加重要。Supermicro擁有全新的NUMA平衡對(duì)稱架構(gòu),可以提供到驅(qū)動(dòng)器的最短信號(hào)路徑、到存儲(chǔ)器的帶寬平衡和靈活的網(wǎng)絡(luò)選項(xiàng),從而降低時(shí)延。最重要的是,對(duì)稱設(shè)計(jì)還有助于確保整個(gè)系統(tǒng)的氣流暢通無阻,因此可以使用更加強(qiáng)大的處理器?!盨upermicro高管說道。

桌面型GPU兼顧AI與液冷散熱

CPU/GUP/xPU也構(gòu)成了系統(tǒng)設(shè)計(jì)的熱量挑戰(zhàn),各種處理器消耗的功率不斷攀升,另一方面,科研/醫(yī)療設(shè)施/金融/石油和天然氣企業(yè)需要人工智能/高性能計(jì)算來提高其專業(yè)競爭力。在這些企業(yè)中,有很多需要在員工工作的地點(diǎn)設(shè)置工作站或本地服務(wù)器。

基于這樣的需求,Supermicro推出功能強(qiáng)大、安靜且節(jié)能的NVIDIA加速人工智能(AI)開發(fā)平臺(tái)系列當(dāng)中的首款裝置。全新的AI開發(fā)平臺(tái)SYS-751GE-TNRT-NV1是一款應(yīng)用優(yōu)化的系統(tǒng),在開發(fā)及運(yùn)行AI軟件時(shí)表現(xiàn)尤其出色。此外,這個(gè)性能強(qiáng)大的系統(tǒng)可以支持小團(tuán)隊(duì)里的用戶同步運(yùn)行訓(xùn)練、推理和分析等工作負(fù)載。

獨(dú)立的液冷功能可滿足四個(gè)NVIDIA? A100 Tensor Core GPU和兩個(gè)第4代Intel Xeon可擴(kuò)展處理器的散熱需求,在發(fā)揮完整性能的同時(shí)提高整體系統(tǒng)效率,并實(shí)現(xiàn)了在辦公環(huán)境下的安靜(約30dB)運(yùn)行。

對(duì)于散熱的考量,Supermicro高管認(rèn)為搭載NVIDIA A800等強(qiáng)大的協(xié)加速器、且聲壓級(jí)介于30~45分貝的工作站,必須采用液冷解決方案才能滿足這一需求。冷板式液冷在市場上經(jīng)過了十多年的考驗(yàn),目前其成熟度和可靠性已經(jīng)達(dá)到了數(shù)據(jù)中心大規(guī)模部署的水平。

創(chuàng)新技術(shù)驅(qū)動(dòng)成長

早前,Supermicro就提出了觀察到的七大創(chuàng)新技術(shù),他們包括高性能350W CPU和700W GPU、處理速度更快的DDR5內(nèi)存、第五代PCI-E 5.0技術(shù)、Compute Express Link(CXL,開放式互聯(lián)標(biāo)準(zhǔn))、400G高速網(wǎng)絡(luò)、新型固態(tài)硬盤和液冷技術(shù)。

簡言之就是更高的功耗和更快的數(shù)據(jù)傳輸速度。這就需要優(yōu)化功率效率、解決熱量挑戰(zhàn)、加強(qiáng)第五代PCIe、DDR5、高速網(wǎng)絡(luò)、無阻塞系統(tǒng)架構(gòu)設(shè)計(jì)和部署等。

Supermicro高管指出,這些創(chuàng)新技術(shù)背后的一個(gè)共同點(diǎn)是熱量調(diào)度。更快的處理器頻率、更多的計(jì)算核心、更高速的網(wǎng)絡(luò)都會(huì)產(chǎn)生更多的熱量,這些熱量必須輸送到數(shù)據(jù)中心之外。他表示,正如我們預(yù)計(jì)的技術(shù)趨勢和產(chǎn)品路線圖所示,當(dāng)前和新一代人工智能/高性能計(jì)算服務(wù)器采用的熱量解決方案必須比目前的空氣冷卻更加高效。

展望已經(jīng)到來的AI爆發(fā)的時(shí)代,ChatGPT的需求日益增長,不僅推高了服務(wù)器的銷量,而且還推動(dòng)新技術(shù)通過大規(guī)模部署而被普遍接納的機(jī)會(huì)。GPT提供的服務(wù)包括語言翻譯、聊天機(jī)器人、內(nèi)容生成、語言分析、語音輔助等等。

要實(shí)現(xiàn)人工智能系統(tǒng)的所有關(guān)鍵技術(shù),就需要足夠快速的服務(wù)器,并通過復(fù)雜的架構(gòu)、用于維護(hù)工作的液冷管布置等將其聯(lián)網(wǎng)。這些專業(yè)技術(shù)知識(shí)意味著解決方案將不再作為一個(gè)個(gè)的服務(wù)器提供。完整的解決方案部署更像是一個(gè)具有機(jī)架級(jí)就緒水平的即插即用解決方案。

Supermicro將ChatGPT視為服務(wù)器市場增長的關(guān)鍵驅(qū)動(dòng)力,未來我們會(huì)看到GPT服務(wù)的更多創(chuàng)新型用例。Supermicro已準(zhǔn)備好面對(duì)這個(gè)趨勢,始終保持在AI服務(wù)器技術(shù)前沿,并提供創(chuàng)新的解決方案,使得客戶能夠加速他們的AI應(yīng)用規(guī)劃,同時(shí)優(yōu)化總體擁有成本并通過綠色計(jì)算最大限度地減少對(duì)環(huán)境的影響。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 服務(wù)器
    +關(guān)注

    關(guān)注

    13

    文章

    10097

    瀏覽量

    90907
  • AI
    AI
    +關(guān)注

    關(guān)注

    90

    文章

    38189

    瀏覽量

    297008
  • Supermicro
    +關(guān)注

    關(guān)注

    0

    文章

    33

    瀏覽量

    9668
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    液冷服務(wù)器成為AI黃金賽道!華為挺,兩大國際芯片巨頭下場

    2024年以來,全球AI液冷服務(wù)器快速增長,中國液冷服務(wù)器市場進(jìn)展如何?液冷技術(shù)出現(xiàn)哪些主流路線?代表廠商的旗艦產(chǎn)品哪些?本文進(jìn)行匯總。
    的頭像 發(fā)表于 11-27 09:22 ?6022次閱讀
    液冷<b class='flag-5'>服務(wù)器</b>成為AI黃金賽道!華為<b class='flag-5'>力</b>挺,兩大國際芯片巨頭下場

    湘軍,讓變成生產(chǎn)?

    腦極體
    發(fā)布于 :2025年11月25日 22:56:58

    覺醒 · AI共生——上海永銘電子2025AI服務(wù)器電容應(yīng)用專題會(huì)議圓滿落幕

    隨著人工智能浪潮席卷全球,AI正以前所未有的速度爆發(fā)式增長。在這場決定未來的技術(shù)競速中,穩(wěn)定、高效、可靠的電力供應(yīng)是基石的核心。而電
    的頭像 發(fā)表于 11-03 14:00 ?530次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>覺醒 · AI共生——上海永銘電子2025AI<b class='flag-5'>服務(wù)器</b>電容應(yīng)用專題會(huì)議圓滿落幕

    AI 服務(wù)器備用電源:高效、可靠與智能的未來保障

    電子發(fā)燒友網(wǎng)綜合報(bào)道 隨著人工智能技術(shù)的飛速發(fā)展,AI 服務(wù)器已成為數(shù)據(jù)中心的核心引擎。然而,需求的指數(shù)級(jí)
    的頭像 發(fā)表于 10-09 02:38 ?4572次閱讀

    天波科普:超過30T的邊緣計(jì)算服務(wù)器可以做什么?

    網(wǎng)關(guān)的能力邊界,也涉及到高低。那么,目前邊緣計(jì)算服務(wù)器到多少算高呢?以廣東天波AI邊緣計(jì)算盒子V3為例,
    的頭像 發(fā)表于 09-28 11:18 ?446次閱讀
    天波科普:<b class='flag-5'>算</b><b class='flag-5'>力</b>超過30T的邊緣計(jì)算<b class='flag-5'>服務(wù)器</b>可以做什么?

    多達(dá) 48 個(gè)計(jì)算節(jié)點(diǎn)!Firefly 推出 CSC2-N48 AI 服務(wù)器

    Firefly最新推出CSC2-N48服務(wù)器,內(nèi)置48個(gè)分布式計(jì)算節(jié)點(diǎn),單節(jié)點(diǎn)可提供6TOPS-157TOPS,可選瑞芯微、
    的頭像 發(fā)表于 08-20 16:37 ?1287次閱讀
    多達(dá) 48 個(gè)計(jì)算節(jié)點(diǎn)!Firefly 推出 CSC2-N48 AI <b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務(wù)器</b>

    新品 | 破局散熱困境!捷智5090 浸沒式液冷服務(wù)器全新來襲!

    需求爆發(fā)式增長的當(dāng)下,服務(wù)器硬件適配困難與散熱不暢這兩大難題,一直困擾著許多用戶。不過,曙光已現(xiàn)!捷智
    的頭像 發(fā)表于 08-06 17:12 ?1626次閱讀
    新品 | 破局散熱困境!捷智<b class='flag-5'>算</b>5090 浸沒式液冷<b class='flag-5'>服務(wù)器</b>全新來襲!

    借勢 RISC-V與 AI 浪潮,元石智打造新范式

    在AI技術(shù)飛速發(fā)展的當(dāng)下,需求指數(shù)級(jí)增長,成為推動(dòng)行業(yè)前行的核心動(dòng)力。與此同時(shí),RISC-
    的頭像 發(fā)表于 07-25 14:51 ?449次閱讀
    借勢 RISC-V與 AI 浪潮,元石智<b class='flag-5'>算</b>打造<b class='flag-5'>算</b><b class='flag-5'>力</b>新范式

    AI新基建背后的中國芯力量——中微愛芯服務(wù)器芯片國產(chǎn)化替代全景解讀

    人工智能(AI)技術(shù)正以顛覆性力量重塑全球產(chǎn)業(yè)圖景,從深度學(xué)習(xí)的復(fù)雜模型訓(xùn)練到生成式AI的實(shí)時(shí)推理,其背后是海量數(shù)據(jù)與指數(shù)級(jí)增長需求。
    的頭像 發(fā)表于 06-20 13:55 ?1446次閱讀
    AI<b class='flag-5'>算</b><b class='flag-5'>力</b>新基建背后的中國芯力量——中微愛芯<b class='flag-5'>服務(wù)器</b>芯片國產(chǎn)化替代全景解讀

    服務(wù)器多少錢一臺(tái)?價(jià)格因素與選購指南

    入門級(jí)服務(wù)器可能只需幾千元,而高性能計(jì)算(HPC)或AI訓(xùn)練專用服務(wù)器則可能高達(dá)數(shù)十萬元。一般來說,中小型企業(yè)常用的
    的頭像 發(fā)表于 06-17 09:45 ?1552次閱讀

    AI原生架構(gòu)升級(jí):RAKsmart服務(wù)器在超大規(guī)模模型訓(xùn)練中的突破

    近年來,隨著千億級(jí)參數(shù)模型的崛起,AI訓(xùn)練對(duì)的需求呈現(xiàn)指數(shù)級(jí)增長。傳統(tǒng)
    的頭像 發(fā)表于 04-24 09:27 ?616次閱讀

    智能服務(wù)器應(yīng)用領(lǐng)域

    智能服務(wù)器應(yīng)用領(lǐng)域 一、?金融行業(yè)? 智能風(fēng)控與投顧?:通過集群支撐AI模型訓(xùn)練,實(shí)現(xiàn)風(fēng)險(xiǎn)預(yù)警、智能投顧等場景規(guī)?;瘧?yīng)用,例如工商銀
    的頭像 發(fā)表于 04-21 09:09 ?1238次閱讀
    智能<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務(wù)器</b>應(yīng)用領(lǐng)域

    RAKsmart服務(wù)器如何重塑AI高并發(fā)格局

    在AI大模型參數(shù)量突破萬億級(jí)、實(shí)時(shí)推理需求激增的當(dāng)下,傳統(tǒng)服務(wù)器架構(gòu)的并發(fā)處理能力已逼近物理極限。RAKsmart通過“硬件重構(gòu)+軟件定義”的雙引擎創(chuàng)新,推出新一代AI服務(wù)器解決方案。下面,AI部落小編為您解析RAKsmart
    的頭像 發(fā)表于 04-03 10:37 ?696次閱讀

    Firefly 服務(wù)器系列:覆蓋多個(gè)領(lǐng)域的高解決方案

    ?服務(wù)器覆蓋60~1570TOPS強(qiáng)勁,支持Transformer架構(gòu)下大語言模型的私有化部署,如Gemma-2B、ChatGLM3
    的頭像 發(fā)表于 02-19 16:34 ?1377次閱讀
    Firefly <b class='flag-5'>服務(wù)器</b>系列:覆蓋多個(gè)領(lǐng)域的高<b class='flag-5'>算</b><b class='flag-5'>力</b>解決方案