chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

算力荒緩解,自主化智算還有必要嗎?

腦極體 ? 來源:腦極體 ? 作者:腦極體 ? 2024-12-23 11:01 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

wKgZPGdo0nWALojkAAqPBb7uwEU656.jpg

2023年大煉模型興起,全球范圍內(nèi)都出現(xiàn)了算力供不應(yīng)求、一卡難求的情況。各地紛紛興建數(shù)據(jù)中心、智算中心,來解決國產(chǎn)大模型的算力短缺問題。

今年算力市場又倒向了另一個方向,算力開始過剩和大量閑置了。

主要體現(xiàn)在,高端顯卡囤積居奇的生意不好做了,“GPU倒?fàn)敗钡呐笥讶σ呀?jīng)從“欲購從速,過時不候”,變成了“A100/H100滯銷,幫幫我們”。而算力租賃市場,理想情況下的上架率應(yīng)該是80%,但很多集群只能達(dá)到30%甚至更低,投入大量資金建設(shè)的算力閑置,租不出去。

于是一種聲音開始甚囂塵上,認(rèn)為算力荒已經(jīng)緩解了,供過于求,應(yīng)該放慢自主化智算的建設(shè)。還有人說,智算中心建的太多了,大模型都用不完了。

發(fā)展自主化智算,到底還有沒有必要?

wKgZPGdo0naAdNk3AAJhzAurqOk162.jpg

還記得2023年算力荒焦灼、智算建設(shè)突飛猛進(jìn)的時候,倪光南院士曾提到過:各地盲目建設(shè)各種低水平智算中心,讓人唏噓不已,一定要警惕“技術(shù)房地產(chǎn)”和“數(shù)字爛尾樓”。所謂“技術(shù)房地產(chǎn)”,就是算力資源賣不出去,只能變成一堆放著服務(wù)器的磚頭水泥房子,閑置在那里。

短短一年多時間,從算力短缺到算力過剩,究竟是怎么發(fā)生的?目前來看,閑置算力主要集中在三種情況:

1.用不起。英偉達(dá)的高端顯卡GPU是AI訓(xùn)練的首選,2023年一度一卡難求。以N卡為主的智算資源閑置,一是因?yàn)榫揞^們此前已經(jīng)大量囤積采購了GPU,需求減少;二是炒作之后價格昂貴,即使價格回落,中小企業(yè)還是用不起。在很多討論“算力過?!钡脑u論區(qū),我們總能看到“降價試試”的留言,說明高端AI算力的需求仍在,只是昂貴的N卡被價格勸退了。

2.不好用。國產(chǎn)卡組成的算力集群,也存在上架率不高、資源閑置的問題,主要是不好用。因?yàn)閲a(chǎn)卡的集中度不高,一個千卡或萬卡集群,往往是由各類國產(chǎn)算力卡組成的,異構(gòu)算力之間的協(xié)同調(diào)度,涉及大量工程化細(xì)節(jié),沒有做好就無法開箱即用。勉強(qiáng)用了,又時不時出現(xiàn)業(yè)務(wù)中斷、算效不高、恢復(fù)訓(xùn)練慢等各種問題,導(dǎo)致客戶流失。這類被迫閑置的國產(chǎn)算力,正是沒有考慮配套,盲目建設(shè)的低水平智算中心。

3.用不上?!鞍倌4髴?zhàn)”之后,企業(yè)不再大煉模型,預(yù)訓(xùn)練的算力需求也就大幅下降,算力市場開始轉(zhuǎn)向以推理算力為主。但推理市場的爆發(fā),需要一個過程,目前AI的行業(yè)滲透率還比較低,總體不到10%,很多企業(yè)對AI的投入以嘗試為主,還沒有大規(guī)模爆發(fā)。所以,訓(xùn)練用算力開始出現(xiàn)閑置,而推理用算力還未大規(guī)模崛起,因此短缺問題尚未完全顯現(xiàn)。

低水平算力的閑置與過剩,再一次警醒我們:一個繁榮健康的算力市場,關(guān)鍵不是建出來,而是用起來。

wKgZPGdo0naAC-z0AAH4xXRpIuk209.jpg

這種情況下,仍然大力發(fā)展自主化智算,還有必要嗎?

我們認(rèn)為,這個問題的答案不該有猶豫,要旗幟鮮明地,鼓勵自主化智算基礎(chǔ)設(shè)施的繼續(xù)建設(shè)、加速建設(shè)。

首先,從長期看,國內(nèi)智算屬于后發(fā),基礎(chǔ)仍然薄弱。

中國智算的進(jìn)步速度是很快的,但也要客觀看到,美國這樣的IT先行者,從20世紀(jì)90年代以來就在IT建設(shè)上大力投入。根據(jù)彼得森國際經(jīng)濟(jì)研究所的消息,在2024年美國在電子制造業(yè)建設(shè)方面(主要是芯片)的投資,就超過了1996年至2020年(24年的時間跨度)的總投資。而產(chǎn)業(yè)界,xAI、Meta、OpenAI等海外AI巨頭,都在積極布局十萬卡、五十萬卡規(guī)模的智算集群。

所以,國內(nèi)自主化智算近年來的發(fā)展雖然迅猛,也是在積極補(bǔ)課,打牢基礎(chǔ)。這時候如果停止,不僅會前功盡棄,還會讓中美在AI基礎(chǔ)設(shè)施上的差距進(jìn)一步拉大。

從近期看,自主化AI算力需求仍然沒有得到充分滿足,算力荒仍在。

一方面,海外AI算力進(jìn)口受到限制,極不穩(wěn)定。目前,國內(nèi)AI訓(xùn)練芯片市場英偉達(dá)占據(jù)了80%~80%的市場份額,要避免威脅供應(yīng)鏈安全,這種情況必須盡快改變。上海的“算力浦江”智算行動實(shí)施方案(2024—2025年)要在2025年,實(shí)現(xiàn)新建智算中心的國產(chǎn)算力芯片使用占比超過50%;《北京市算力基礎(chǔ)設(shè)施建設(shè)實(shí)施方案(2024—2027年)》則提出,2027年要具備100%自主可控智算中心建設(shè)能力。

三年左右,從不到20%發(fā)展到100%。所以,如今的自主化智算不是太多了,而是還不夠。

與此同時,算力需求仍在增長。大模型的規(guī)模法則仍在繼續(xù),以Sora為代表的視頻生成模型對算力的需求量是LLM大模型的數(shù)倍,已經(jīng)出現(xiàn)了“一棟樓放不下一個模型”“一個模型需要多個集群”的情況,超萬卡智算中心是必不可少的基礎(chǔ)設(shè)施,目前國內(nèi)的十萬卡集群還遠(yuǎn)遠(yuǎn)不足。

此外,大煉模型的階段雖然結(jié)束了,但基礎(chǔ)模型的市場集中度提高和能力提高,又會釋放AI應(yīng)用需求,促進(jìn)AI的行業(yè)滲透率、普及率,導(dǎo)致AI推理算力的需求爆發(fā),急需要更多高質(zhì)量算力來滿足。目前部分國產(chǎn)AI算力集群的利用率極高,西安昇騰智能科技有限公司的人工智算中心算力使用率就高達(dá)98.5%;曙光在長沙的5A級智算中心,也吸引上百家企業(yè)入駐,實(shí)現(xiàn)萬余個商業(yè)應(yīng)用接入。因此,隨著產(chǎn)業(yè)智能化升級的繼續(xù)推進(jìn),國產(chǎn)AI算力荒不是已經(jīng)解決,而是從現(xiàn)在開始重視和應(yīng)對。

互聯(lián)網(wǎng)產(chǎn)業(yè)的核心,當(dāng)然不是寬帶和機(jī)房,但沒有“寬帶高速公路”,就沒有美國互聯(lián)網(wǎng)經(jīng)濟(jì)的爆發(fā);移動互聯(lián)網(wǎng)的核心,也不是基站,但沒有廣泛覆蓋的4G基站,就沒有智能手機(jī)和移動應(yīng)用軟件的興起。AI大模型也是一樣, AI作為一種依附在基礎(chǔ)設(shè)施之上的軟件技術(shù),核心不是智算,但沒有自主化智算,國內(nèi)AI絕不可能獨(dú)善其身、獨(dú)自蓬勃發(fā)展。

因此,自主化智算并不存在過剩,更不該就此放慢發(fā)展。

wKgZPGdo0niAeCxJAAJVXfK1gHM154.jpg

綜上,“國內(nèi)AI算力過剩”,是個假問題,“如何合理地推進(jìn)自主化智算的建設(shè)”,才是真問題。

解決這個真問題,國內(nèi)智算產(chǎn)業(yè)已經(jīng)來到了承上啟下的新階段。不僅要追求把智算中心“建起來”,還要能運(yùn)營好、用起來。

因此,智算廠商的競爭,也從售賣硬件資源與智算解決方案,轉(zhuǎn)變?yōu)槎嗑S度、綜合性、長期服務(wù)的競爭。比如華為昇騰AI全棧、中科曙光的“立體計(jì)算”、寧暢的“全局智算”、聯(lián)想的“萬全生態(tài)”,新華三的“1+N”智算等,以更全面的能力,支撐自主化智算的建設(shè)運(yùn)營。

wKgZO2do0niAR8yCAABY6QimnW4345.jpg

追求全面,并不意味著胡子眉毛一把抓,目前來看,智算廠商們主要集中解決自主化AI算力的幾個痛點(diǎn)問題:

1.異構(gòu)問題。目前,國產(chǎn)AI芯片還無法規(guī)?;鲐?,市場集中度較低,因此都是以混合算力的形式,來加入智算集群。多元異構(gòu)算力的協(xié)同調(diào)度、管理、算效、業(yè)務(wù)可靠性等,面臨很多技術(shù)挑戰(zhàn)。如果一個企業(yè)或開發(fā)者,要針對ABCD不同廠商的卡進(jìn)行適配開發(fā),是不可能的。所以,就需要智算廠商提供相應(yīng)的系統(tǒng)平臺,屏蔽底層異構(gòu)硬件的復(fù)雜性,讓大家用好國產(chǎn)算卡。比如聯(lián)想的萬全異構(gòu)智算平臺,實(shí)現(xiàn)異構(gòu)化AI算力的管理與調(diào)配;新華三面向異構(gòu)智算的智能管理平臺,一站式應(yīng)對多樣化的AI應(yīng)用場景。

2.算效問題。解決“低質(zhì)量算力過剩,自主化高質(zhì)量算力不足”的結(jié)構(gòu)性問題,需要進(jìn)一步提高國產(chǎn)AI的性能。面對工藝制程的限制,可以通過軟硬件系統(tǒng)的無縫配合,從而實(shí)現(xiàn)國產(chǎn)算卡性能的充分釋放。以昇騰為例,就與昇思緊密結(jié)合,為各類智算場景提供高性能的自主化AI算力,深圳鵬城實(shí)驗(yàn)室的“鵬城云腦Ⅱ”就依托昇騰實(shí)現(xiàn)了中國首個自主可控的E級智能算力平臺,可以提供不低于1000Pops的整機(jī)AI計(jì)算能力。

3.運(yùn)營問題。如今,一些地方在智算中心建設(shè)之前,開始提出上架率、收益率等要求,需要保證項(xiàng)目投運(yùn)后有一定的使用率。同時,也會要求建設(shè)方提供設(shè)計(jì)、使用、運(yùn)營等一體化服務(wù),避免智算中心因無人運(yùn)營而成為“數(shù)字爛尾樓”。以用促建、以服促用,已經(jīng)是自主化智算發(fā)展的必然潮流。比如新華三與杭州市合作,打造“圖靈小鎮(zhèn)”,培育AIGC產(chǎn)業(yè)和數(shù)字人才;中科曙光“立體計(jì)算”主張“算力建設(shè)、應(yīng)用賦能、生態(tài)共生”三位一體,推動多元算力向新質(zhì)生產(chǎn)力轉(zhuǎn)化,目前已經(jīng)在5A級智算中心落地實(shí)踐。

wKgZPGdo0nmAP-crAAM0iGTYFJI731.jpg

回顧這一年多來,國內(nèi)智算的發(fā)展突飛猛進(jìn),取得了舉世矚目的成績,我們不必再為算力荒而憂心忡忡。但人無遠(yuǎn)慮必有近憂,AI算力的自主化之路不能就此戛然而止,而要一鼓作氣,再加把勁,把已經(jīng)取得的成果夯實(shí),為接下來的智能浪潮做好準(zhǔn)備。

避免低質(zhì)量算力過剩,與加速自主化智算發(fā)展,這兩件事可以并行不悖,也應(yīng)該理性分開看待。

wKgZO2do0nqAIjXLAAHUxLhXXGs779.jpg

審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    89

    文章

    38004

    瀏覽量

    295970
  • 算力
    +關(guān)注

    關(guān)注

    2

    文章

    1380

    瀏覽量

    16552
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    “四合一”平臺,芯片國產(chǎn)率超九成,兼容8種國產(chǎn)AI芯片

    調(diào)度平臺可支持每天上億次的調(diào)用,能調(diào)度全國1/6的規(guī)模,網(wǎng)一體效率提升20%。 ?
    的頭像 發(fā)表于 04-13 00:03 ?3539次閱讀

    湘軍,讓變成生產(chǎn)?

    腦極體
    發(fā)布于 :2025年11月25日 22:56:58

    捷智重大更新|API接口全面開放,調(diào)用更高效

    人工調(diào)度太耗時?業(yè)務(wù)系統(tǒng)對接總卡殼?捷智重磅升級——租賃平臺API接口正式開放,讓
    的頭像 發(fā)表于 11-21 18:41 ?126次閱讀
    捷智<b class='flag-5'>算</b>重大更新|API接口全面開放,<b class='flag-5'>算</b><b class='flag-5'>力</b>調(diào)用更高效

    軟通智完成超億級A輪融資,加速AI產(chǎn)業(yè)布局

    機(jī)構(gòu)跟投。 自2024年成立以來,軟通智積極參與全國一體網(wǎng)建設(shè),以技術(shù)驅(qū)動互聯(lián)互通體
    的頭像 發(fā)表于 06-18 15:37 ?427次閱讀

    軟通智中標(biāo)韶關(guān)公共服務(wù)平臺項(xiàng)目

    日前,軟通動力旗下軟通智中標(biāo)《韶關(guān)公共服務(wù)平臺(一體網(wǎng)
    的頭像 發(fā)表于 05-22 16:19 ?693次閱讀

    點(diǎn)動科技戰(zhàn)略聚焦AI智,領(lǐng)航服務(wù)新征程

    Al智業(yè)務(wù)收入占比已突破40%,標(biāo)志著點(diǎn)動從傳統(tǒng)業(yè)務(wù)向智能轉(zhuǎn)型的戰(zhàn)略跨越取得階段性勝利! 技術(shù)賦能構(gòu)建核心壁壘,全棧能力驅(qū)動行業(yè)智能升級 在技術(shù)布局上,點(diǎn)動科技聚焦行業(yè)模型和Al應(yīng)用,以GPU
    的頭像 發(fā)表于 05-07 09:29 ?449次閱讀

    芯片的生態(tài)突圍與革命

    電子發(fā)燒友網(wǎng)報(bào)道(文 / 李彎彎)大芯片,即具備強(qiáng)大計(jì)算能力的集成電路芯片,主要應(yīng)用于高性能計(jì)算(HPC)、人工智能(AI)、數(shù)據(jù)中心、自動駕駛等需要海量數(shù)據(jù)并行計(jì)算的場景。隨著 AI 與大數(shù)
    的頭像 發(fā)表于 04-13 00:02 ?2584次閱讀

    信而泰CCL仿真:解鎖AI極限,智中心網(wǎng)絡(luò)性能躍升之道

    引言 隨著AI大模型訓(xùn)練和推理需求的爆發(fā)式增長,智中心網(wǎng)絡(luò)的高效性與穩(wěn)定性成為決定AI產(chǎn)業(yè)發(fā)展的核心要素。信而泰憑借自主研發(fā)的 CCL(集合通信庫)評估工具 與 DarYu-X系列測試儀 ,為智
    的頭像 發(fā)表于 02-24 17:34 ?970次閱讀
    信而泰CCL仿真:解鎖AI<b class='flag-5'>算</b><b class='flag-5'>力</b>極限,智<b class='flag-5'>算</b>中心網(wǎng)絡(luò)性能躍升之道

    【一文看懂】什么是端側(cè)?

    隨著物聯(lián)網(wǎng)(IoT)、人工智能和5G技術(shù)的快速發(fā)展,端側(cè)正逐漸成為智能設(shè)備性能提升和智能應(yīng)用實(shí)現(xiàn)的關(guān)鍵技術(shù)。什么是端側(cè),它的應(yīng)用價
    的頭像 發(fā)表于 02-24 12:02 ?2785次閱讀
    【一文看懂】什么是端側(cè)<b class='flag-5'>算</b><b class='flag-5'>力</b>?

    中心的如何衡量?

    作為當(dāng)下科技發(fā)展的重要基礎(chǔ)設(shè)施,其的衡量關(guān)乎其能否高效支撐人工智能、大數(shù)據(jù)分析等智能應(yīng)用的運(yùn)行。以下是對智中心算衡量的詳細(xì)闡述:一、
    的頭像 發(fā)表于 01-16 14:03 ?4118次閱讀
    <b class='flag-5'>算</b>智<b class='flag-5'>算</b>中心的<b class='flag-5'>算</b><b class='flag-5'>力</b>如何衡量?

    科技云報(bào)到:要更要“利”,“精裝”觸發(fā)大模型產(chǎn)業(yè)新變局?

    科技云報(bào)到:要更要“利”,“精裝”觸發(fā)大模型產(chǎn)業(yè)新變局?
    的頭像 發(fā)表于 01-16 10:24 ?777次閱讀

    中心會取代通用中心嗎?

    隨著人工智能(AI)技術(shù)的飛速發(fā)展,計(jì)算需求不斷攀升,數(shù)據(jù)中心行業(yè)正經(jīng)歷著前所未有的變革。傳統(tǒng)的通用中心與新興的智中心之間的競爭日益激烈。那么,在這樣的背景下,通用
    的頭像 發(fā)表于 01-06 14:45 ?882次閱讀
    智<b class='flag-5'>算</b>中心會取代通用<b class='flag-5'>算</b><b class='flag-5'>力</b>中心嗎?

    星凡星啟,全面助力集群建設(shè)

    “星算計(jì)劃”由國星宇航、星凡科技聯(lián)合之江實(shí)驗(yàn)室及行業(yè)頭部上市公司、科技獨(dú)角獸共同發(fā)起,旨在構(gòu)建領(lǐng)先的地空一體人工智能網(wǎng)絡(luò)。項(xiàng)目規(guī)劃2024年到2032年,完成3000顆太空
    的頭像 發(fā)表于 12-10 11:36 ?2188次閱讀
    星凡星啟,全面助力<b class='flag-5'>算</b><b class='flag-5'>力</b>集群建設(shè)

    杰和課堂|帶你認(rèn)識

    杰和課堂|帶你認(rèn)識力人工智能浪潮洶涌的今天,一詞頻繁出現(xiàn)在各類科技新聞、產(chǎn)業(yè)發(fā)展報(bào)告中。了解過杰和科技產(chǎn)品的讀者們,也會在杰和各產(chǎn)品參數(shù)中發(fā)現(xiàn)
    的頭像 發(fā)表于 12-06 10:24 ?2408次閱讀
    杰和課堂|帶你認(rèn)識<b class='flag-5'>算</b><b class='flag-5'>力</b>