chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

融合計算是如何提出來的

中科院半導(dǎo)體所 ? 來源:軟硬件融合 ? 2024-12-10 09:51 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

融合計算是微觀和宏觀視角算力提升策略的總結(jié),是三個維度融合(異構(gòu)融合x軟硬件融合x云邊端融合)的統(tǒng)稱,那么融合計算是如何提出來的?為什么融合計算有且僅有三個維度的融合?

性能和算力

1.1 性能的計算公式

5079478e-b483-11ef-93f3-92fbcf53809c.png

定性的分析,一個芯片的性能由三個維度組成:

維度一,指令復(fù)雜度。理論上,指令復(fù)雜度越高,性能越好。但實(shí)際上,需要考慮系統(tǒng)的通用性,以及目標(biāo)工作任務(wù)的靈活性特征,來選擇合適的處理器引擎。

維度二,運(yùn)行頻率。運(yùn)行頻率提升,主要是先進(jìn)工藝,以及更復(fù)雜的流水線設(shè)計。

維度三,并行度。提高并行度比較好理解,并行也主要有同構(gòu)并行、(兩個處理器的)異構(gòu)并行和(三個以上)更多異構(gòu)融合的并行。

1.2 算力的計算公式

508dd352-b483-11ef-93f3-92fbcf53809c.png

算力和性能的區(qū)別在哪里?性能是微觀的算力,算力是宏觀的性能。那么算力和性能之間的聯(lián)系是什么? 如上圖所示,我們定性分析,可以在性能和算力之間構(gòu)建一個關(guān)聯(lián)的公式。從上述公式可以看到,宏觀的總算力,由三個維度的參數(shù)組成:

維度一,單芯片性能。通過提升單芯片性能的方式,也就是Scale Up的方式提升整體算力。

維度二,芯片的數(shù)量。通過增加計算芯片(計算節(jié)點(diǎn))的數(shù)量,也就是Scale Out的方式,通過提升規(guī)模來提升整體算力。

維度三,算力利用率。如果僅有標(biāo)稱算力,而無法達(dá)到很好的利用率,那也是徒勞。隨著AI的發(fā)展,集群規(guī)模越來越擴(kuò)大,算力利用率越來越成為評價一個算力系統(tǒng)能力的關(guān)鍵指標(biāo)。

從微觀到宏觀

2.1 微觀視角的算力提升

2.1.1 如何提升單芯片性能 融合提升單芯片的性能:

一方面是底層采用更先進(jìn)的工藝,以及通過Chiplet封裝支撐,從而實(shí)現(xiàn)更大的計算規(guī)模;

另一方面,則是系統(tǒng)架構(gòu)和微架構(gòu)方面的創(chuàng)新,來實(shí)現(xiàn)單芯片層次更高的性能,這也是算力提升最本質(zhì)的做法。

計算架構(gòu)的創(chuàng)新則最主要的就是:

從第一代基于CPU的同構(gòu)通用計算;

以及第二代基于CPU+GPU的異構(gòu)通用計算;

逐步的走向第三代基于CPUxGPUxDSAs的異構(gòu)融合通用計算。

2.1.2 如何提升芯片的數(shù)量和落地規(guī)模 芯片的落地,不是簡單的復(fù)制。國產(chǎn)算力芯片已經(jīng)有好多家了,甚至一些公司的芯片都已經(jīng)有三到四代了,但仍然銷售不是很順利。底層的原因在于:

生態(tài)的問題。國產(chǎn)芯片(相比NVIDIA CUDA)生態(tài)不夠好。但生態(tài)問題如何解決,不在于微觀的一家公司的一個架構(gòu)和相應(yīng)的私有生態(tài)如何構(gòu)建和繁榮,而在于宏觀的很多公司很多架構(gòu)如何整合(將在加下來的宏觀視角部分介紹)。

芯片需要足夠多的通用性,需要能夠覆蓋更多的業(yè)務(wù)場景和更多的業(yè)務(wù)迭代。

此外,芯片需要有非常高的I/O能力,確保在更大的規(guī)模下仍能有非常高的東西向通信效率(不耽誤計算,不影響計算效率),能夠支持更大規(guī)模的集群計算。

2.1.3 如何提升芯片的算力利用率 要想提升算力芯片的利用率,那么:

一方面,芯片需要有很好的擴(kuò)展性能力,支持資源切分、池化、和重組;

另一方面,開放架構(gòu),減少多元異構(gòu)算力的架構(gòu)數(shù)量,從而使得更多的算力能夠匯集到統(tǒng)一的算力資源池,從而實(shí)現(xiàn)更大范圍的算力共享,進(jìn)而提升整體的算力利用率。

2.2 宏觀視角的算力提升

2.2.1 如何提升單個節(jié)點(diǎn)的性能 從宏觀角度,單節(jié)點(diǎn)的性能提升,則主要是如何把更多異構(gòu)融合架構(gòu)的計算能力充分的用起來:

首先,是需要一個更加綜合的異構(gòu)融合計算框架,既包括CPU的工具鏈,也有GPU、AI,以及其他如網(wǎng)絡(luò)、存儲、視頻、安全等領(lǐng)域的加速計算框架,還需要這個異構(gòu)融合計算框架,支持異構(gòu)協(xié)同和跨異構(gòu)應(yīng)用遷移。

第二,則是更復(fù)雜的計算架構(gòu)和算力調(diào)度。在通算時代,一個物理的計算機(jī),通常具有四類資源:CPU、內(nèi)存、網(wǎng)絡(luò)和存儲;在異構(gòu)計算時代,則是CPU、內(nèi)存、網(wǎng)絡(luò)、存儲和加速器。而在異構(gòu)融合時代,則是CPU、內(nèi)存、網(wǎng)絡(luò)、存儲,以及更多種不同領(lǐng)域的加速器。那么,如此復(fù)雜的計算架構(gòu)模型,如何資源切分、池化和重組,以及如何同架構(gòu)調(diào)度,以及實(shí)現(xiàn)跨架構(gòu)調(diào)度,都是需要深入考慮的事情。

2.2.2 如何提升芯片的數(shù)量和落地的規(guī)模 宏觀視角下,芯片的數(shù)量提升,主要是如下幾個層次:

最基礎(chǔ)的就是集群規(guī)模的擴(kuò)大,這需要高性能網(wǎng)絡(luò),更高的帶寬,更低的延遲。

接下來,就是跨集群管理和跨集群調(diào)度,這就需要更復(fù)雜的網(wǎng)絡(luò)和更高層次的算力調(diào)度。

再接下來,就是要實(shí)現(xiàn)跨數(shù)據(jù)中心的算力整合,這也就是目前火熱的算力網(wǎng)絡(luò)關(guān)注的范疇,有非常大的技術(shù)挑戰(zhàn)和商業(yè)上的挑戰(zhàn)。

再接下倆,那就是要跨云邊端,實(shí)現(xiàn)云邊端融合計算,挑戰(zhàn)會更大。

2.2.3 如何提升算力利用率 宏觀視角看算力利用率提升,主要是兩塊,承上啟下:

啟下。承載計算的芯片類型越來越多,多元異構(gòu)問題凸顯,這是目前算力整合不得不面對的現(xiàn)實(shí)困難。芯片(或引擎)的類型有很多,每一張類型還有很多不同的架構(gòu),這些不同類型不同架構(gòu)的芯片是一個個孤島,如何把這些孤島連成一體,是一個非常重要的事情。未來,開放計算架構(gòu)會是一個不得不走的選項,逐漸的從目前各家芯片公司各自為政私有架構(gòu)的模式,過渡到開放架構(gòu)的模式,讓芯片的架構(gòu)逐漸收斂。

承上。相比芯片側(cè)的問題,計算芯片所支撐的上層業(yè)務(wù)軟件側(cè)的問題相對較少。行業(yè)存在開源軟件生態(tài),這是目前絕大部分業(yè)務(wù)客戶的共識,這也減少了很多底層硬件的適配難度。但這幾年,這個問題有所惡化:隨著AI發(fā)展,NVIDIA GPU和CUDA一家獨(dú)大,大家不得不在NVIDIA的封閉體系下工作。這不利于行業(yè)的競爭,也不利于算力成本的下降。理想的情況是:行業(yè)形成開源開放的計算軟硬件生態(tài),開源軟件定義開放硬件;算力中心,不對任何硬件平臺有依賴,不需要為生態(tài)溢價付費(fèi),僅需要為功能和性能付費(fèi)即可。

需要注意的是,宏觀和微觀,以及算力提升的三個維度,是彼此交叉關(guān)聯(lián)的。這里的很多策略,可能會同時影響兩個甚至三個維度,甚至“按下葫蘆浮起瓢”也是有可能的。實(shí)際的算力優(yōu)化工作,需要仔細(xì)分析應(yīng)對。

融合計算

隨著AI大模型以及AI+場景對算力的需求猛增,算力中心建設(shè)成本也水漲船高,算力網(wǎng)絡(luò)(實(shí)現(xiàn)算力共享)逐漸流行。同時許多AI+終端的場景,算力需求猛增,從云端和邊緣端“借”算力的云邊端融合計算模式,成為了終端算力提升的一個重要方式。 算力系統(tǒng)相當(dāng)復(fù)雜,算力提升成為了一個龐大的系統(tǒng)工程。立足于最核心的芯片硬件和相關(guān)軟件,從微觀到宏觀,基于上面分析的算力提升的背景知識,提出了“融合計算”的概念。希望通過“融合計算”的全方位的整合優(yōu)化,來實(shí)現(xiàn)算力最優(yōu)的性能和成本。

50a3d9ae-b483-11ef-93f3-92fbcf53809c.png

融合計算,其實(shí)就是微觀和宏觀視角算力提升策略的總結(jié),是三個維度融合(異構(gòu)融合x軟硬件融合x云邊端融合)的統(tǒng)稱:

X軸,芯片維度,異構(gòu)融合,Scale Up,提升單芯片性能。通過異構(gòu)融合計算,把各類異構(gòu)算力的價值發(fā)揮到極致。

Y軸,計算堆棧維度,軟硬件融合,提升算力利用率。通過核心的算力調(diào)度系統(tǒng)中間件,實(shí)現(xiàn)承上啟下,向上對接開源軟件,向下對接多元異構(gòu)算力,實(shí)現(xiàn)多元異構(gòu)算力的協(xié)同和融合,從而最大化算力資源的利用率。

Z軸,集群擴(kuò)展維度,云邊端融合,Scale Out,提升芯片數(shù)量。通過增加集群規(guī)模,同時實(shí)現(xiàn)跨算力中心、跨不同云運(yùn)營商、跨云邊端融合的計算。

融合計算和多算融合的關(guān)系

融合計算,是從宏觀和微觀的角度,實(shí)現(xiàn)更底層更本質(zhì)的提升性能和降低成本。而通算、智算和超算,則要更上層一些,是計算面向不同業(yè)務(wù)要求所做的定向性能和成本的調(diào)整。

隨著智算中心的發(fā)展,目前行業(yè)中出現(xiàn)了通算,智算和超算的融合的發(fā)展趨勢。但實(shí)際的做法,有待商榷。把CPU通算集群、GPU智算集群,以及存儲集群,以及超算集群,放置到一個算力中心里,就是多算融合嗎?顯然不是。

50c3c656-b483-11ef-93f3-92fbcf53809c.png

多算融合,必然是需要一套體系,能夠統(tǒng)一通算、智算和超算,有統(tǒng)一的資源切分重組,有統(tǒng)一的資源池,有統(tǒng)一的算力調(diào)度,有統(tǒng)一的上層算力服務(wù),才能稱之為多算融合:

首先,是要構(gòu)建統(tǒng)一的計算機(jī)模型。通算一般是CPU+標(biāo)準(zhǔn)網(wǎng)卡,而智算是CPU+GPU+高性能網(wǎng)卡,而超算則是CPU+GPU+高性能網(wǎng)卡+內(nèi)存一致性加速,存儲則是CPU+更多的存儲I/O。不管咋樣,可以通過我們前面講到的計算模型來統(tǒng)一,不管是哪種計算,都是CPU+加速卡+內(nèi)存+網(wǎng)絡(luò)+存儲的統(tǒng)一的計算模型。

然后是資源的池化。通過云計算的虛擬化和容器的機(jī)制,實(shí)現(xiàn)資源的切分、池化和重組,可以組合出符合要求的不同類型的計算實(shí)例。

目前,計算集群已經(jīng)成為主流的計算方式。通過VPC,可以在公共算力服務(wù)的多租戶場景為用戶構(gòu)建專屬的通算的、智算的或超算的計算集群。

融合計算,是更底層更本地算力優(yōu)化問題,它存在于軟硬件協(xié)同層次,通過全方位的各種融合,實(shí)現(xiàn)算力的最佳效果:同算力條件下,成本更優(yōu);同成本下,算力更高。

融合計算,是云計算未來發(fā)展最大的創(chuàng)新方向,通過融合計算,夯實(shí)算力底座,支撐云計算繼續(xù)往前發(fā)展。再以云計算為基,構(gòu)建出面向通算、智算和超算等不同場景的算力服務(wù)。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 芯片
    +關(guān)注

    關(guān)注

    463

    文章

    54441

    瀏覽量

    469421
  • 計算
    +關(guān)注

    關(guān)注

    2

    文章

    460

    瀏覽量

    40129
  • 算力
    +關(guān)注

    關(guān)注

    2

    文章

    1676

    瀏覽量

    16833

原文標(biāo)題:融合計算的概念是如何提出來的?

文章出處:【微信號:bdtdsj,微信公眾號:中科院半導(dǎo)體所】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    中科曙光助力海南師范大學(xué)全棧國產(chǎn)超智融合計算平臺正式上線

    近日,由中科曙光提供技術(shù)支撐的海南師范大學(xué)全棧國產(chǎn)超智融合計算平臺正式上線。該平臺由人工智能學(xué)院承建,旨在構(gòu)建“智慧教育—智慧生態(tài)—AI”三位一體研究體系,為海南自貿(mào)港科研創(chuàng)新注入強(qiáng)勁動能。
    的頭像 發(fā)表于 04-10 17:13 ?1137次閱讀

    labview之自定義計算公式

    最近給網(wǎng)友解決問題的時候,對方提出來,想要一個可以填寫計算公式,然后數(shù)據(jù)進(jìn)來后自動進(jìn)行計算,從而得出轉(zhuǎn)換完的數(shù)據(jù),由此和大家進(jìn)行一個分享。 廢話不多說我們直接上例程Demo,示例如下: Demo 詳情請參考公眾號:上位機(jī)知識分享
    的頭像 發(fā)表于 03-01 10:11 ?711次閱讀
    labview之自定義<b class='flag-5'>計算</b>公式

    融合云:創(chuàng)新云計算架構(gòu)的全面解析與應(yīng)用

    在當(dāng)今數(shù)字化的時代,云計算已經(jīng)成為推動企業(yè)創(chuàng)新和發(fā)展的關(guān)鍵技術(shù)。隨著企業(yè)需求的多樣化和技術(shù)環(huán)境的不斷變化,單一的云計算模式已無法滿足企業(yè)對靈活性、可擴(kuò)展性以及智能化服務(wù)的需求。融合云應(yīng)運(yùn)而生,它將
    的頭像 發(fā)表于 12-23 14:17 ?482次閱讀

    為什么要云網(wǎng)融合?

    架構(gòu)已不適應(yīng)這些需求。云計算服務(wù)需要強(qiáng)大的網(wǎng)絡(luò)能力來保證穩(wěn)定運(yùn)行和通信質(zhì)量,而網(wǎng)絡(luò)資源優(yōu)化也需借鑒云計算理念。這些因素促進(jìn)了“云網(wǎng)融合”趨勢的發(fā)展。 什么是云網(wǎng)融合 “云網(wǎng)
    的頭像 發(fā)表于 12-03 09:59 ?603次閱讀

    貼片電容的精度是怎么計算出來的?

    貼片電容的精度通過 實(shí)際電容值與標(biāo)稱電容值的偏差范圍 計算得出,其核心計算邏輯和關(guān)鍵要點(diǎn)如下: 一、精度定義與計算公式 貼片電容的精度表示實(shí)際電容值與標(biāo)稱值的允許偏差范圍,計算公式為:
    的頭像 發(fā)表于 10-11 15:01 ?1759次閱讀
    貼片電容的精度是怎么<b class='flag-5'>計算出來</b>的?

    硬件融合拼接器與軟件融合拼接的區(qū)別?

    、內(nèi)存和存儲設(shè)備等組成,具備強(qiáng)大的計算和數(shù)據(jù)處理能力。它可以將多個圖像拼接成一個大的全景圖像,這個過程是在硬件設(shè)備中進(jìn)行的,因此速度較快。 而軟件融合拼接則是通過軟件算法來實(shí)現(xiàn)圖像的拼接,這種算法可以在一般的計
    的頭像 發(fā)表于 09-28 14:33 ?646次閱讀

    Imagination Technologies:面向智能駕艙,打造高安全GPU與AI融合計算架構(gòu)

    隨著汽車智能化程度不斷提高,電子架構(gòu)正朝著集中化方向發(fā)展,智能座艙與ADAS等功能對GPU算力和AI推理能力提出更高要求,同時系統(tǒng)還需滿足功能安全、長效周期、軟件定義等多重挑戰(zhàn)。2025年9月12日
    的頭像 發(fā)表于 09-23 08:43 ?892次閱讀
    Imagination Technologies:面向智能駕艙,打造高安全GPU與AI<b class='flag-5'>融合計算</b>架構(gòu)

    Imagination亮相汽車芯片產(chǎn)業(yè)大會 深入解讀高安全GPU+AI融合計算架構(gòu)

    熱門話題展開深度交流與探討。Imagination技術(shù)總監(jiān)艾克出席活動,發(fā)表了《驅(qū)動未來:面向智能駕艙的高安全GPU+AI融合計算架構(gòu)》的主題演講。艾克首先介紹了目
    的頭像 發(fā)表于 09-12 18:10 ?1159次閱讀
    Imagination亮相汽車芯片產(chǎn)業(yè)大會 深入解讀高安全GPU+AI<b class='flag-5'>融合計算</b>架構(gòu)

    中科曙光助力中國首部超智融合行業(yè)標(biāo)準(zhǔn)發(fā)布

    8月14日,我國高性能計算領(lǐng)域首部超智融合行業(yè)標(biāo)準(zhǔn)《超智融合集群能力要求》在2025CCF全國高性能計算學(xué)術(shù)大會正式發(fā)布。
    的頭像 發(fā)表于 08-15 15:00 ?1249次閱讀

    圖為科技錨定具身智能新時代:NVIDIA Jetson引領(lǐng)邊緣計算融合創(chuàng)新

    圖為科技錨定具身智能新時代:NVIDIA Jetson引領(lǐng)邊緣計算融合創(chuàng)新 ?7 月 22 日,由圖為科技主辦的“邊緣計算賦能具身智能落地”論壇在深圳舉辦,匯聚了近百位來自機(jī)器人、智能制造和人工智能
    的頭像 發(fā)表于 08-11 16:39 ?1011次閱讀
    圖為科技錨定具身智能新時代:NVIDIA Jetson引領(lǐng)邊緣<b class='flag-5'>計算</b><b class='flag-5'>融合</b>創(chuàng)新

    合計算:RISC-V架構(gòu)創(chuàng)新,阿基米德系列劍指高性能計算

    在2025 RISC-V中國峰會上,知合計算處理器設(shè)計總監(jiān)劉暢就高性能RISC-V處理器架構(gòu)探索與實(shí)踐進(jìn)行了精彩分享。 在以X86和ARM為代表的處理器架構(gòu)之下,RISC-V在高性能計算領(lǐng)域的突破
    的頭像 發(fā)表于 07-18 14:17 ?2986次閱讀
    知<b class='flag-5'>合計算</b>:RISC-V架構(gòu)創(chuàng)新,阿基米德系列劍指高性能<b class='flag-5'>計算</b>

    從“三共計算”到生態(tài)重塑,艙駕融合開啟智駕新范式

    高性能計算單元,艙駕融合實(shí)現(xiàn)了硬件共用、功能協(xié)同,以及降本增效。本文將聚焦這一話題,深度探討艙駕融合過程中面臨的機(jī)遇與挑戰(zhàn)。從分布式到“三共計算”第三方數(shù)據(jù)顯示,
    的頭像 發(fā)表于 07-09 12:16 ?1550次閱讀
    從“三共<b class='flag-5'>計算</b>”到生態(tài)重塑,艙駕<b class='flag-5'>融合</b>開啟智駕新范式

    空間計算是如何運(yùn)作的?它有哪些優(yōu)勢?

    空間計算將數(shù)字?jǐn)?shù)據(jù)與物理世界實(shí)時融合,通過增強(qiáng)現(xiàn)實(shí)和虛擬現(xiàn)實(shí)頭顯或智能眼鏡等設(shè)備、增強(qiáng)混合現(xiàn)實(shí)交互。
    的頭像 發(fā)表于 07-02 09:14 ?1360次閱讀

    高性能計算集群在AI領(lǐng)域的應(yīng)用前景

    融合基礎(chǔ)高性能計算是指使用超級計算機(jī)和計算集群進(jìn)行高效的數(shù)據(jù)處理與分析。它可以處理大規(guī)模的數(shù)據(jù)集,并提供快速的計算能力,使得科學(xué)家和工程師
    的頭像 發(fā)表于 06-23 13:07 ?1427次閱讀
    高性能<b class='flag-5'>計算</b>集群在AI領(lǐng)域的應(yīng)用前景

    突破智能駕艙邊界,Imagination如何構(gòu)建高安全GPU+AI融合計算架構(gòu)

    與發(fā)展趨勢。在5月15日的專題論壇上,Imagination中國區(qū)產(chǎn)品總監(jiān)鄭魁著重分享了公司GPU與AI融合計算架構(gòu)創(chuàng)新,及其在智能座艙領(lǐng)域的應(yīng)用探索。同時,憑借
    的頭像 發(fā)表于 05-16 09:38 ?1000次閱讀
    突破智能駕艙邊界,Imagination如何構(gòu)建高安全GPU+AI<b class='flag-5'>融合計算</b>架構(gòu)