chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

大模型快速發(fā)展,GPU IP有何作用

Carol Li ? 來(lái)源:電子發(fā)燒友 ? 作者:李彎彎 ? 2024-05-29 00:05 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群


電子發(fā)燒友網(wǎng)報(bào)道(文/李彎彎)隨著人工智能技術(shù)的快速發(fā)展,GPU作為重要的算力支撐時(shí)常被提及。國(guó)內(nèi)外重要的GPU芯片公司也為人熟知,包括英偉達(dá)、AMD、英特爾,景嘉微、海光信息、天數(shù)智芯、摩爾線程等。

事實(shí)上,除此之外還有一些GPU IP公司也為GPU產(chǎn)業(yè)發(fā)展做出很大貢獻(xiàn),包括Imagination、Arm、芯原科技等。在當(dāng)前備受關(guān)注的大模型方面,這些公司的產(chǎn)品也起到一定支持作用。

Imagination

Imagination的GPU IP產(chǎn)品包括IMG A系列、IMG CXT、IMG DXT等多個(gè)系列,每個(gè)系列有不同的特點(diǎn)和應(yīng)用場(chǎng)景。IMG A系列,是Imagination有史以來(lái)性能最強(qiáng)大GPU IP產(chǎn)品,IMG A系列被設(shè)計(jì)為可應(yīng)用于與各種場(chǎng)景的GPU,是多種垂直應(yīng)用領(lǐng)域的終極解決方案。

該系列產(chǎn)品覆蓋從入門(mén)級(jí)市場(chǎng)的每時(shí)鐘周期處理1個(gè)像素(1 PPC)的組件,到高性能設(shè)備的速度高達(dá)每秒2萬(wàn)億次浮點(diǎn)運(yùn)算(2 TFLOP)的內(nèi)核,以及針對(duì)云應(yīng)用的、速度超越該數(shù)值的多核解決方案。

IMG CXT,搭載首個(gè)針對(duì)移動(dòng)端優(yōu)化的PowerVR Photon光線追蹤架構(gòu),為移動(dòng)端游戲玩家和開(kāi)發(fā)者提供桌面級(jí)光線追蹤功能的體驗(yàn)。實(shí)現(xiàn)了光線追蹤性能的大幅提升,支持在移動(dòng)設(shè)備中以高幀率實(shí)現(xiàn)逼真的光線追蹤陰影、反射、全局照明和環(huán)境遮蔽等效果。

IMG DXT是新一代面向移動(dòng)端的高性能GPU IP,為移動(dòng)設(shè)備用戶帶來(lái)先進(jìn)的圖形技術(shù)。提供三款配置,包括DXT-8-256、DXT-48-1536和DXT-72-2304,分別針對(duì)主流、高端和旗艦移動(dòng)設(shè)備。旗艦產(chǎn)品DXT-72-2304具有72 GTexels/s和2.5 TFLOP FP32算力,與上一代產(chǎn)品相比,其最大單核性能提升了50%。

Imagination的GPU IP產(chǎn)品廣泛應(yīng)用于移動(dòng)設(shè)備、汽車(chē)、數(shù)據(jù)中心、桌面和云游戲等多個(gè)領(lǐng)域。通過(guò)提供高性能的圖形渲染和數(shù)據(jù)處理能力,為各種應(yīng)用場(chǎng)景提供了強(qiáng)大的支持。

Imagination的GPU IP高性能、可擴(kuò)展性和低功耗的特性,使得在支持大模型的應(yīng)用上具有優(yōu)勢(shì)。如IMG DXD,其多核配置提供了強(qiáng)大的計(jì)算能力,5 TFLOPS FP32和144 GTexel/s,能夠在大模型的應(yīng)用上起到支持作用。

Arm

Arm的GPU IP產(chǎn)品系列主要包括Mali系列和Immortalis系列。Mali系列GPU IP是Arm的長(zhǎng)期主力產(chǎn)品,擁有從入門(mén)級(jí)到旗艦級(jí)的完整產(chǎn)品線。Mali系列包括Mali-G710、Mali-G610、Mali-G510、Mali-G310等多個(gè)型號(hào),分別定位于不同性能和價(jià)格的市場(chǎng)段。

Mali系列GPU基于Valhall GPU架構(gòu),并持續(xù)優(yōu)化和提升性能。例如,Mali-G710號(hào)稱綜合性能提升20%、機(jī)器學(xué)習(xí)性能提升35%、紋理性能提升50%、能效提升20%。

Immortalis系列是Arm在2022年推出的全新旗艦級(jí)GPU IP產(chǎn)品,旨在提供終極的移動(dòng)3D體驗(yàn)。Immortalis GPU基于Mali設(shè)計(jì),并引入了硬件光線追蹤功能,這是首款在移動(dòng)端支持此功能的GPU。

Immortalis GPU采用10-16核設(shè)計(jì),性能比上一代Mali GPU高15%。其光線追蹤單元旨在提高效率,只占用約4%的著色器核心面積,卻能帶來(lái)300%的性能提升。

目前,Immortalis系列已經(jīng)推出了Immortalis-G715和Immortalis-G720等型號(hào)。Immortalis-G720是Arm目前性能和能效表現(xiàn)最為出色的GPU,與上一代產(chǎn)品相比,其性能和能效分別提高了15%,系統(tǒng)級(jí)效率更躍升了40%。

Arm的GPU IP產(chǎn)品廣泛應(yīng)用于移動(dòng)設(shè)備、汽車(chē)、數(shù)據(jù)中心、桌面和云游戲等多個(gè)領(lǐng)域。它們能夠支持各種計(jì)算任務(wù),如圖形渲染、物理模擬、圖像處理、機(jī)器學(xué)習(xí)和人工智能等。

Arm的GPU IP高性能計(jì)算、能效優(yōu)化和生態(tài)系統(tǒng)支持方面特點(diǎn),使其在大模型的應(yīng)用方面具有優(yōu)勢(shì)。Arm的GPU IP,如Mali系列和Ethos系列,已被多家公司采用,并成功應(yīng)用于大模型訓(xùn)練和推理中。

在大模型訓(xùn)練方面,Arm的GPU IP被廣泛應(yīng)用于深度學(xué)習(xí)、自然語(yǔ)言處理等領(lǐng)域。通過(guò)與合作伙伴共同開(kāi)發(fā)定制化的解決方案,Arm GPU IP為這些領(lǐng)域的研究者和開(kāi)發(fā)者提供了強(qiáng)大的計(jì)算能力支持。

在云端推理方面,Arm的GPU IP同樣發(fā)揮了重要作用。通過(guò)提供高性能的云端計(jì)算資源,Arm GPU IP支持了多種大模型應(yīng)用的實(shí)時(shí)推理需求。

芯原股份

芯原股份的GPU IP系列產(chǎn)品,以其高性能、靈活性和廣泛的應(yīng)用范圍,成為市場(chǎng)上備受矚目的產(chǎn)品。芯原可擴(kuò)展的Vivante圖形處理器(GPU)IP系列應(yīng)用廣泛,包括從低功耗的小型物聯(lián)網(wǎng)MCU到面向汽車(chē)和計(jì)算機(jī)應(yīng)用的功能強(qiáng)大的SoC。設(shè)計(jì)可滿足各種芯片尺寸和功耗預(yù)算,是具成本效益的優(yōu)質(zhì)圖形處理器解決方案。

芯原科技此前還詳細(xì)介紹了其GPGPU-AI IP為核心的AI芯片定制解決方案。其以Tensor Core和GPGPU/GPU為主,提供了一個(gè)靈活的架構(gòu)。

芯原GPGPU-AI處理器上有芯原通用的軟件棧,在上層可以支持標(biāo)準(zhǔn)的應(yīng)用接口,下層可以適配芯原各種各樣的算力IP,算力IP有圖形處理器、并行計(jì)算處理器、神經(jīng)網(wǎng)絡(luò)處理器。芯原GPGPU-AI分幾個(gè)層次擴(kuò)展的算力,可以支持異構(gòu)計(jì)算,包括矢量計(jì)算、標(biāo)量計(jì)算和張量處理單元,還可以支持大模型,高帶寬計(jì)算需求,同時(shí)基于在AI領(lǐng)域有多年的積累,可對(duì)數(shù)據(jù)組織、數(shù)據(jù)搬移和計(jì)算有針對(duì)性的優(yōu)化,另外還有專門(mén)針對(duì)大模型的帶寬壓縮技術(shù)。

芯原的GPU IP已被廣泛應(yīng)用于桌面顯卡、車(chē)載信息娛樂(lè)、工業(yè)顯示、物聯(lián)網(wǎng)及可穿戴設(shè)備、大規(guī)模并行計(jì)算等領(lǐng)域。

寫(xiě)在最后


可以看到,GPU IP在多個(gè)領(lǐng)域都有廣泛應(yīng)用,包括科學(xué)計(jì)算、大數(shù)據(jù)分析、深度學(xué)習(xí)和人工智能、游戲服務(wù)器、圖像處理、圖形渲染和動(dòng)畫(huà)制作、視頻處理和圖像識(shí)別等。

當(dāng)然,GPU IP也在不斷發(fā)展和演進(jìn)中,未來(lái),專用加速I(mǎi)P與通用GPU的融合或許是GPU技術(shù)未來(lái)發(fā)展的一個(gè)亮點(diǎn),這種融合將使GPU更具多功能性,更好地處理特定工作負(fù)載。高速DRAM和緩存技術(shù)的不斷演進(jìn)也將推動(dòng)GPU的性能提升,使其能夠更有效地處理復(fù)雜的計(jì)算任務(wù),如支持大模型的訓(xùn)練和部署。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    5091

    瀏覽量

    134392
  • IP
    IP
    +關(guān)注

    關(guān)注

    5

    文章

    1849

    瀏覽量

    154861
  • 大模型
    +關(guān)注

    關(guān)注

    2

    文章

    3435

    瀏覽量

    4958
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    搭建萬(wàn)卡GPU集群,小米AI大模型即將全力啟動(dòng)

    董事長(zhǎng)雷軍在該團(tuán)隊(duì)扮演重要的領(lǐng)導(dǎo)角色。 ? 高性能計(jì)算是大模型發(fā)展的基礎(chǔ),而GPU在其中扮演重要作用。隨著AI在如今社會(huì)中發(fā)揮著越來(lái)越重要的作用
    的頭像 發(fā)表于 12-29 00:02 ?3516次閱讀
    搭建萬(wàn)卡<b class='flag-5'>GPU</b>集群,小米AI大<b class='flag-5'>模型</b>即將全力啟動(dòng)

    空氣溫度測(cè)量裝置的主要作用是什么?品牌推薦?

    隨著氣象學(xué)的發(fā)展,氣象站遍布全球,對(duì)空氣溫度的觀測(cè)更加系統(tǒng)和準(zhǔn)確,市面上可供選擇的空氣溫度測(cè)量?jī)x器種類也越來(lái)越豐富。那么,空氣溫度測(cè)量裝置的主要作用是什么?品牌推薦?下面就讓小編來(lái)
    發(fā)表于 10-20 16:24

    【VisionFive 2單板計(jì)算機(jī)試用體驗(yàn)】1、開(kāi)箱初體驗(yàn)(刷系統(tǒng)+靜態(tài)IP設(shè)置+GPU跑分測(cè)評(píng))

    文件:注意:balenaEtcher這個(gè)軟件表面上可以選擇bz2文件,但是在軟件內(nèi)解壓的話會(huì)卡在73%的進(jìn)度。所以,bz2文件要先解壓,再用balenaEtcher燒錄鏡像到TF卡。 開(kāi)機(jī)設(shè)置靜態(tài)IP
    發(fā)表于 07-09 21:50

    為什么無(wú)法在GPU上使用INT8 和 INT4量化模型獲得輸出?

    安裝OpenVINO? 2024.0 版本。 使用 optimum-intel 程序包將 whisper-large-v3 模型轉(zhuǎn)換為 int 4 和 int8,并在 GPU 上使用 OpenVINO? 運(yùn)行推理。 沒(méi)有可用的輸出。
    發(fā)表于 06-23 07:11

    摩爾線程GPU率先支持Qwen3全系列模型

    近日,阿里云正式發(fā)布Qwen3系列的8款開(kāi)源混合推理模型。摩爾線程團(tuán)隊(duì)在模型發(fā)布當(dāng)天,率先完成了Qwen3全系列模型在全功能GPU上的高效支持。這一成果充分展現(xiàn)了MUSA架構(gòu)及全功能
    的頭像 發(fā)表于 05-07 15:24 ?834次閱讀

    無(wú)法在GPU上運(yùn)行ONNX模型的Benchmark_app怎么解決?

    在 CPU 和 GPU 上運(yùn)行OpenVINO? 2023.0 Benchmark_app推斷的 ONNX 模型。 在 CPU 上推理成功,但在 GPU 上失敗。
    發(fā)表于 03-06 08:02

    語(yǔ)言模型管理的作用

    要充分發(fā)揮語(yǔ)言模型的潛力,有效的語(yǔ)言模型管理非常重要。以下,是對(duì)語(yǔ)言模型管理作用的分析,由AI部落小編整理。
    的頭像 發(fā)表于 01-02 11:06 ?566次閱讀

    小米加速布局AI大模型,搭建GPU萬(wàn)卡集群

    近日,消息稱小米正在緊鑼密鼓地搭建自己的GPU萬(wàn)卡集群,旨在加大對(duì)AI大模型的投入力度。據(jù)悉,小米的大模型團(tuán)隊(duì)在成立之初就已經(jīng)擁有了6500張GP
    的頭像 發(fā)表于 12-28 14:25 ?779次閱讀

    【「大模型啟示錄」閱讀體驗(yàn)】+開(kāi)啟智能時(shí)代的新鑰匙

    ,NVDIA與微軟的競(jìng)爭(zhēng) 。計(jì)算能力的飛速提升是大模型得以興起的重要基石。GPU/TPU 等高性能計(jì)算設(shè)備的迅猛發(fā)展,宛如為大模型的訓(xùn)練打造了一臺(tái)強(qiáng)大的引擎。它們能夠以極高的速度處理海
    發(fā)表于 12-24 13:10

    【「大模型啟示錄」閱讀體驗(yàn)】對(duì)大模型更深入的認(rèn)知

    內(nèi)容讓我對(duì)大模型技術(shù)的發(fā)展了更全面的認(rèn)識(shí)。我意識(shí)到,大模型不僅僅是一些算法和代碼的堆砌,它們背后有著深刻的科技變革和產(chǎn)業(yè)競(jìng)爭(zhēng)。 書(shū)中對(duì)大模型
    發(fā)表于 12-20 15:46

    GPU是如何訓(xùn)練AI大模型

    在AI模型的訓(xùn)練過(guò)程中,大量的計(jì)算工作集中在矩陣乘法、向量加法和激活函數(shù)等運(yùn)算上。這些運(yùn)算正是GPU所擅長(zhǎng)的。接下來(lái),AI部落小編帶您了解GPU是如何訓(xùn)練AI大模型的。
    的頭像 發(fā)表于 12-19 17:54 ?1282次閱讀

    芯原發(fā)布全新Vitality架構(gòu)GPU IP系列

    芯原股份(芯原,股票代碼:688521.SH)今日宣布推出全新Vitality架構(gòu)的圖形處理器(GPUIP系列,具備高性能計(jì)算能力,廣泛適用于云游戲、AI PC、獨(dú)立顯卡和集成顯卡等應(yīng)用領(lǐng)域。
    的頭像 發(fā)表于 12-19 15:26 ?1190次閱讀

    《CST Studio Suite 2024 GPU加速計(jì)算指南》

    和不支持的NVIDIA GPU硬件,如支持的L40S、RTX 5000 Ada Gen等,不支持的如Kepler和Maxwell部分型號(hào)被標(biāo)記為棄用。同時(shí)提到GPU計(jì)算要求64位計(jì)算機(jī)架構(gòu),不同代
    發(fā)表于 12-16 14:25

    IP定位離線庫(kù)的特點(diǎn)以及作用

    很多人知道IP定位,但是對(duì)離線庫(kù)不是很理解。這篇文章會(huì)和大家闡述離線庫(kù)的概念、特點(diǎn)以及具體什么作用。 IP定位路徑https://www.ipdatacloud.com/?utm-s
    的頭像 發(fā)表于 12-06 09:56 ?860次閱讀

    訓(xùn)練AI大模型需要什么樣的gpu

    訓(xùn)練AI大模型需要選擇具有強(qiáng)大計(jì)算能力、足夠顯存、高效帶寬、良好散熱和能效比以及良好兼容性和擴(kuò)展性的GPU。在選擇時(shí),需要根據(jù)具體需求進(jìn)行權(quán)衡和選擇。
    的頭像 發(fā)表于 12-03 10:10 ?1015次閱讀