chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

用國產(chǎn)通用GPU打造中國版ChatGPT的算力底座

Felix分析 ? 來源:電子發(fā)燒友網(wǎng) ? 作者:吳子鵬 ? 2023-03-01 01:05 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報道(文/吳子鵬)據(jù)國信證券統(tǒng)計,ChatGPT今年1月的月活躍用戶超過1億,用戶過億只用了2至3個月,其速度遠(yuǎn)超過去的推特、海外版抖音等。ChatGPT爆火之后,如何打造中國版的ChatGPT成為熱門話題,并且與之相關(guān)的AIGC以及其他AI大模型應(yīng)用也都受到廣泛關(guān)注。

作為國內(nèi)頭部通用GPU高端芯片及超級算力系統(tǒng)提供商,天數(shù)智芯認(rèn)為,ChatGPT的推廣進(jìn)一步驗(yàn)證了人工智能給工作、生活帶來很大幫助,甚至不亞于工業(yè)革命的影響,可以親身體驗(yàn)到其帶來的效率上的提升。這種應(yīng)用是建立在巨大算力模型訓(xùn)練基礎(chǔ)上帶來的智能處理,因此也帶動了0座的需求。

確實(shí),隨著以ChatGPT為代表的AIGC應(yīng)用大火,背后大模型訓(xùn)練所需要的算力也隨之暴漲。統(tǒng)計數(shù)據(jù)顯示,ChatGPT的總算力消耗約為3640PF-days(即假如每秒計算一千萬億次,需要計算3640天),整體部署大約需要7-8個500P算力的數(shù)據(jù)中心。而根據(jù)微軟官網(wǎng)的消息,微軟Azure為OpenAI建設(shè)了一個單獨(dú)的超算中心,具有超過28.5萬個CPU核心、1萬個GPU和400 GB/s的GPU服務(wù)器網(wǎng)絡(luò)傳輸帶寬。

從成本上看,ChatGPT就像一個吞金獸。數(shù)據(jù)顯示,其運(yùn)行一次的費(fèi)用大概需要430萬美元。這主要是因?yàn)镃hatGPT背后的預(yù)訓(xùn)練大模型——GPT大模型的GPT-3.5版本是一個“龐然大物”。目前,GPT-3.5模型的參數(shù)規(guī)模已經(jīng)達(dá)1750億,原始數(shù)據(jù)規(guī)模達(dá)45TB。

天數(shù)智芯表示,目前大模型參數(shù)已經(jīng)突破千億,并有更高的要求,對于訓(xùn)練芯片的通用性及兼容性有更高的要求。訓(xùn)練芯片要能支持更多的算法及改進(jìn),而且由于算力需求的規(guī)模越來越大,甚至單個算力集群無法滿足,對于異構(gòu)算力、多集群協(xié)同等方面有更高的要求,進(jìn)而對于異構(gòu)算力上的兼容性就會有更高的要求。同時,由于數(shù)據(jù)量的急劇提升,對于數(shù)據(jù)的隱私保護(hù)也會有所要求,對于隱私計算在訓(xùn)練芯片上的支持也會有要求。

從微軟對ChatGPT的介紹能夠看出,這套系統(tǒng)除了模型預(yù)訓(xùn)練和日常運(yùn)行,F(xiàn)inetune模型調(diào)優(yōu)也是關(guān)鍵一環(huán)。因此,確實(shí)如天數(shù)智芯所言,雖然ChatGPT目前的算力規(guī)模和運(yùn)行費(fèi)用很高,但是這些數(shù)字還會與日俱增。

隨著ChatGPT在全球范圍內(nèi)大火,目前國內(nèi)眾多科技巨頭也相繼宣布,將推出自己的類ChatGPT應(yīng)用。比如國內(nèi)的百度,根據(jù)百度創(chuàng)始人、董事長兼首席執(zhí)行官李彥宏在一封名為“百度站在AI浪潮之巔”的內(nèi)部信中表示,百度即將在3月份推出新一代的大語言模型“文心一言”。這也是繼“文心一格”(AI作畫)、“文心百中”(產(chǎn)業(yè)搜索)之后,百度推出的又一大重磅的AI大模型應(yīng)用。

在中國版ChatGPT不斷涌現(xiàn)后,算力芯片作為供給端核心環(huán)節(jié)將率先受益,而其中又以擁有數(shù)量眾多的計算單元和超長的流水線的通用GPU需求最為迫切。天數(shù)智芯表示,大規(guī)模的普及應(yīng)用會對大模型算法有更高的要求,很多科研及企業(yè)也投入到大模型算法的研究中,對于算法模型會有優(yōu)化和改進(jìn),因此對于算力底座支持的通用性及擴(kuò)展性有很高要求,因此一定程度上會降低對于定制化AI芯片的需求,促進(jìn)通用GPU市場的發(fā)展。

天數(shù)智芯自2021年3月推出云端訓(xùn)練通用GPU產(chǎn)品--天垓100,并于2022年12月推出云端推理通用GPU產(chǎn)品--智鎧100,截止目前,天數(shù)智芯訂單規(guī)模就已經(jīng)突破5億元。目前,基于天垓100訓(xùn)練的模型種類超過了兩百種。天數(shù)智芯表示,公司在訓(xùn)練芯片上堅(jiān)持通用GPU架構(gòu)、主流生態(tài)兼容等發(fā)展路線,對于通用性、兼容性、安全性等方面都進(jìn)行了支持,可以為ChatGPT的發(fā)展提供有效安全的算力底座。

當(dāng)然,正如中信證券在研報中指出的,目前在通用GPU方面,國際廠商在高精度浮點(diǎn)計算及CUDA生態(tài)方面還手握核心的技術(shù)壁壘,***和方案在軟硬件方面都還有一定的差距。對此,天數(shù)智芯回應(yīng)稱,堅(jiān)持通用GPU發(fā)展的路線,全面覆蓋訓(xùn)練和推理兩條產(chǎn)品發(fā)展主線。結(jié)合行業(yè)解決方案為各行業(yè)、各產(chǎn)業(yè)發(fā)展提供完整成熟的軟硬件一體化方案。在未來的產(chǎn)品發(fā)展上,逐步縮小和國際先進(jìn)產(chǎn)品的差距,為國內(nèi)人工智能發(fā)展提供強(qiáng)有力的支持。

從中長期來看,ChatGPT的火爆以及中國版ChatGPT的陸續(xù)推出,對通用GPU有著巨大的需求。同時,國內(nèi)AIGC市場將和信創(chuàng)市場出現(xiàn)疊加效應(yīng),讓天數(shù)智芯等相關(guān)廠商長期收益,并借此機(jī)會提升產(chǎn)品迭代的速度,逐漸達(dá)到國際領(lǐng)先水平。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    5039

    瀏覽量

    133847
  • ChatGPT
    +關(guān)注

    關(guān)注

    29

    文章

    1595

    瀏覽量

    9827
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    壁仞科技聯(lián)合三方打造國產(chǎn)集群落地

    近日,由浙江聯(lián)通、壁仞科技、中興通訊、優(yōu)云科技四方聯(lián)合打造國產(chǎn)集群,在浙江烏鎮(zhèn)智中心正式點(diǎn)亮。該集群項(xiàng)目的建成,不僅極大地豐富了浙江
    的頭像 發(fā)表于 08-01 15:26 ?997次閱讀

    云XR(AR/VR)底座關(guān)鍵特征與技術(shù)路徑

    據(jù)處理,依托AIDC(人工智能數(shù)據(jù)中心)提供智能,2024年中國智能增速超65%。 邊緣節(jié)點(diǎn)?:通過本地化
    的頭像 發(fā)表于 06-19 08:10 ?369次閱讀
    云XR(AR/VR)<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>底座</b>關(guān)鍵特征與技術(shù)路徑

    【「芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗(yàn)】+NVlink技術(shù)從應(yīng)用到原理

    前言 【「芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」書中的芯片知識是比較接近當(dāng)前的頂尖芯片水平的,同時包含了芯片架構(gòu)的基礎(chǔ)知識,但該部分知識比較晦澀難懂,或許是由于我一直從事的事芯片
    發(fā)表于 06-18 19:31

    點(diǎn)動科技戰(zhàn)略聚焦AI智,領(lǐng)航服務(wù)新征程

    Al智業(yè)務(wù)收入占比已突破40%,標(biāo)志著點(diǎn)動從傳統(tǒng)業(yè)務(wù)向智能化轉(zhuǎn)型的戰(zhàn)略跨越取得階段性勝利! 技術(shù)賦能構(gòu)建核心壁壘,全棧能力驅(qū)動行業(yè)智能化升級 在技術(shù)布局上,點(diǎn)動科技聚焦行業(yè)模型和Al應(yīng)用,以GPU
    的頭像 發(fā)表于 05-07 09:29 ?381次閱讀

    搭建中心,從了解的GPU 特性開始

    ABSTRACT摘要本文介紹如何搭建,并介紹A100、H100、H200和B200這些GPU的特性。JAEALOT2025年4月23日隨著人工智能、大數(shù)據(jù)和高性能計算(HPC)的快速發(fā)展,市場上
    的頭像 發(fā)表于 04-24 11:08 ?2454次閱讀
    搭建<b class='flag-5'>算</b><b class='flag-5'>力</b>中心,從了解的<b class='flag-5'>GPU</b> 特性開始

    AI 報告來了!2025中國AI市場將達(dá) 259 億美元

    ,這份報告極具前瞻性與指導(dǎo)意義。報告顯示,在規(guī)模方面,中國智能增速遠(yuǎn)超預(yù)期,2024年中國
    的頭像 發(fā)表于 03-07 13:27 ?1384次閱讀
    AI <b class='flag-5'>算</b><b class='flag-5'>力</b>報告來了!2025<b class='flag-5'>中國</b>AI<b class='flag-5'>算</b><b class='flag-5'>力</b>市場將達(dá) 259 億美元

    GPU 加速計算:突破傳統(tǒng)瓶頸的利刃

    在數(shù)字化時代,數(shù)據(jù)呈爆炸式增長,傳統(tǒng)的已難以滿足復(fù)雜計算任務(wù)的需求。無論是人工智能的深度學(xué)習(xí)、大數(shù)據(jù)的分析處理,還是科學(xué)研究中的模擬計算,都對提出了極高的要求。而云
    的頭像 發(fā)表于 02-17 10:36 ?425次閱讀

    GPU租用平臺有什么好處

    當(dāng)今,GPU租用平臺為科研機(jī)構(gòu)、企業(yè)乃至個人開發(fā)者提供了靈活高效的解決方案。下面,AI部落小編帶您深入探討
    的頭像 發(fā)表于 02-07 10:39 ?601次閱讀

    中心的如何衡量?

    作為當(dāng)下科技發(fā)展的重要基礎(chǔ)設(shè)施,其的衡量關(guān)乎其能否高效支撐人工智能、大數(shù)據(jù)分析等智能應(yīng)用的運(yùn)行。以下是對智中心算衡量的詳細(xì)闡述:一、
    的頭像 發(fā)表于 01-16 14:03 ?3629次閱讀
    <b class='flag-5'>算</b>智<b class='flag-5'>算</b>中心的<b class='flag-5'>算</b><b class='flag-5'>力</b>如何衡量?

    中心會取代通用中心嗎?

    隨著人工智能(AI)技術(shù)的飛速發(fā)展,計算需求不斷攀升,數(shù)據(jù)中心行業(yè)正經(jīng)歷著前所未有的變革。傳統(tǒng)的通用中心與新興的智中心之間的競爭日益激烈。那么,在這樣的背景下,
    的頭像 發(fā)表于 01-06 14:45 ?791次閱讀
    智<b class='flag-5'>算</b>中心會取代<b class='flag-5'>通用</b><b class='flag-5'>算</b><b class='flag-5'>力</b>中心嗎?

    首個國產(chǎn)萬卡集群!賽思時間同步服務(wù)器助力?“東數(shù)西”甘肅慶陽樞紐節(jié)點(diǎn)打造中國谷」!

    中國信通院云計算與大數(shù)據(jù)研究所副所長栗蔚指出,對服務(wù)而言,東數(shù)西的本質(zhì)就是能夠把像水和
    的頭像 發(fā)表于 12-27 21:22 ?722次閱讀
    首個<b class='flag-5'>國產(chǎn)</b>萬卡<b class='flag-5'>算</b><b class='flag-5'>力</b>集群!賽思時間同步服務(wù)器助力?“東數(shù)西<b class='flag-5'>算</b>”甘肅慶陽樞紐節(jié)點(diǎn)<b class='flag-5'>打造</b>「<b class='flag-5'>中國</b><b class='flag-5'>算</b>谷」!

    【「芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗(yàn)】--了解芯片GPU

    著色器(Pixel shader)是圖形流水線中相當(dāng)強(qiáng)大的功能單元,因?yàn)樗梢詾槊總€片段執(zhí)行復(fù)雜的計算,從而為最終渲染的圖像添加細(xì)節(jié)和視覺效果。 DirectX API推動 GPU 演進(jìn)
    發(fā)表于 11-03 12:55

    GPU開發(fā)平臺是什么

    隨著AI技術(shù)的廣泛應(yīng)用,需求呈現(xiàn)出爆發(fā)式增長。AI租賃作為一種新興的服務(wù)模式,正逐漸成為企業(yè)獲取
    的頭像 發(fā)表于 10-31 10:31 ?887次閱讀

    【一文看懂】大白話解釋“GPUGPU

    隨著大模型的興起,“GPU”這個詞正頻繁出現(xiàn)在人工智能、游戲、圖形設(shè)計等工作場景中,什么是GPU,它與CPU的區(qū)別是什么?以及到底什么是GPU
    的頭像 發(fā)表于 10-29 08:05 ?3819次閱讀
    【一文看懂】大白話解釋“<b class='flag-5'>GPU</b>與<b class='flag-5'>GPU</b><b class='flag-5'>算</b><b class='flag-5'>力</b>”