chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

谷歌新一代 TPU 芯片 Ironwood:助力大規(guī)模思考與推理的 AI 模型新引擎?

Carol Li ? 來源:電子發(fā)燒友 ? 作者:李彎彎 ? 2025-04-12 00:57 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報道(文 / 李彎彎)日前,谷歌在 Cloud Next 大會上,隆重推出了最新一代 TPU AI 加速芯片 ——Ironwood。據(jù)悉,該芯片預計于今年晚些時候面向 Google Cloud 客戶開放,將提供 256 芯片集群以及 9,216 芯片集群兩種配置選項。


在核心亮點層面,Ironwood 堪稱谷歌首款專門為 AI 推理精心設計的 TPU 芯片,能夠有力支持大規(guī)模思考與推理 AI 模型。谷歌方面表示,它代表著 AI 發(fā)展從 “響應式” 向 “主動式” 的范式轉(zhuǎn)變,未來 AI 代理將能夠主動檢索并生成數(shù)據(jù),進而提供深度見解,而非僅僅輸出原始數(shù)據(jù)。

在性能與能效表現(xiàn)上,Ironwood 取得了重大突破。其每瓦性能達到上一代 TPU Trillium 的兩倍,能效近乎首款云 TPU 的 30 倍。單芯片配備 192GB 高帶寬內(nèi)存(HBM),容量為 Trillium 的 6 倍;HBM 帶寬高達 7.2TB/s,是 Trillium 的 4.5 倍。芯片間互連(ICI)帶寬提升至 1.2TB/s,為 Trillium 的 1.5 倍,這一提升有力地支持了大規(guī)模分布式訓練與推理任務。

此外,Ironwood 還是谷歌首款支持 FP8 浮點格式的 TPU 芯片。在此之前,TPU 僅支持 INT8(用于推理)和 BF16(用于訓練)。采用 FP8 計算可使 AI 訓練吞吐量翻倍,性能相較于 BF16 提升 10 倍。

Ironwood 還配備了增強版 SparseCore 專用加速器,可用于處理高級排名和推薦任務中常見的超大嵌入。憑借這一增強版 SparseCore,其能夠加速更多領域的任務,應用范圍從傳統(tǒng)的 AI 任務拓展至金融和科學等領域。

在系統(tǒng)架構與擴展性方面,Ironwood 可擴展至 9216 個液冷芯片,借助突破性的 ICI 網(wǎng)絡進行連接,功率接近 10 兆瓦。它提供 256 芯片和 9216 芯片兩種 Pod 配置,其中 9216 芯片的 Pod 配置整體 AI 算力可達 42.5 Exaflops。谷歌先進的液冷解決方案能夠確保芯片在持續(xù)繁重的 AI 工作負載下依然保持高性能。

谷歌的 TPU 作為專為機器學習設計的定制化加速芯片,自 2015 年首次亮相以來,已成為 AI 硬件領域的重要力量。TPU 主要應用于訓練和推理大規(guī)模 AI 模型(如 AlphaGo、PaLM、Gemini 等),并深度融入 Google Cloud 以及谷歌內(nèi)部 AI 服務之中。

截至目前,TPU 已歷經(jīng)多次版本迭代:TPU v1 支持 INT8 精度,主要用于谷歌內(nèi)部項目(如 AlphaGo、RankBrain);TPU v2/v3 面向訓練與推理場景,支持浮點運算,v3 進一步增加了內(nèi)存和互連帶寬;TPU v4 的算力達到 TPU v3 的 2.7 倍,采用液冷技術,支持 4096 芯片互聯(lián)的 Pod 集群,適用于超大規(guī)模模型(如 PaLM)。

由此可見,谷歌 TPU 憑借其專用化設計、高能效比以及與 TensorFlow 的深度集成等優(yōu)勢,成為大規(guī)模 AI 模型訓練與推理的核心硬件支撐。如今,Ironwood 的推出不僅將進一步鞏固谷歌在 AI 硬件領域的領先地位,也勢必為生成式 AI 的下一階段發(fā)展提供強大的計算動力。?

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 谷歌
    +關注

    關注

    27

    文章

    6238

    瀏覽量

    109831
  • TPU
    TPU
    +關注

    關注

    0

    文章

    160

    瀏覽量

    21436
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    【內(nèi)測活動同步開啟】這么?。窟@么強?新一代模型MCP開發(fā)板來啦!

    【內(nèi)測活動同步開啟】這么?。窟@么強?新一代模型MCP開發(fā)板來啦! 聆思全新一代六合芯片「LS26系列」,搭載WIFI / BLE &a
    發(fā)表于 09-25 11:47

    新一代超大模型訓練引擎XTuner V1開源

    9月8日,上海人工智能實驗室(上海AI實驗室)開源書生大模型新一代訓練引擎XTuner V1。
    的頭像 發(fā)表于 09-10 10:55 ?735次閱讀

    大規(guī)模專家并行模型在TensorRT-LLM的設計

    DeepSeek-V3 / R1 等模型采用大規(guī)模細粒度混合專家模型 (MoE) 架構,大幅提升了開源模型的質(zhì)量。Llama 4 和 Qwen3 等新發(fā)布的開源
    的頭像 發(fā)表于 09-06 15:21 ?725次閱讀
    <b class='flag-5'>大規(guī)模</b>專家并行<b class='flag-5'>模型</b>在TensorRT-LLM的設計

    信而泰×DeepSeek:AI推理引擎驅(qū)動網(wǎng)絡智能診斷邁向 “自愈”時代

    DeepSeek-R1:強大的AI推理引擎底座DeepSeek是由杭州深度求索人工智能基礎技術研究有限公司開發(fā)的新一代AI
    發(fā)表于 07-16 15:29

    谷歌新一代生成式AI媒體模型登陸Vertex AI平臺

    我們在 Vertex AI 上推出新一代生成式 AI 媒體模型: Imagen 4、Veo 3 和 Lyria 2。
    的頭像 發(fā)表于 06-18 09:56 ?724次閱讀

    廣和通發(fā)布新一代AI語音智能體FiboVista

    近日,2025火山引擎Force原動力大會正式開幕。廣和通發(fā)布新一代AI語音智能體FiboVista,并已率先應用于車聯(lián)網(wǎng),成為智能駕駛的“用車伙伴”和“出行伴侶”。通過創(chuàng)新AI
    的頭像 發(fā)表于 06-17 09:22 ?891次閱讀

    Google推出第七TPU芯片Ironwood

    在 Google Cloud Next 25 大會上,我們隆重推出第 7 Tensor Processing Unit (TPU) — Ironwood。這不僅是我們迄今為止性能最高、擴展性最佳的定制
    的頭像 發(fā)表于 04-16 11:20 ?1040次閱讀
    Google推出第七<b class='flag-5'>代</b><b class='flag-5'>TPU</b><b class='flag-5'>芯片</b><b class='flag-5'>Ironwood</b>

    谷歌第七TPU Ironwood深度解讀:AI推理時代的硬件革命

    谷歌第七TPU Ironwood深度解讀:AI推理時代的硬件革命 Google 發(fā)布了
    的頭像 發(fā)表于 04-12 11:10 ?2413次閱讀
    <b class='flag-5'>谷歌</b>第七<b class='flag-5'>代</b><b class='flag-5'>TPU</b> <b class='flag-5'>Ironwood</b>深度解讀:<b class='flag-5'>AI</b><b class='flag-5'>推理</b>時代的硬件革命

    適用于數(shù)據(jù)中心和AI時代的800G網(wǎng)絡

    ,成為新一代AI數(shù)據(jù)中心的核心驅(qū)動力。 AI時代的兩大數(shù)據(jù)中心:AI工廠與AIAI時代
    發(fā)表于 03-25 17:35

    讓大模型訓練更高效,奇異摩爾用互聯(lián)創(chuàng)新方案定義下一代AI計算

    ? 電子發(fā)燒友網(wǎng)報道(文/吳子鵬)近段時間以來,DeepSeek現(xiàn)象級爆火引發(fā)產(chǎn)業(yè)對大規(guī)模數(shù)據(jù)中心建設的思考和爭議。在訓練端,DeepSeek以開源模型通過算法優(yōu)化(如稀疏計算、動態(tài)
    的頭像 發(fā)表于 02-18 09:19 ?1704次閱讀
    讓大<b class='flag-5'>模型</b>訓練更高效,奇異摩爾用互聯(lián)創(chuàng)新方案定義下<b class='flag-5'>一代</b><b class='flag-5'>AI</b>計算

    OpenAI發(fā)布新一代推理模型o3及o3-mini

    近日,OpenAI在為期12天的發(fā)布會上宣布了新一代推理模型o3及其精簡版o3-mini。這兩款模型被專門設計用于在回答問題之前進行更深入的思考,以期提高答案的準確性。 據(jù)悉,o3
    的頭像 發(fā)表于 12-24 09:29 ?1045次閱讀

    OpenAI推出新一代推理模型o3系列

    AI技術日新月異的今天,OpenAI再次引領潮流,于近日正式發(fā)布了其新一代推理模型系列——o3。此次發(fā)布的o3系列包括兩個版本,分別是標準版的o3和精簡版的o3-mini。 據(jù)OpenAI介紹
    的頭像 發(fā)表于 12-23 11:00 ?986次閱讀

    英偉達新一代AI芯片過熱問題引關注

    近日,英偉達新一代Blackwell AI芯片遭遇過熱問題,這消息引發(fā)了業(yè)界的廣泛關注。據(jù)悉,搭載該芯片的服務器在運行過程中存在過熱現(xiàn)象,
    的頭像 發(fā)表于 11-19 16:15 ?854次閱讀

    Kimi發(fā)布新一代數(shù)學推理模型k0-math

    近日,Kimi正式推出了其新一代數(shù)學推理模型k0-math。據(jù)基準測試顯示,該模型的數(shù)學能力可與全球領先的OpenAI o1系列中的o1-mini和o1-preview模型相媲美。 在
    的頭像 發(fā)表于 11-18 11:38 ?1266次閱讀

    李開復:中國擅長打造經(jīng)濟實惠的AI推理引擎

    10月22日上午,零一萬物公司的創(chuàng)始人兼首席執(zhí)行官李開復在與外媒的交流中透露,其公司旗下的Yi-Lightning(閃電模型)在推理成本上已實現(xiàn)了顯著優(yōu)勢,比OpenAI的GPT-4o模型低了31倍。他強調(diào),中國擅長打造經(jīng)濟實惠
    的頭像 發(fā)表于 10-22 16:54 ?962次閱讀