chinese直男口爆体育生外卖, 99久久er热在这里只有精品99, 又色又爽又黄18禁美女裸身无遮挡, gogogo高清免费观看日本电视,私密按摩师高清版在线,人妻视频毛茸茸,91论坛 兴趣闲谈,欧美 亚洲 精品 8区,国产精品久久久久精品免费

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

算力革命:RoCE實測推理時延比InfiniBand低30%的底層邏輯

星融元Asterfusion ? 2025-05-28 14:08 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

人工智能與大數(shù)據(jù)技術(shù)爆發(fā)的時代,算力基礎(chǔ)設(shè)施的革新成為驅(qū)動產(chǎn)業(yè)升級的核心引擎。作為 AI 數(shù)據(jù)中心網(wǎng)絡(luò)架構(gòu)的關(guān)鍵樞紐,800G 智能交換機正以其極致的性能、靈活的擴展性和智能化的管理能力,重新定義高速網(wǎng)絡(luò)的標準。

本文將深度解析 AI 智算場景打造的800G AI RoCE交換機,從外部規(guī)格的硬件創(chuàng)新到內(nèi)部架構(gòu)的芯片級設(shè)計,從企業(yè)級操作系統(tǒng)的功能突破到實測數(shù)據(jù)的性能驗證,全方位展現(xiàn)其如何通過領(lǐng)先的技術(shù)架構(gòu)破解 AI 訓練與推理中的網(wǎng)絡(luò)效率瓶頸,助力數(shù)據(jù)中心在高帶寬、低延遲、高可靠性的需求下實現(xiàn)算力資源的最優(yōu)配置。

算力基礎(chǔ)設(shè)施—AI 智算RoCE網(wǎng)絡(luò)交換機

外觀展示

這款 800G AI 智能交換機在配備了 64 個 800G OSFP 網(wǎng)絡(luò)接口,能夠支持25G/50G/100G/200G/400G 等多種速率,可靈活適配不同的網(wǎng)絡(luò)環(huán)境需求。

wKgZPGg25GyAfgIEAAIXun1_7h4777.png

管理接口提供了 RJ45 MGMT Port、USB 2.0 Port 以及 RJ45 Console Port,為設(shè)備的管理和配置提供了豐富的選擇。還具備 2 個 10G 端口,可作為 INT 端口用于其他管理功能,為設(shè)備的擴展應用提供了可能。

交換機設(shè)有 6 個 LED 指示燈,左側(cè)的 LED 指示燈(LINK/ACT)用于展示管理口的網(wǎng)絡(luò)鏈路狀態(tài)和數(shù)據(jù)活動情況,右側(cè)的 LED 指示燈(SYS)則顯示系統(tǒng)整體狀態(tài),此外還有 BMC(面板管理控制器狀態(tài))、P(電源模塊狀態(tài))、F(風扇模塊狀態(tài))和 L(定位指示燈,用于維護期間識別設(shè)備),通過這些指示燈,運維人員可以快速了解設(shè)備的運行狀況。

采用 1+1 熱插拔電源設(shè)計,每個電源額定功率 3200W,且符合 80Plus 鈦金能效標準,確保了設(shè)備供電的穩(wěn)定和高效。同時,配備 3+1 個熱插拔風扇模塊,為設(shè)備的散熱提供了可靠保障。

內(nèi)部架構(gòu)

wKgZPGg25HqAXKZBAAOVwicNkcI709.png

采用了 Marvell Teralynx 10 ASIC(以下簡稱TL10),這是一款 5 納米單芯片可編程處理器,能提供 51.2Tbps 帶寬和約 560 納秒的端口轉(zhuǎn)發(fā)時延,在業(yè)內(nèi)處于領(lǐng)先水平。更詳細的內(nèi)部架構(gòu)請參見:51.2T 800G AI智算交換機軟硬件系統(tǒng)設(shè)計全揭秘 - 星融元Asterfusion

散熱設(shè)計上,采用 3D 均熱風冷散熱,這種高效的風冷設(shè)計使系統(tǒng)在 2180W 滿負荷運行時仍能有效控制溫度和噪音,即便在高負荷使用狀態(tài)下,風扇轉(zhuǎn)速僅為 60%,保證了設(shè)備的穩(wěn)定運行和良好的工作環(huán)境。

精確時間協(xié)議 PTP 模塊支持熱插拔,PTP 和 SyncE 同步精度高達 10 納秒,為對時間同步要求高的應用場景提供了有力支持。

COMe 模塊由 x86 英特爾至強處理器和 AsterNOS 驅(qū)動,為先進的數(shù)據(jù)中心 / 人工智能路由提供智能控制平面。面板管理控制器(BMC)模塊采用可插拔式設(shè)計,適用于模塊化、可升級的帶外管理,支持性能升級擴展,增強了設(shè)備的可擴展性和靈活性。

AI RoCE 交換機操作系統(tǒng)(AsterNOS)

wKgZPGg25IGAF148AAHlqNfq3kk878.png

基于企業(yè)級SONiC的增強特性

  • 超高速以太網(wǎng)優(yōu)化:通過動態(tài)流量整形和優(yōu)先級隊列技術(shù),實現(xiàn)網(wǎng)絡(luò)利用率超90%,較傳統(tǒng)以太網(wǎng)提升30%。
  • AI場景專屬功能flowlet級負載均衡:根據(jù)GPU集群負載動態(tài)分配流量,減少數(shù)據(jù)擁塞。INT+WCMP路由:結(jié)合帶內(nèi)遙測與加權(quán)多路徑算法,訓練任務(wù)延遲降低20.4%,token生成速率提升27.5%。

wKgZO2g25I6AfQkYAAD_Rju6o6M292.png
  • EasyRoCE :EasyRoCE 是星融元依托開源、開放的網(wǎng)絡(luò)架構(gòu)與技術(shù),為AI 智算、高性能計算等場景的RDMA 融合以太網(wǎng)(RoCE)提供的一系列實用特性和小工具。從前期規(guī)劃實施到日常運維監(jiān)控, EasyRoCE 簡化了各環(huán)節(jié)的復雜度并改善了操作體驗,更提供二次開發(fā)和集成空間,供網(wǎng)絡(luò)架構(gòu)師充分利用開放網(wǎng)絡(luò)的最新技術(shù)成果
wKgZPGg25JmATYQeAAAwG46x8vk054.png

(RE)RoCE Exporter:以容器的方式運行在AsterNOS網(wǎng)絡(luò)操作系統(tǒng)內(nèi),從運行AsterNOS的交換機設(shè)備上導出RoCE網(wǎng)絡(luò)相關(guān)監(jiān)控指標(到自定義HTTP端口),供統(tǒng)一監(jiān)控平臺進行可視化呈現(xiàn)。

wKgZPGg25KaAe8wBAAXT32jFjjU430.png
  • 接口收發(fā)帶寬和速率
  • RoCE、PFC、ECN、DSCP配置狀態(tài)信息
  • 擁塞控制信息(ECN標記包,PFC幀數(shù)等)
  • 隊列Buffer信息
  • ……

企業(yè)版 SONiC vs 社區(qū)版

wKgZO2g25K6AIq99AAEo8iooweM796.pngwKgZO2g25KuAf94gAADkNX8502k685.pngwKgZPGg25LWANnhXAAC1P13ADHo064.png

AsterNOS 同時支持 Linux Bash 和思科風格命令行界面(Klish),這種雙風格命令行界面幫助網(wǎng)絡(luò)工程師輕松適應并快速部署,提升了操作的便利性和效率。

wKgZO2g25L-Af_UoAACsbLS2vwA734.png

800G 數(shù)據(jù)中心交換機(TL10平臺)實測數(shù)據(jù)

wKgZO2g25MaALdsjAAK8GsXLvBQ086.png

CX864E-N蛇形吞吐測試

wKgZPGg25M2AYQRKAALdQVgFLNY035.png

CX864E-N的端口轉(zhuǎn)發(fā)時延

實測數(shù)據(jù)展示了該交換機在不同測試場景下的出色表現(xiàn),各項指標均達到較高水平,驗證了其性能的穩(wěn)定性和可靠性。

DeepSeek模型推理指標對比:IB vs RoCE

  • 推理時延:90% token 間隔延遲,指 90% token 間隔時間的最大值,用以衡量模型連續(xù)生成 token 的穩(wěn)定性和連貫性。推理時延越低,系統(tǒng)的穩(wěn)定性越高。
  • Token 平均生成速率(Token Generation Rate):單位為 token 每秒(tokens/s)。反映了模型推理的整體吞吐能力,TGR 越高,表示系統(tǒng)單位時間內(nèi)處理能力越強。
wKgZO2g25NSAb_W9AAAkJr1HFTo508.pngwKgZPGg25NyAe5IqAAAcyS1SqJI623.png

與IB網(wǎng)絡(luò)場景下數(shù)據(jù)對比可見,星融元RoCEv2組網(wǎng),推理時延明顯優(yōu)于IB,token 連貫性更好;token生成速度、中文字符速度明顯優(yōu)于IB。

800G AI智能交換機通過硬件革新與AsterNOS軟件協(xié)同,為AI算力集群與超大規(guī)模數(shù)據(jù)中心提供“高吞吐、低時延、易運維”的一站式解決方案。其模塊化設(shè)計、企業(yè)級SONiC支持及RoCEv2性能優(yōu)勢,正加速AI基礎(chǔ)設(shè)施向開放解耦、智能高效的下一代架構(gòu)演進。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • InfiniBand
    +關(guān)注

    關(guān)注

    1

    文章

    31

    瀏覽量

    9527
  • 算力
    +關(guān)注

    關(guān)注

    2

    文章

    1380

    瀏覽量

    16552
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    小于1毫秒,工信部發(fā)布全光網(wǎng)絡(luò)重磅利好政策

    電子發(fā)燒友網(wǎng)報道(文/李彎彎)當下,人工智能(AI)技術(shù)飛速發(fā)展,成為驅(qū)動數(shù)字經(jīng)濟發(fā)展的核心要素。AI應用持續(xù)拓展,對底層網(wǎng)絡(luò)的傳輸
    的頭像 發(fā)表于 10-20 07:17 ?1w次閱讀
    時<b class='flag-5'>延</b>小于1毫秒,工信部發(fā)布全光<b class='flag-5'>算</b><b class='flag-5'>力</b>網(wǎng)絡(luò)重磅利好政策

    湘軍,讓變成生產(chǎn)

    腦極體
    發(fā)布于 :2025年11月25日 22:56:58

    在英偉達Thor平臺部署EtherCAT主站:實測高性能、抖動與占用

    在機器人與邊緣AI應用中,底層通信的實時性決定了系統(tǒng)的響應速度與控制精度。JetsonThor作為NVIDIA最新一代嵌入式平臺,具備強大的與實時推理能力,為EtherCAT網(wǎng)絡(luò)提
    的頭像 發(fā)表于 10-31 15:38 ?209次閱讀
    在英偉達Thor平臺部署EtherCAT主站:<b class='flag-5'>實測</b>高性能、<b class='flag-5'>低</b>抖動與<b class='flag-5'>低</b>占用

    在英偉達Thor平臺部署EtherCAT主站:實測高性能、抖動與占用

    在機器人與邊緣AI應用中,底層通信的實時性決定了系統(tǒng)的響應速度與控制精度。JetsonThor作為NVIDIA最新一代嵌入式平臺,具備強大的與實時推理能力,為EtherCAT網(wǎng)絡(luò)提
    的頭像 發(fā)表于 10-31 09:24 ?25次閱讀
    在英偉達Thor平臺部署EtherCAT主站:<b class='flag-5'>實測</b>高性能、<b class='flag-5'>低</b>抖動與<b class='flag-5'>低</b>占用

    在高性能 AI 平臺上部署 EtherCAT 主站:實測抖動、占用方案

    在機器人與邊緣AI應用中,底層通信的實時性決定了系統(tǒng)的響應速度與控制精度。JetsonThor作為NVIDIA最新一代嵌入式平臺,具備強大的與實時推理能力,為EtherCAT網(wǎng)絡(luò)提
    的頭像 發(fā)表于 10-30 15:35 ?699次閱讀
    在高性能 AI 平臺上部署 EtherCAT 主站:<b class='flag-5'>實測</b><b class='flag-5'>低</b>抖動、<b class='flag-5'>低</b>占用方案

    國產(chǎn)AI芯片真能扛住“內(nèi)卷”?海思昇騰的這波操作藏了多少細節(jié)?

    反而壓到了310W。更有意思的是它的異構(gòu)架構(gòu):NPU+CPU+DVPP的組合,居然能同時扛住訓練和推理場景,之前做自動駕駛算法時,用它跑模型時直接降了20%。 但疑惑也有:這種
    發(fā)表于 10-27 13:12

    光交換機:納秒速率、與高密度端口重構(gòu)AI網(wǎng)絡(luò)

    速率(光電交換機可達納秒級,光機械交換機達毫秒級)、架構(gòu)(時低于10微秒)、高能效(功耗較InfiniBand或以太網(wǎng)方案降低65
    的頭像 發(fā)表于 09-26 09:11 ?6803次閱讀

    與電力的終極博弈,填上了AIDC的“電力黑洞”

    ),專注于提供人工智能訓練與推理所需的服務(wù)、數(shù)據(jù)服務(wù)和算法服務(wù)。AIDC采用異構(gòu)計算架構(gòu),結(jié)合GPU、FPGA、ASIC等多種AI加速芯片,形成高并發(fā)分布式系統(tǒng),以滿足大模型訓練和推理
    的頭像 發(fā)表于 09-22 02:43 ?7313次閱讀

    科技上線赤兔推理引擎服務(wù),創(chuàng)新解鎖FP8大模型

    北京2025年7月30日 /美通社/ -- 近日,北京積科技有限公司(以下簡稱"積科技")宣布其服務(wù)平臺上線赤兔
    的頭像 發(fā)表于 07-30 21:44 ?711次閱讀

    RoCE網(wǎng)絡(luò)規(guī)劃還在手動IP?這套工具讓運維效率飆升

    隨著AI集群規(guī)模指數(shù)級增長,網(wǎng)絡(luò)架構(gòu)復雜度陡增。傳統(tǒng)網(wǎng)絡(luò)規(guī)劃依賴人工計算與經(jīng)驗判斷,存在效率、易出錯、可視化弱三大痛點。尤其在RoCE(RDMA over Converged E
    的頭像 發(fā)表于 06-30 14:33 ?1473次閱讀
    <b class='flag-5'>RoCE</b>網(wǎng)絡(luò)規(guī)劃還在手動<b class='flag-5'>算</b>IP?這套工具讓運維效率飆升

    RAKsmart智能架構(gòu):異構(gòu)計算+網(wǎng)絡(luò)驅(qū)動企業(yè)AI訓練范式升級

    在AI大模型參數(shù)量突破萬億、多模態(tài)應用爆發(fā)的今天,企業(yè)AI訓練正面臨效率與成本的雙重挑戰(zhàn)。RAKsmart推出的智能架構(gòu),以異構(gòu)計算資源池化與超低時
    的頭像 發(fā)表于 04-17 09:29 ?587次閱讀

    芯片的生態(tài)突圍與革命

    據(jù)的爆發(fā)式增長,大芯片已成為科技競爭的核心領(lǐng)域之一。 ? 大芯片的核心應用場景豐富多樣。在人工智能訓練與推理方面,大模型(如 GPT
    的頭像 發(fā)表于 04-13 00:02 ?2583次閱讀

    DeepSeek推動AI需求:800G光模塊的關(guān)鍵作用

    隨著人工智能技術(shù)的飛速發(fā)展,AI需求正以前所未有的速度增長。DeepSeek等大模型的訓練與推理任務(wù)對的需求持續(xù)攀升,直接推動了服務(wù)
    發(fā)表于 03-25 12:00

    信而泰CCL仿真:解鎖AI極限,智中心網(wǎng)絡(luò)性能躍升之道

    中心RoCE網(wǎng)絡(luò)提供精準評估方案,助力企業(yè)突破瓶頸,釋放AI澎湃動力! 什么是智中心 智中心(AIDC,Artificial Int
    的頭像 發(fā)表于 02-24 17:34 ?970次閱讀
    信而泰CCL仿真:解鎖AI<b class='flag-5'>算</b><b class='flag-5'>力</b>極限,智<b class='flag-5'>算</b>中心網(wǎng)絡(luò)性能躍升之道