突襲，其實(shí)并不恰當(dāng)！

因?yàn)樽止?jié)跳動(dòng)自研交換機(jī)，早在2019年，就開(kāi)始悄悄布局了。

只是這一次，隨著51.2T高性能數(shù)據(jù)中心交換機(jī)的閃亮登場(chǎng)，字節(jié)跳動(dòng)也低調(diào)宣布，實(shí)現(xiàn)了“在2023年全面上線自研交換機(jī)的目標(biāo)”。

廢話不說(shuō)，看看這款命名為B5020的51.2T交換機(jī)的細(xì)節(jié)吧。

按字節(jié)的說(shuō)法，這可是全球首款51.2T全端口支持LPO的交換機(jī)，也是全球率先實(shí)現(xiàn)800G實(shí)際規(guī)?；渴鸬漠a(chǎn)品。劃重點(diǎn)

上面視頻來(lái)源于字節(jié)跳動(dòng)系統(tǒng)技術(shù)公眾號(hào)（字節(jié)跳動(dòng)SYS Tech），我在二次剪輯的時(shí)候，把一些關(guān)鍵信息摘出來(lái)Highlight了一下。

先看一下交換機(jī)的外觀和內(nèi)部結(jié)構(gòu)，標(biāo)準(zhǔn)機(jī)架式，4U高度，64×800GbE端口。 整機(jī)交換容量51.2Tbs（其實(shí)按業(yè)界全雙工的算法應(yīng)該是102.4Tbps），這個(gè)容量也是當(dāng)下業(yè)界單芯片盒式交換機(jī)的極限。

有人說(shuō)，前面板看著挺空的，似乎2U就能擺下這些端口，為啥不把機(jī)箱做得更緊湊些（比如3U甚至2U），豈不是更能節(jié)省機(jī)房空間。

其實(shí)，字節(jié)在設(shè)計(jì)這款交換機(jī)的時(shí)候，散熱、電源功率、機(jī)箱結(jié)構(gòu)等等，都是做了向后兼容下一102.4T產(chǎn)品的考慮，且從功率密度角度，2U省空間是偽命題。

未來(lái)，單芯片102.4T時(shí)代，這個(gè)4U結(jié)構(gòu)正好可以擺下128個(gè)800G端口（當(dāng)然也可以是64×1.6T，這端口速度，看著就嚇人啊，剛?cè)胄械臅r(shí)候，1G我都覺(jué)得很少見(jiàn)，誰(shuí)能想20年后，馬上要1600G了）。

在板卡設(shè)計(jì)上，字節(jié)也做了很多微創(chuàng)新，比如整機(jī)一張MAC-PCB板，整機(jī)內(nèi)部?jī)H用三條連接線纜。

這些極簡(jiǎn)設(shè)計(jì)可以讓整機(jī)生產(chǎn)功率大幅減少。有助于提高生產(chǎn)直通率，減少故障點(diǎn)。

以前大家學(xué)產(chǎn)品規(guī)劃/管理的時(shí)候，都有一條叫做DFM（Design For Manufacturing）。在這里，字節(jié)就運(yùn)用得很好。

再比如，在僅用28層PCB方案的情況下，完成高密度布線設(shè)計(jì)，而且成功將全端口最大損耗控制在7d以下。

較少層數(shù)的PCB，降低了生產(chǎn)難度，也能更好地控制硬件成本。

在端口扇出（Fan out）設(shè)計(jì)上，字節(jié)團(tuán)隊(duì)摒棄了傳統(tǒng)扇出方案（傳統(tǒng)扇出方案在大芯片時(shí)代，遠(yuǎn)端端口難以維持信號(hào)完整性），首創(chuàng)了大芯片布線空間復(fù)用方案。

PCB相關(guān)的設(shè)計(jì)論文，入選了全球芯片設(shè)計(jì)領(lǐng)域的頂級(jí)會(huì)議DesignCon2024，并申請(qǐng)了兩項(xiàng)發(fā)明專(zhuān)利。

上面入選的論文一共三篇，其中兩篇是PCB設(shè)計(jì)相關(guān)，還有一篇涉及800G LPO技術(shù)，因?yàn)檫@款交換機(jī)還在業(yè)內(nèi)首度采用了800G LPO。

跟傳統(tǒng)光模塊相比，LPO光模塊功耗低、延遲低，當(dāng)然成本也更低。

另外，為了簡(jiǎn)化運(yùn)維，這款交換機(jī)的管理引擎采用了插卡式模塊化設(shè)計(jì)，替換方便。

同時(shí)管理引擎上的BMC、SSD、DDR內(nèi)存等，全部都是扣卡設(shè)計(jì)，大大降低了運(yùn)維難度。

有同學(xué)評(píng)價(jià)：管理引擎光模塊化還不夠，不支持熱插拔，也不是雙冗余。

其實(shí)這是對(duì)業(yè)務(wù)場(chǎng)景和交換機(jī)定位的誤解。

這款B5020并不是模塊化機(jī)箱交換機(jī)，而是一款“盒式”機(jī)架交換機(jī)，應(yīng)用場(chǎng)景是互聯(lián)網(wǎng)數(shù)據(jù)中心/智算中心的Leaf或者Spine。

在這樣的場(chǎng)景下，一般采用胖樹(shù)架構(gòu)，而不是咱們常規(guī)園區(qū)或者企業(yè)網(wǎng)絡(luò)中，雙核心+匯聚+接入。

比如，互聯(lián)網(wǎng)大廠數(shù)據(jù)中心一個(gè)典型的胖樹(shù)網(wǎng)絡(luò)是這樣的，B5020充當(dāng)?shù)慕巧?，就是一臺(tái)高速率、高密度同時(shí)高性?xún)r(jià)比、易運(yùn)維的Spine或者Leaf。



在交換機(jī)軟件上，字節(jié)基于開(kāi)源的SONiC，自研了Lambda OS。

不得不說(shuō)，這幾年SONiC的成熟度越來(lái)越高，生態(tài)也越來(lái)越好，很多互聯(lián)網(wǎng)大廠都開(kāi)始基于SONiC來(lái)開(kāi)發(fā)自家的交換機(jī)軟件。

關(guān)于字節(jié)的這款交換機(jī)，我們就扒到這里。

根據(jù)字節(jié)跳動(dòng)的說(shuō)法，他們已經(jīng)實(shí)現(xiàn)了在2023 年全面上線自研交換機(jī)的目標(biāo)。

目前大規(guī)模交付的 100G/400G 網(wǎng)絡(luò)，全由自研交換機(jī)覆蓋，硬件采用 JDM + CM 模式研發(fā)，軟件則是自研的 Lambda OS。

說(shuō)到這里，我們有必要談?wù)動(dòng)布难邪l(fā)模式：JDM+CM。

以交換機(jī)為例，業(yè)界的產(chǎn)品研發(fā)模式包括：

最初級(jí)的叫OEM模式，也就是大家常說(shuō)的貼牌。交換機(jī)軟硬件整機(jī)全是原廠提供，品牌商只需要貼標(biāo)，修改下軟件界面，就變成自家的品牌。

第二級(jí)叫做ODM模式，品牌商有自己的idea，提出自己的定制化需求，然后由ODM商完成設(shè)計(jì)和生產(chǎn)。對(duì)交換機(jī)來(lái)說(shuō)，一般品牌廠家具備軟件研發(fā)能力，只需要ODM定制化硬件。尤其白盒時(shí)代，這種流行度很高。

第三級(jí)叫做JDM模式，Joint Design Manufacture，聯(lián)合設(shè)計(jì)制造，是客戶(hù)企業(yè)（比如字節(jié)）和交換機(jī)制造商（比如數(shù)通大廠）共同參與設(shè)計(jì)和開(kāi)發(fā)，企業(yè)方需要深度參與整個(gè)過(guò)程。

再往上，更純粹的CM模式，Contract Manufacture，合同制造，也就是客戶(hù)企業(yè)完全自行設(shè)計(jì)，然后委托給制造商生產(chǎn)。

回頭看，字節(jié)交換機(jī)采用的模式就是“JDM+CM”，即聯(lián)合設(shè)計(jì)制造+委托生產(chǎn)，這可不是貼牌，人家說(shuō)自研，完全沒(méi)毛病。

最后一個(gè)問(wèn)題，有吃瓜群眾評(píng)論，為啥字節(jié)“不務(wù)正業(yè)”非要搞交換機(jī)呢？難道字節(jié)是看重交換機(jī)那點(diǎn)可憐巴巴的市場(chǎng)嗎？

非也，其實(shí)互聯(lián)網(wǎng)大廠自研基礎(chǔ)設(shè)施，是大勢(shì)所趨，也是真實(shí)剛需。從國(guó)外的谷歌、Facebook到國(guó)內(nèi)BAT，都有自研的經(jīng)歷。

從服務(wù)器到存儲(chǔ)到交換機(jī)，甚至到AI芯片、DPU、主芯片，互聯(lián)網(wǎng)巨頭們一直在努力。 一方面是他們用量太大，通過(guò)自研是真的可以有效降低成本。另一方面，大廠們會(huì)根據(jù)自己的業(yè)務(wù)場(chǎng)景需求，來(lái)定制軟件和硬件，讓這些設(shè)備更純粹的扛活。

所以，更低的成本、更方便運(yùn)維、極簡(jiǎn)且定制的功能，這些是大廠們看重的，其實(shí)前面視頻里，字節(jié)也多次強(qiáng)調(diào)了成本的節(jié)省、功耗的節(jié)省、運(yùn)維的簡(jiǎn)化。

這不是交換機(jī)廠商的宣傳標(biāo)簽，這是人家真實(shí)的需求啊。

還有一點(diǎn)新變化，在我們常規(guī)的組網(wǎng)工程里，交換機(jī)的數(shù)量要遠(yuǎn)遠(yuǎn)少于主機(jī)/服務(wù)器。

但是在現(xiàn)代數(shù)據(jù)中心/智算中心里，尤其是大模型時(shí)代GPU服務(wù)器場(chǎng)景，一臺(tái)8卡服務(wù)器，就要占用8個(gè)400G/800G交換機(jī)端口，再加上冗余拓?fù)湟?，交換機(jī)的需求數(shù)量大大提升了。



（圖源：鵝廠網(wǎng)事）

所以，你看到，國(guó)內(nèi)大廠都在自研交換機(jī)，阿里云推出了磐久交換機(jī)，從100G到400G全有。

（阿里自研交換機(jī)）

鵝廠則搞出了星脈網(wǎng)絡(luò)，而且，鵝廠不僅有交換機(jī)，還有自研的光傳輸呢。

這塊市場(chǎng)有多大呢，從IDC的交換機(jī)市場(chǎng)跟蹤數(shù)據(jù)上，我們可以大概揣摩出來(lái)。

下圖橙色的部分，每次排名里那個(gè)神秘的“ODM Direct”，主要就是這類(lèi)互聯(lián)網(wǎng)大廠們干的。

所以，字節(jié)做交換機(jī)，并非「突襲」，更非玩票，而是謀定后動(dòng)，順勢(shì)而為。

審核編輯：劉清