Facebook宣布正在打造架頂100Gbit/s的以太網(wǎng)交換機(jī)，以用于其下一代數(shù)據(jù)中心上。很多大互聯(lián)網(wǎng)公司都在設(shè)計(jì)自己的系統(tǒng)，務(wù)必緊隨先進(jìn)的計(jì)算和半導(dǎo)體技術(shù)的步伐。
Facebook的Wedge 100是一個32×100G交換機(jī)，據(jù)傳用的是Broadcom最新Tomahawk交換芯片，最大總吞吐量達(dá)3.2 Tbit/s。和以往一樣，F(xiàn)acebook會開源自己的硬件設(shè)計(jì)，以供他人制造和使用。預(yù)計(jì)Wedge 100將運(yùn)行一個名為FBOSS的開源Linux軟件，F(xiàn)acebook目前在40G交換機(jī)上用的就是FBOSS。
今年8月，F(xiàn)acebook光學(xué)專家描述過一個利用100G單模光纖調(diào)制解調(diào)器將100G成本降到1美元/Gbyte的設(shè)計(jì)。該設(shè)計(jì)將距離要求從2公里放寬到了500米，同時也放寬了工作溫度和產(chǎn)品壽命規(guī)格。它是基于QSFP28可插拔外形，用了4個25Gbit/s的線路。
Facebook沒有提供Wedge 100部署時間的細(xì)節(jié)，也沒有給出如何處理來自100G TOR交換機(jī)匯總數(shù)據(jù)的細(xì)節(jié)。
不到18個月前，網(wǎng)絡(luò)巨頭Facebook曾公布過旗下正在設(shè)計(jì)40Gbit/s的TOR以太網(wǎng)交換機(jī)，此為Wedge第一代。此項(xiàng)工作是在2013年底與交換芯片制造商會面后開始的。
Facebook將上述設(shè)計(jì)重新定向?yàn)樗^的“6-pack”的匯聚交換機(jī)。該系統(tǒng)是Facebook一年前宣布新數(shù)據(jù)中心架構(gòu)的重要組成部分。
今年三月，F(xiàn)acebook展示了自己的基于Broadcom Trident II 芯片的16×40G Wedge，然后又將其設(shè)計(jì)成線路卡和一個雙插槽卡，用于創(chuàng)建128×40GE 6-pack匯聚交換機(jī)，基于可以升級到100G接口版的10G的通道，通道可升級到25G。
當(dāng)時，F(xiàn)acebook的工程師表示正在弄32×100GE交換機(jī)，并有計(jì)劃用到100G和400G光鏈路。
一名Facebook工程師在電子郵件表示，“我們現(xiàn)在在生產(chǎn)線上使用成千上萬的Wedge 40 TOR交換機(jī)，我們預(yù)計(jì)將繼續(xù)在相當(dāng)長一段時間內(nèi)使用它。”
他表示，“我們?nèi)蕴幱谑褂肳edge100初期階段，等一切就緒后就可以用到我們的下一代數(shù)據(jù)中心上。我們的最終目標(biāo)是在我們所有的數(shù)據(jù)中心的架頂上使用Wedge。”
與來自Arista 和 Dell的同款100G芯片比，F(xiàn)acebook設(shè)計(jì)針對自己的數(shù)據(jù)中心系統(tǒng)做的優(yōu)化想必更嚴(yán)謹(jǐn)些，價格想必更便宜些。和其他網(wǎng)絡(luò)巨頭一樣，F(xiàn)acebook設(shè)計(jì)自己的龐大計(jì)算機(jī)網(wǎng)絡(luò)系統(tǒng)，其規(guī)模之大可以想象。
大型數(shù)據(jù)中心的容量已 接近計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)的極限。各種基于50G結(jié)構(gòu)的400G交換機(jī)仍在實(shí)驗(yàn)室里，800G以太網(wǎng)標(biāo)準(zhǔn)也是最近才定稿。
The Linley Group高級分析師Bob Wheeler表示，“那種用16x25Gbit/s技術(shù)的400G以太網(wǎng)提供的價值不大，而50Gbit/s技術(shù)是關(guān)鍵”，對下一代系統(tǒng)來說是這樣。他表示，“有些供應(yīng)商目前正在制56Gbit/s PAM4PHY樣品。光模塊可望在2017年投產(chǎn)。”
Facebook在一篇博客文章公布了Wedge 100的進(jìn)展。博文還提供了目前40G交換機(jī)的可用性程度的一些細(xì)節(jié)以及其在使用時遇到的挑戰(zhàn)。
博文指，“常常見到的交換機(jī)失效模式是，CPU出現(xiàn)過載后滯后于控制平面的職責(zé)，比如發(fā)送路由協(xié)議報(bào)文或?qū)SIC編程這一類的職責(zé)，這時通信就會出現(xiàn)中斷。”
博文稱，“在我們的早期測試過程中，我們遇到一些情況，凸顯出保護(hù)CPU和控制平面是非常重要的。我們現(xiàn)在的配置對從交換機(jī)ASIC發(fā)往CPU的流量設(shè)了硬性限制。此外，我們將控制平面流量的優(yōu)先級別設(shè)得比交換機(jī)高，以盡量保證組件的控制平面處于運(yùn)行狀態(tài)。“
