
·???? 應惠州同城網(wǎng)盟的邀請,TG-NET為惠州金龍泉網(wǎng)吧進行了國內(nèi)首家萬兆核心改造。為了全方位展現(xiàn)此次萬兆方案施工的過程細節(jié),以及實際效果,TG-NET與惠州同城網(wǎng)盟經(jīng)測試后,共同撰寫了此份報告,供國內(nèi)的網(wǎng)吧行業(yè)的從業(yè)人士參考。
1.網(wǎng)吧情況介紹
名稱:惠州市惠城區(qū)金龍泉網(wǎng)吧
地址:惠州市惠城區(qū)麥地花邊南路
網(wǎng)吧老板:何老板
![]() |
服務器配置 | |||
序號 |
類別 |
品牌 |
型號 |
01 |
CPU |
至強 |
E5506 |
02 |
主板 |
超微 |
X8DTL-3 |
03 |
內(nèi)存 |
金士頓 |
KST 4G ECC DDR3 *3 |
04 |
SAS卡 |
Pake |
1068E |
05 |
SAS線 |
|
8條 1對1 SAS 線 |
06 |
硬盤 |
希捷 |
SAS 146G *4 SAS 300G *2 SAS73G*1 |
07 |
硬盤 |
西數(shù) |
STAT WD500G * 2 |
08 |
機箱 |
海存 |
4U機箱 |
09 |
電源 |
航嘉 |
600W |
10 |
網(wǎng)卡 |
Intel |
Dual Intel 82574L Gigabit Ethernet Controller |
11 |
系統(tǒng) |
網(wǎng)眾 |
7.0 Linux 5.0 820內(nèi)核 |
o? 客戶機配置:客戶機230臺,配置如下:
客戶機配置 | |||
序號 |
類別 |
品牌 |
型 號 |
01 |
CPU |
Intel |
酷睿 I5 |
02 |
主板 |
昂達 |
魔劍H55 |
03 |
顯卡 |
昂達 |
GTS 450 1024MB GD5 |
04 |
內(nèi)存 |
金士頓 |
4G |
05 |
網(wǎng)卡 |
Realtek |
RTL8111DL千兆網(wǎng)卡 |
改造前網(wǎng)絡拓撲結構:
![]() |
介紹:主交換機采用2臺全千兆16光+8電的交換機級聯(lián),接入層采用11臺24電+2光支持匯聚功能的交換機,核心交換機到接入交換機采用雙光纖匯聚連接。二臺服務器分別通過雙千兆網(wǎng)卡綁定連接到二臺主交換機上面。其它服務器與路由器分別接到主交換機上面。
2.萬兆方案改造過程
2.1.為了不影響網(wǎng)吧正常營業(yè),在前一天網(wǎng)吧包夜時,就通知網(wǎng)管把人員分流到其中一臺服務器上面,把另外一臺服務器關掉。
2.2.第二天一早趕到網(wǎng)吧,在萬兆改造之前,首先對現(xiàn)有的千兆網(wǎng)絡進行了相關數(shù)據(jù)的測試,具體見后面的對比報告。
2.3.測試完千兆數(shù)據(jù)后,將關閉的這臺服務器打開機箱,裝上萬兆網(wǎng)卡,由于網(wǎng)吧無盤服務器系統(tǒng)是網(wǎng)眾的7.0,是Linux 5.0.820的內(nèi)核,所以不需要安裝驅(qū)動,裝好網(wǎng)卡,啟動服務器,系統(tǒng)除了顯示自帶的二張千兆網(wǎng)卡外,新增的萬兆網(wǎng)卡也自動驅(qū)動成功,緊接著配置萬兆網(wǎng)卡的IP地址。配置完成后,連通萬兆交換機進行簡單測試,竟然發(fā)現(xiàn)連不通?檢測萬兆交換機以及萬兆光纖模塊、光纖線等,都沒有發(fā)現(xiàn)任何問題,最后猜測會不會是系統(tǒng)默認板載的千兆的網(wǎng)卡為主網(wǎng)卡,如主網(wǎng)卡不通,另外幾張網(wǎng)卡也無法使用(因為當時板載的網(wǎng)卡網(wǎng)線沒連接)。就嘗試把板載的二張千兆網(wǎng)卡禁用,重啟服務器,果然一切正常。(如果以后有出現(xiàn)類似萬兆網(wǎng)卡不通的情況,可采取上述方式,禁用板載的網(wǎng)卡,估計WINDOWS版無盤系統(tǒng)不會有此問題。其它無盤系統(tǒng)安裝此網(wǎng)卡,請參照TG-NET萬兆網(wǎng)卡安裝教程)
2.4.根據(jù)網(wǎng)吧現(xiàn)有的主干交換機與接入交換機的匯聚接口配置情況,將S5500-28F-4TF前面的24個千兆光口配好匯聚組。因為網(wǎng)吧只有二臺服務器,所以交換機上面擴展了一塊二端口的萬兆業(yè)務板S5500-2SFP+。將二端口萬兆擴展卡接在核心交換機后面,插上萬兆光纖模塊。S5500-28F-4TF有24個光口和4個復用千兆電口,所以11臺分交換機全部可以直接雙光纖匯聚到核心萬兆交換機上面,使用了核心交換機上面的22個光口。然后再用其中余下的2個復用電口匯聚一臺支持匯聚的24電口的交換機,把路由器,收銀,監(jiān)控等等對數(shù)據(jù)量要求不大的服務器和相關設備連在這臺交換機上面,這樣,交換機的端口利用率正好使用到100%,一點都不浪費。
![]() |
萬兆交換機前面照片:有24個千兆光口,4個復用電口。
![]() |
萬兆交換機后面照片,有一個擴展位,因為2臺服務器,就插了一張二端口的萬兆卡,接上萬兆模塊,接上光纖跳線,OM3的光纖跳線一般都是這種淡藍色的。
2.5.等早上包夜結束后,讓網(wǎng)管暫停網(wǎng)絡,把原來的二臺千兆主交換機拿下,換上剛才配置好的萬兆核心交換機,一邊把下面分交換機的光纖線對應匯聚插到核心交換機上面,并同時把原來的路由器、收銀機等其它線接到一臺24電口的交換機上面。一邊同步安排同事把另外一臺服務器的萬兆網(wǎng)卡安裝好。最后,把二臺服務器的萬兆網(wǎng)卡與核心交換機的二個萬兆接口通過萬兆光纖跳線連接好。重新啟動服務器與交換機網(wǎng)絡,網(wǎng)絡停了不到半個小時,網(wǎng)絡恢復正常運行,改造全部完成。
2.6.然后按前面測試千兆環(huán)境下數(shù)據(jù)的方式,把萬兆核心環(huán)境下的相關數(shù)據(jù)又同樣進行了測試,數(shù)據(jù)在后面。
2.7.改造后網(wǎng)吧拓撲如下:
![]() |
該網(wǎng)吧萬兆改造設備的清單如下:
類別 |
型號 |
基本規(guī)格描述 |
數(shù)量 |
萬兆多層核心交換機 |
S5500-28F-4TF |
24個千兆SFP端口,4個10/100/1000M復用電口 |
1臺 |
萬兆擴展板 |
S5500-2SFP+ |
2端口萬兆SFP+模塊擴展板,需配SFP+模塊 |
1塊 |
萬兆雙端口以太網(wǎng)網(wǎng)卡 |
PCIE-10GE-2SFP |
處理器芯片:英特爾 82599ES*1 |
2塊 |
萬兆光纖模塊 |
SFP-10GE-SX-MM850 |
萬兆SFP+多模模塊-(850nm,0.3km,LC) |
4個 |
OM3光纖跳線 |
萬兆OM3,長度3米,LC-LC,多模雙芯 |
2根 |
3.萬兆與千兆對比測試數(shù)據(jù)
為了不影響網(wǎng)吧營業(yè),我們千兆核心與萬兆核心測試的數(shù)據(jù)都是一臺服務器下面帶100臺客戶機測試的。備注:為了保證測試數(shù)據(jù)的準確性,測試過程是關閉所有服務器跟客戶機緩存。
o? 100臺電腦同時啟動的時間:
機數(shù) |
千兆核心啟動時間(S) |
機數(shù) |
萬兆核心啟動時間(S) |
100臺 |
部份啟動時間130秒,部份卡死 |
100臺 |
23秒完成全部啟動 |
千兆環(huán)境100臺PC同時開機時,服務器網(wǎng)卡最高的流量:
![]() |
萬兆環(huán)境100臺PC同時開機時,服務器網(wǎng)卡最高的流量:
![]() |
用HD Speed 測試 12臺客戶機到服務器的讀取速度.
機數(shù) |
千兆核心平均(M/S) |
機數(shù) |
萬兆核心平均(M/S) |
1臺 |
85 |
1臺 |
100 |
5臺 |
23 |
5臺 |
100 |
12臺 |
10 |
12臺 |
51 |
備注:測試時按分交換機平均選取PC。
千兆環(huán)境12臺PC同時HD Speed測試服務器網(wǎng)卡流量監(jiān)控圖:
![]() |
萬兆環(huán)境12臺PC同時HD Speed測試服務器網(wǎng)卡流量監(jiān)控圖:
![]() |
4.數(shù)據(jù)分析及總結:
o? 萬兆核心在處理突發(fā)數(shù)據(jù)時遠遠高于千兆核心;
o? 萬兆核心在處理大流量數(shù)據(jù)時遠遠高于千兆核心,千兆核心的處理速度滿載也就100M/S 左右,而萬兆核心的數(shù)據(jù)流量能高達648M/S ,充分的把硬盤的速度發(fā)揮了出來;
現(xiàn)今很多網(wǎng)吧在測試時,都是在空載或者通過單機測的理論值,這對于網(wǎng)吧實際運營來講,并沒有太多的意義。真正考驗一個網(wǎng)吧的網(wǎng)絡環(huán)境的好壞,是在網(wǎng)吧上機人員爆滿的時候才能體現(xiàn)出來。所以,對于網(wǎng)吧而言,如何保證在人多數(shù)據(jù)量大的時候,各種新的應用不斷增加之后,網(wǎng)絡不卡,運行穩(wěn)定,這才是王道,才能留住客源,提高網(wǎng)吧競爭力。