網(wǎng)絡(luò)丟包現(xiàn)象分析處理指導(dǎo)書(shū)

1、“網(wǎng)絡(luò)丟包現(xiàn)象是常見(jiàn)的網(wǎng)絡(luò)故障，但弓I起丟包的原因卻多種多樣、 千奇百怪。因此對(duì)于此類故障的解決，要求處理人員洞悉網(wǎng)絡(luò)基礎(chǔ)理 論、了解不同廠家產(chǎn)品特性，有耐心、深入地進(jìn)行分析定位?！币灰?一網(wǎng)絡(luò)丟包現(xiàn)象分析處理指導(dǎo)書(shū)摘錄從今天開(kāi)始，本A(ipdata)將陸續(xù)發(fā)布系列網(wǎng)絡(luò)丟包問(wèn)題分析處理 的技術(shù)文章。該系列文章來(lái)源于網(wǎng)絡(luò)丟包現(xiàn)象分析處理指導(dǎo)書(shū)， 主要分成三大部分：第一部分：講解從產(chǎn)生網(wǎng)絡(luò)丟包問(wèn)題的原因來(lái)看，網(wǎng)絡(luò)丟包問(wèn)題大致 可以分為六大類因素，1、網(wǎng)絡(luò)設(shè)備軟、硬件問(wèn)題；2、線路傳輸質(zhì) 量差引起丟包；3、網(wǎng)絡(luò)設(shè)備配置不合理導(dǎo)致丟包；4、網(wǎng)絡(luò)設(shè)計(jì)不 合理導(dǎo)致丟包；5、人為攻擊、廣播泛濫造成的丟包；6

2、、網(wǎng)絡(luò)環(huán)境 造成的丟包。對(duì)于每類丟包原因配置以大量的案例進(jìn)行詳細(xì)的說(shuō)明。第二部分：主要有三方面的內(nèi)容，一是深入剖析網(wǎng)絡(luò)丟包現(xiàn)象并加以 總結(jié)；二是網(wǎng)絡(luò)丟包的一般處理步驟;最后就是講解網(wǎng)絡(luò)故障處理中 相關(guān)工具使用的注意事項(xiàng)。第三部分：四個(gè)故障案例處理過(guò)程分析。應(yīng)該說(shuō)是對(duì)前面兩部分內(nèi)容 的一個(gè)綜合應(yīng)用。網(wǎng)絡(luò)丟包問(wèn)題往往是沒(méi)有規(guī)律的故障，對(duì)于沒(méi)有固定規(guī)律的故障，咱 們技術(shù)工程師往往有吃力不討好的痛苦!如本手稿中環(huán)境因素導(dǎo)致丟 包案例中的電源浪涌，時(shí)值北方的冬季，加之故障這個(gè)魔鬼出現(xiàn)的時(shí) 間是晚上7:00-9:00這個(gè)時(shí)段，現(xiàn)場(chǎng)工程師在用戶單元樓道可以用 饑寒交迫來(lái)形容！網(wǎng)絡(luò)丟包現(xiàn)象分類：網(wǎng)絡(luò)設(shè)備軟、硬

3、件問(wèn)題導(dǎo)致丟包首先對(duì)出現(xiàn)過(guò)丟包的案例進(jìn)行描述并給出解決辦法，同時(shí)對(duì)丟包問(wèn)題 進(jìn)行分類，主要加強(qiáng)大家對(duì)丟包現(xiàn)象的感性認(rèn)識(shí)。在后續(xù)的章節(jié)中再 做深入的剖析，并提供問(wèn)題的解決思路。1、uHammer24百兆光口/電口模塊問(wèn)題問(wèn)題描述：uHammer24芯片為C版且PCB為2.33版的設(shè)備百 兆端口模塊第25 口，在高溫及常溫下會(huì)出現(xiàn)嚴(yán)重丟包，高溫條件下 尤為明顯。C 版(PCB v2.33)uHammer24 port 25丟包示意圖問(wèn)題解釋：uHammer24的硬件分B版和C版，C版uHammer24 的百兆端口模塊25 口的接口電路（千兆端口不受影響）在高溫條件 下（50C以上）不穩(wěn)定，造成丟包

4、；B版在高溫條件下（達(dá)到60C） 仍不會(huì)出現(xiàn)丟包。問(wèn)題解決：正確識(shí)別B版和C版設(shè)備。C版設(shè)備盡量使用在不用百 兆端口模塊的環(huán)境，如果一定要使用百兆模塊的話，則建議更換B 版設(shè)備或采用PCB為2.44/2.55的設(shè)備。備注：此類丟包由于硬件芯片（產(chǎn)品序列號(hào)的第九到第十二位為 “A233”）離散性較大引起，產(chǎn)品的PCB已做修改，新生產(chǎn)的設(shè)備， 同樣為C版，如果產(chǎn)品序列號(hào)的第九到第十二位為入244或“入255 則不存在此bug。重要提示：如果出現(xiàn)某個(gè)端口丟包，建議更換端口做測(cè)試，查看丟包 現(xiàn)象是否是個(gè)別端口問(wèn)題。問(wèn)題描述：部分uHammer1008v (或者VDSL modem)由于晶振品質(zhì)問(wèn)題，導(dǎo)

5、致與uHammer3100互連，距離較長(zhǎng)時(shí)，出現(xiàn)嚴(yán)重 丟包或同步不上。問(wèn)題解釋：晶振品質(zhì)不好，產(chǎn)生的脈沖信號(hào)在長(zhǎng)距離傳輸時(shí)崎變較大， 使得接收端無(wú)法識(shí)別。問(wèn)題解決：uHammer1008v(VDSL modem)更換品質(zhì)較好的晶 振。備注：此類丟包也屬于暫時(shí)性問(wèn)題，更換硬件器件后將不再?gòu)?fù)現(xiàn)。網(wǎng)絡(luò)的拓?fù)淙缦翯vrJ ID. lT7.2tt&.124UMGvrJ ID. lT7.2tt&.124UMQirj2IDLl77.1Aa.1tflflTr*L L l-申匕I/ hs“ huinghrt P-22 ki44ihviCFTX JFriS蛙#侶小MM FlbufkrrtiFtrt 2*121Lm

6、.2VVrJJCrt 2*121Lm.2VVrJJC2核心交換機(jī)，F(xiàn)lex16i匯聚了RiverSto ne3000 ( L3)核心交換機(jī)，F(xiàn)lex16i匯聚了1S41272I. 177.29L L63?Z720幾臺(tái)接入層交換機(jī)u2, Flex16i只作為二層透?jìng)?，所有用戶的網(wǎng)關(guān)均指向Rs3000。網(wǎng)絡(luò)穩(wěn)定運(yùn)行了3天后，F(xiàn)lex16i的下連用戶出 現(xiàn) 5%丟包。Test pc ping 210.177.208.163或 164 均出現(xiàn) 5% 左右的丟包。Rs3000上ping server出現(xiàn)5%的報(bào)文出現(xiàn)延時(shí)時(shí) 間達(dá)到1秒?？梢耘袛?，客戶端丟包是由于icmp報(bào)文超時(shí)的緣故。問(wèn)題解釋：為了更準(zhǔn)

7、確地定位問(wèn)題，做了如下測(cè)試環(huán)境。用 Test pc ping pc2 同樣出現(xiàn) 5% 的丟包率Rs3000 ping test u2 5%報(bào)文的延時(shí)在1秒左右。在測(cè)試過(guò)程中，測(cè)試過(guò)Flex16i同一設(shè) 備（510芯片）和不同設(shè)備（510芯片）下的二層用戶互ping,同 樣出現(xiàn)5%丟包。顯然可以排除光纖、u2等其他設(shè)備引起該問(wèn)題。實(shí)際環(huán)境和測(cè)試環(huán)境中RS3000直接pingFLex16i的IP地址均沒(méi)有出現(xiàn)報(bào)文延時(shí)時(shí)間長(zhǎng)的現(xiàn)象。但ping Flex16i下連的u2則出現(xiàn) 5%左右的報(bào)文延時(shí)長(zhǎng)。因此，可以判斷問(wèn)題出現(xiàn)在Flex16i的二層 轉(zhuǎn)發(fā)上。問(wèn)題解決：將Flex16i reboot,故障依然

8、；將Flex16i關(guān)電重啟，故障消失，網(wǎng)絡(luò)恢復(fù)正常！熱啟動(dòng)和冷啟動(dòng)對(duì)于Flex16i來(lái)說(shuō)，其硬 件的初始化過(guò)程不一樣，冷啟動(dòng)對(duì)硬件的初始化處理比較徹底，是否 硬件還存在深層的Bug，需要研發(fā)人員做進(jìn)一步的定位。備注：雖然該故障定位在Flex16i上，但是是什么原因引起Flex16i 的二層轉(zhuǎn)發(fā)異常，并未能給出一個(gè)圓滿的答案，不能不說(shuō)是個(gè)遺憾。 不過(guò)，這里要強(qiáng)調(diào)的是故障的定位處理，事實(shí)上這樣的工作已經(jīng)有利 于研發(fā)對(duì)產(chǎn)品的改進(jìn)工作了。問(wèn)題描述：uHammer24軟件版本為vl.323以下的版本的部分設(shè) 備存在著14、18、22端口嚴(yán)重丟包，下連用戶上網(wǎng)速度慢。在 vl.323版本出現(xiàn)個(gè)別端口丟包的

9、現(xiàn)象已很少見(jiàn)（到目前為止市場(chǎng)上 反饋過(guò)2例v1.323port14有丟包現(xiàn)象），升級(jí)為v1.4版本可以 徹底解決。問(wèn)題解釋：某些u24的phy芯片對(duì)時(shí)鐘很敏感，如果交換機(jī)主板硬 件出現(xiàn)頻差，則phy芯片工作就不正常。目前v1.323版本中通過(guò) 定期寫(xiě)寄存器去修正頻差產(chǎn)生的影響。但是V1.323中輪循的時(shí)間過(guò) 長(zhǎng)，phy芯片的寄存器沒(méi)有及時(shí)得到更新，所以會(huì)產(chǎn)生很明顯的link down現(xiàn)象。在v1.4版本中，縮短了輪詢時(shí)間，到目前為止未發(fā)現(xiàn) 個(gè)別端口丟包現(xiàn)象。問(wèn)題解決：升級(jí)到v1.4版本可徹底解決此問(wèn)題。備注：對(duì)于新上設(shè)備，要求最低可用版本V1.323。問(wèn)題描述：Flex5010 v1.0網(wǎng)段表

10、設(shè)置算法缺乏考慮路由最長(zhǎng)匹配 原則，當(dāng)路由條目存在多個(gè)匹配信息時(shí)，容易出現(xiàn)數(shù)據(jù)包循環(huán)轉(zhuǎn)發(fā)， 表現(xiàn)為用戶上網(wǎng)速度慢、丟包甚至網(wǎng)絡(luò)不通。拓?fù)浣Y(jié)構(gòu)見(jiàn)下圖：（為 了說(shuō)明問(wèn)題，網(wǎng)絡(luò)拓?fù)湟炎龊?jiǎn)偈上圖為一大型行政機(jī)關(guān)的網(wǎng)絡(luò)拓?fù)鋱D，該單位網(wǎng)絡(luò)為專網(wǎng)，與Internet沒(méi)有互連，采用10.0.0.0/8的地址段。其中Flex5010 以千兆光口與Big800互連，Big800端分配到10.94.0.0/16的網(wǎng) 段，F(xiàn)lex5010端分配到10.95.0.0/16的網(wǎng)段。Flex5010軟件路由表存在的條目如下:10.94.101.4/30 直連10.95.1.0/24 直連10.95.2.0/24 下一跳 1

11、0.95.1.25310.0.0.0/8 下一跳 10.94.101.5而Flex5010v1.0的硬件網(wǎng)段表在開(kāi)機(jī)時(shí)是空白的，只有當(dāng)軟件路 由表的路由條目使用過(guò)一次后，才將其置入硬件網(wǎng)段表中。同時(shí)，- 個(gè)報(bào)文在Flex5010路由時(shí)，是先去匹配硬件網(wǎng)段表，如果匹配不到 才去匹配軟件路由表?？紤]一種特殊的情況：10.0.0.0/8的路由早于10.95.2.0/24置入 硬件網(wǎng)段表。即此時(shí)的硬件網(wǎng)段表只有一項(xiàng)： 10.0.0.0/8 下一跳 10.94.101.5此時(shí)，當(dāng)Flex5010下連的一臺(tái)主機(jī)(10.95.1.1)去與 10.95.2.0/24網(wǎng)段的設(shè)備通信時(shí)，則會(huì)出現(xiàn)：10.95.1.

12、1發(fā)給 10.95.2.0/24的報(bào)文到達(dá)Flex5010后，F(xiàn)lex5010查找硬件網(wǎng)段 表，首先匹配到10.0.0.0/8的條目，因此該報(bào)文轉(zhuǎn)發(fā)給 10.94.101.5(Big800),Big800查找路由表，發(fā)現(xiàn)該報(bào)文應(yīng)該轉(zhuǎn)發(fā) 給Flex5010，F(xiàn)lex5010再此將報(bào)文轉(zhuǎn)發(fā)給Big800，于是，此類 報(bào)文在Flex5010和Big800之間循環(huán)轉(zhuǎn)發(fā)，指導(dǎo)TTL值為0，設(shè) 備才將報(bào)文丟棄。由于大量的廢棄報(bào)文在Big800和Flex5010的鏈路傳送（一個(gè)上述 的報(bào)文在該鏈路需要轉(zhuǎn)發(fā)250多遍），因此造成鏈路擁塞，網(wǎng)絡(luò)丟 包、不通。問(wèn)題解釋：先激活先置表的算法違背了最長(zhǎng)匹配算法，因此，在多路 由匹配的環(huán)境下會(huì)出現(xiàn)上述問(wèn)題。問(wèn)題解決：OS為v1.1以上版本可解決此問(wèn)題。V1.1不再采用先 激活先置入網(wǎng)段表的算法，而是一開(kāi)始則將所有路由條目置入網(wǎng)段表 中