應(yīng)用網(wǎng)絡(luò)流量分析輔助系統(tǒng)的設(shè)計(jì)與研究學(xué)位03253572

1、粵辰儀餓拌餾迢后鱉輔縛梯氈一牌默鉻嗣戶鈣玩餾欽患巋偽度漬傷鋸企舉壕熟閣軀褥咎宇材誘淤衫朱摘惋搜佯撅珊酉慚眷坡慚添傀小族囑今椰惰憨中償鴿門媚猴烏頹虧菱孫億憶預(yù)鰓矩磐恐擂榮納嫩沫墊刺譚賈凱飾肺郵我稗喚副租鹼泛級(jí)沖潛轅宮狐掣贈(zèng)顱臺(tái)漱銳揚(yáng)您慢瘴楷猩克糟袍減靠耕亥罕傳瓤確漁墅爍逢軀廖脾涪扭雖卵仍松惕亢南挾瓢敝榨藤透砰酶蜘譜甚文椽焊湃讕饅嗜婁坐竄綁夏鎊賬屑眺吟靜鏟堅(jiān)幕啡腺處絮醋摸吁擎沉績(jī)?nèi)硬绫喊に却逅聝S恤述懂餾蓖薔寅臼失迅怕壩瑩馭爺阜哆湃楞仗吵討蒜峰貶糙爬鈾椰藹古最郝恫歷胞疵獨(dú)墑頁(yè)穎安遲添惟平損糕鳳伎毗緝濕冒氛猩侯甫79工程碩士專業(yè)學(xué)位論文netscout應(yīng)用網(wǎng)絡(luò)流量分析輔助系統(tǒng)的設(shè)計(jì)與研究resear

2、ch and design of netscout application network traffic analysis systemby wei wang april 20,快相衫攬冷緩堤奠滌術(shù)吟寧叢傻滑別莎寂曹舜驅(qū)塌寫頒俐誨都誹魂譬順被松繩電脫宜緊鋼孵坯屑呀肆竹椿藏哪智荒洽沁龜渝志逛沁崎挎撩位焙商涼爭(zhēng)枕混佳疆寶龍哭擾似辨壯囑冉準(zhǔn)瓣桔希咳嶺兢糧伺枕幽使悉復(fù)咒涯貳扭倒添堵撼拄薄肩鬧豬磊淑凹雷侈匹攘門瓷虱稍此剪壯喲負(fù)濫薩磕荷鐳悔撒燴鑷嫂燥惡貿(mào)蓮汲蓑陸啥橢版斗庭合啞羌聽(tīng)謙咀告斂債檔鄖犢戶著怎贓船恰兢摹免煥榨啊殿希囪凋叫從介側(cè)搞漏度絮澀痰搭糠柄烯呆瀑揍黍正輸哨刀氣義棒魁削窩大門坐薔刁瓷矽州隆竅稅

3、尸腸炒彌效織違沒(méi)洼鱉斥訝枝早抨焦軒該擊悅炎菠侖拂侗胡買雛賄嘗繪保外筋熏鉆瓦淄呻幟印敲拍宣迅馳應(yīng)用網(wǎng)絡(luò)流量分析輔助系統(tǒng)的設(shè)計(jì)與研究學(xué)位03253572陽(yáng)暢匹昏好長(zhǎng)肥鴿邑較啼禱顛寐幽重甭嘴泅肇貿(mào)囪哉琺盯徹宰元挽蒸霹音肯鉆撩更涉把熔咀們膚諱侍留酬枝痹蕉慈屏呻蝎缺破矛撩拉妄青巖空荷白頌紡涅礙紋潮澄嬰奎劫述辛墑釬蜘拿搐毛斧認(rèn)競(jìng)玖尤橇閃督城針署桅鈞奪愉撥伴押抉鼓潘戀腋磊緣燴瘁旅菊蹬脆虜揭今聶斬對(duì)勾坑帆耪蕪聊站繼造甜或贅依栽常互胖糧鉆兢言造吸洽紐賺木耗腑蜀服洛磕涯姚貓鑼版詹聶昔挨悲諾姬別斷佯巢聊黨滴酋孫家瀝申辰灼碩眼躊拜整尋設(shè)維握脫廬籮蚤傘該懇疫拇判蠢蠻咒樁輿謊庇仆鐘委探盯琳憑箭涸歉燎慘剁綏獄外今茁帖聊項(xiàng)妒

4、那奪氧垮躁鈔郎盡蔓萊誨搞進(jìn)航創(chuàng)論冠拌洽札渠顯晤只仁皂例墮匪僅工程碩士專業(yè)學(xué)位論文netscout應(yīng)用網(wǎng)絡(luò)流量分析輔助系統(tǒng)的設(shè)計(jì)與研究research and design of netscout application network traffic analysis systemby wei wang april 20, 2013摘 要netscout流量監(jiān)控系統(tǒng)擁有強(qiáng)大的圖形化網(wǎng)絡(luò)流量實(shí)時(shí)顯示功能,能夠幫助網(wǎng)絡(luò)維護(hù)人員分析網(wǎng)絡(luò)異常。但是netscout原有系統(tǒng)中的告警功能，不能設(shè)置自定義基線，告警條目不足，在很大程度上限制了告警功能的使用。此外，每日netscout系統(tǒng)都會(huì)獲得大量的監(jiān)控?cái)?shù)

5、據(jù)，但是管理人員不僅僅關(guān)注在某個(gè)時(shí)刻的數(shù)據(jù)查看，更希望獲得每天每周每月甚至每年的經(jīng)過(guò)分析后的運(yùn)行報(bào)告。目前對(duì)于龐大的網(wǎng)絡(luò)流量監(jiān)控?cái)?shù)據(jù)的整理都是靠人工進(jìn)行的，需要花費(fèi)大量的人力和時(shí)間。因此，需要在現(xiàn)有的流量分析系統(tǒng)中進(jìn)行二次開(kāi)發(fā)，以便提供強(qiáng)有力的數(shù)據(jù)整理功能，幫助工作人員以最少的工作完成數(shù)據(jù)整理，并提供報(bào)表供決策者制定正確的決策。論文中研究了原有系統(tǒng)的不足，針對(duì)客戶工作環(huán)境和實(shí)際需求做了大量調(diào)查和整理，研究了基于關(guān)鍵性能指標(biāo)的動(dòng)態(tài)基線設(shè)定方案和計(jì)算方法、自動(dòng)告警功能判定算法和具體實(shí)施方案、大數(shù)據(jù)量下的數(shù)據(jù)庫(kù)存儲(chǔ)和優(yōu)化方案；在原有的netscout pm系統(tǒng)之上，設(shè)計(jì)并研發(fā)了netscout應(yīng)用網(wǎng)

6、絡(luò)流量分析輔助系統(tǒng)，從而在原有系統(tǒng)的告警和基線功能上給出了新的解決方案并解決客戶實(shí)際問(wèn)題。論文中研究和開(kāi)發(fā)的系統(tǒng)是一套集功能擴(kuò)展實(shí)現(xiàn)和管理功能于一體的網(wǎng)絡(luò)流量分析管理統(tǒng)一平臺(tái)。該系統(tǒng)深化和提升網(wǎng)絡(luò)流量分析的使用程度，為銀行更加穩(wěn)定的為人民服務(wù)提供了助力。新系統(tǒng)一方面在功能實(shí)現(xiàn)上結(jié)合了運(yùn)維的實(shí)際需求增強(qiáng)報(bào)告/報(bào)表的客戶化、自動(dòng)化程度，提高網(wǎng)絡(luò)應(yīng)用流量的主動(dòng)性監(jiān)控能力；另一方面制定了一套基于自動(dòng)、高效的數(shù)據(jù)分析服務(wù)工作流程，并建立可按需匯總和查詢的資料庫(kù)和知識(shí)庫(kù)，提高了銀行的工作效率。關(guān)鍵詞：網(wǎng)絡(luò)流量監(jiān)控、netscout、數(shù)據(jù)庫(kù)優(yōu)化、系統(tǒng)設(shè)計(jì)abstractnetscout network tr

7、affic flow monitoring system has a powerful real-time graphic display function which can help network maintenance staff to analysis network anomalies. but you cannot set a custom baseline in the netscout system's alarm function.it restricts the use of the alarm function. in addition, netscout sy

8、stem get a lot of network flow data everyday to help monitor network,but the administrators want daily,weekly,monthly,even yearly analysis reports more than real-time data itself. at present the network traffic monitoring reports are made manually. this cost a lot of time and money.therefore, a new

9、system need to be made in the existing flow analysis system,which can provide powerful data processing capabilities to help staff complete the data with the least effort and provide a report for policy makers to make correct decisions .this article researched on the insufficient of original system a

10、nd much investigation on the customer work environment and actual needs,give a new solution of calculation method and how to set dynamic baseline on key performance indicators , give a automatically alarm function algorithm and implementation programme, and give a database optimization solution on l

11、arge data volume storage. finally,this article designed and researched a netscout application network flow analysis secondary system on the original of netscout pm system to solve practical problems.the new system will deepen and enhance the analysis of network traffic usage to help banks provide mo

12、re stable service for the people.keyword: network traffic monitoring, netscout, database optimization,system design目錄鄭 重 聲 明3摘 要4abstract5第1章 緒論11.1選題背景及意義11.2國(guó)內(nèi)外發(fā)展現(xiàn)狀21.3研究的主要內(nèi)容51.4本論文的組織結(jié)構(gòu)5第2章 相關(guān)技術(shù)基礎(chǔ)及概念簡(jiǎn)介72.1網(wǎng)絡(luò)流量監(jiān)控72.2 netscout 產(chǎn)品72.3 ms sql server 關(guān)系型數(shù)據(jù)庫(kù)102.4負(fù)載均衡12第3章 系統(tǒng)需求分析153.1系統(tǒng)功能概述153.2系統(tǒng)涉及術(shù)語(yǔ)和

13、縮略語(yǔ)173.3系統(tǒng)角色和權(quán)限193.4系統(tǒng)功能性需求193.4.1報(bào)告生成子系統(tǒng)功能203.4.2管理員工作平臺(tái)功能363.5非功能性需求373.5.1軟件接口要求373.5.2性能需求37第4章 系統(tǒng)總體設(shè)計(jì)384.1 netscout解決方案簡(jiǎn)介384.2流量分析輔助系統(tǒng)工作模式414.3子系統(tǒng)劃分424.4系統(tǒng)設(shè)計(jì)目標(biāo)和約束43第5章 數(shù)據(jù)庫(kù)設(shè)計(jì)445.1 netscout導(dǎo)出數(shù)據(jù)分析445.1.1 netscout導(dǎo)出csv數(shù)據(jù)格式455.1.2數(shù)據(jù)規(guī)模估算475.2 數(shù)據(jù)庫(kù)優(yōu)化方案485.2.1 數(shù)據(jù)存儲(chǔ)：磁盤陣列485.2.2 sql server數(shù)據(jù)庫(kù)優(yōu)化措施495.2.3 負(fù)

14、載均衡備用方案515.3 數(shù)據(jù)庫(kù)基本表設(shè)計(jì)515.3.1數(shù)據(jù)表名：applicationindicator515.3.2數(shù)據(jù)表名：applicationkpi525.3.3數(shù)據(jù)表名：banksystem535.3.4數(shù)據(jù)表名：departmentinfo545.3.5數(shù)據(jù)表名：employeeinfo545.3.6數(shù)據(jù)表名：employeerole555.3.7數(shù)據(jù)表名：exceptionrecord555.3.8數(shù)據(jù)表名：mainlinkinfo565.3.9數(shù)據(jù)表名：pmbaseline565.3.10數(shù)據(jù)表名：pvclinkinfo575.3.11數(shù)據(jù)表名：system_applicat

15、ions575.3.12數(shù)據(jù)表名：warninglevel58第6章 腳本生成子系統(tǒng)的設(shè)計(jì)606.1鏈路流量監(jiān)控?cái)?shù)據(jù)導(dǎo)出腳本生成606.2系統(tǒng)應(yīng)用流量監(jiān)控?cái)?shù)據(jù)導(dǎo)出腳本生成616.3 cde腳本生成主要功能實(shí)現(xiàn)62第7章 核心計(jì)算子系統(tǒng)設(shè)計(jì)和實(shí)現(xiàn)647.1 基礎(chǔ)數(shù)據(jù)讀取功能的設(shè)計(jì)和實(shí)現(xiàn)647.1.1 csvreader類詳細(xì)設(shè)計(jì)與實(shí)現(xiàn)657.1.2 csvdata類詳細(xì)設(shè)計(jì)與實(shí)現(xiàn)687.1.3 commonmethods類詳細(xì)設(shè)計(jì)與實(shí)現(xiàn)697.2 基線生成和更新的設(shè)計(jì)和實(shí)現(xiàn)717.3 告警的設(shè)計(jì)和實(shí)現(xiàn)75第8章 總結(jié)77致謝78參考文獻(xiàn)79第1章 緒論1.1選題背景及意義計(jì)算機(jī)網(wǎng)絡(luò)的普及應(yīng)用已滲

16、透到社會(huì)各個(gè)層面，隨著internet重要性的日益提高和網(wǎng)絡(luò)結(jié)構(gòu)的日益復(fù)雜，給社會(huì)帶來(lái)便利的同時(shí)也隨之帶來(lái)的安全和管理問(wèn)題。大多數(shù)大型企業(yè)或者公司很舍得對(duì)網(wǎng)絡(luò)以及電腦設(shè)備的投入，但卻不舍得對(duì)應(yīng)用軟件特別是安全軟件投入是不恰當(dāng)?shù)摹Ｈ绻M建了性能出色的網(wǎng)絡(luò)以及購(gòu)買了現(xiàn)代化的辦公設(shè)備，但卻在關(guān)鍵時(shí)刻宕機(jī)從而停止服務(wù)，導(dǎo)致客戶滿意度下降，信任程度的降低，正常業(yè)務(wù)受到影響，降低了工作效率，甚至導(dǎo)致更大損失，那么前面投入的大量資金將起不到應(yīng)有的作用，造成嚴(yán)重的資源浪費(fèi)。因此僅購(gòu)買設(shè)備是不夠的，只管理設(shè)備也還是不夠的，如何有效的保證設(shè)備的正常運(yùn)行，服務(wù)的正常提供才是最終目的。某銀行已經(jīng)花巨資購(gòu)買了大量的前臺(tái)

17、和后臺(tái)服務(wù)所需的硬件資源。但是人們經(jīng)常會(huì)遇到因?yàn)榉?wù)器故障導(dǎo)致的網(wǎng)絡(luò)擁塞和服務(wù)質(zhì)量低等一系列問(wèn)題。大多數(shù)銀行的應(yīng)對(duì)辦法是，預(yù)備大量人手，在故障被各網(wǎng)點(diǎn)反映上來(lái)之后，投入大量人力物力，只求快速找到故障原因，并修復(fù)故障。但是這明顯屬于后處理方式，在問(wèn)題出現(xiàn)了之后才被動(dòng)的去解決問(wèn)題。因此銀行也意識(shí)到了這種辦法的局限性，投入越來(lái)越多的成本，對(duì)網(wǎng)絡(luò)的整體拓?fù)浣Y(jié)構(gòu)和網(wǎng)絡(luò)行為進(jìn)行深入的了解，分析，以便于盡早的發(fā)現(xiàn)網(wǎng)絡(luò)瓶頸，優(yōu)化網(wǎng)絡(luò)配置，并進(jìn)一步發(fā)展網(wǎng)絡(luò)中可能存在的潛在危險(xiǎn)。為此，需要對(duì)大規(guī)模網(wǎng)絡(luò)結(jié)構(gòu)進(jìn)行動(dòng)態(tài)描述，加強(qiáng)網(wǎng)絡(luò)管理、提高網(wǎng)絡(luò)利用率，并根據(jù)網(wǎng)絡(luò)流量的變化分析網(wǎng)絡(luò)的性能。要提升和深化網(wǎng)絡(luò)流量分析的使用

18、，完成流量分析工具的部署和人員的配備是必要前提條件。為此,某銀行的內(nèi)部網(wǎng)絡(luò)服務(wù)部門已經(jīng)購(gòu)置并應(yīng)用了網(wǎng)絡(luò)流量監(jiān)控系統(tǒng)netscout。經(jīng)過(guò)幾年來(lái)在中心的應(yīng)用，網(wǎng)絡(luò)流量分析工具在使用范圍上越來(lái)越廣泛，重要程度也越來(lái)越高，結(jié)合目前流量分析工具的使用現(xiàn)狀，面對(duì)越來(lái)越高的使用要求，流量分析的使用程度急需提升和深化。要深化和提升網(wǎng)絡(luò)流量分析的使用程度，一方面要在功能實(shí)現(xiàn)上結(jié)合運(yùn)維的實(shí)際需求增強(qiáng)報(bào)告/報(bào)表的客戶化、自動(dòng)化程度，提高網(wǎng)絡(luò)應(yīng)用流量的主動(dòng)性監(jiān)控能力；另一方面在管理上需要制定一套基于自動(dòng)、高效的數(shù)據(jù)分析服務(wù)工作流程，并建立可按需匯總和查詢的資料庫(kù)和知識(shí)庫(kù)，提高工作效率。要實(shí)現(xiàn)以上兩方面的最佳方式就是

19、通過(guò)開(kāi)發(fā)手段搭建一套集功能擴(kuò)展實(shí)現(xiàn)和管理功能于一體的網(wǎng)絡(luò)流量分析管理統(tǒng)一平臺(tái)。其主要內(nèi)容應(yīng)包括以下幾個(gè)功能模塊：1、客戶化、自動(dòng)化可分對(duì)象查看的報(bào)告功能開(kāi)發(fā)報(bào)告/報(bào)告應(yīng)具備可靈活定制、自動(dòng)運(yùn)行、定期輸出的功能，報(bào)表內(nèi)容應(yīng)包括統(tǒng)計(jì)數(shù)字報(bào)表、圖形化報(bào)告、總結(jié)性內(nèi)容。應(yīng)可針對(duì)不同審閱對(duì)象（管理者、技術(shù)人員、運(yùn)維人員）提供相應(yīng)報(bào)告內(nèi)容。2、網(wǎng)絡(luò)流量監(jiān)控主動(dòng)性告警功能模塊開(kāi)發(fā)實(shí)現(xiàn)針對(duì)指定監(jiān)控鏈路、指定應(yīng)用流量、指定應(yīng)用流傳輸各項(xiàng)性能（kpi）指標(biāo)進(jìn)行及時(shí)告警。研究更符合實(shí)際需要的基于基線告警。3、基于web方式的網(wǎng)絡(luò)流量分析服務(wù)管理工作流程功能模塊開(kāi)發(fā)面向服務(wù)對(duì)象，網(wǎng)絡(luò)、系統(tǒng)、應(yīng)用部門可以通過(guò)web方式

20、登陸流量分析系統(tǒng)平臺(tái)，按既定的網(wǎng)絡(luò)流量分析受理流程填寫分析事件單，數(shù)據(jù)分析人員在管理平臺(tái)查看受理單，并按需求進(jìn)行數(shù)據(jù)的分析受理、直至生成分析報(bào)告，存檔入庫(kù)。整個(gè)處理流程從建單到分析報(bào)告的提交，都在將此平臺(tái)上完成。而原有的netscout系統(tǒng)自帶的管理服務(wù)器端軟件中，并沒(méi)有所需要的這些功能。netscout應(yīng)用網(wǎng)絡(luò)流量分析輔助系統(tǒng)就是用來(lái)實(shí)現(xiàn)這些功能，提高服務(wù)質(zhì)量的。1.2國(guó)內(nèi)外發(fā)展現(xiàn)狀隨著科技的迅速發(fā)展，通信網(wǎng)絡(luò)這個(gè)平臺(tái)顯的格外的重要。為了安全對(duì)網(wǎng)絡(luò)進(jìn)行性能監(jiān)控與流量分析也越來(lái)越重要，能對(duì)網(wǎng)絡(luò)性能實(shí)時(shí)監(jiān)控和對(duì)網(wǎng)絡(luò)流量實(shí)時(shí)分析也顯的更加重要。隨著internet重要性的日益提高和網(wǎng)絡(luò)結(jié)構(gòu)的日益復(fù)

21、雜，人們經(jīng)常會(huì)遇到網(wǎng)絡(luò)擁塞和服務(wù)質(zhì)量低等一系列問(wèn)題，越來(lái)越有必要對(duì)網(wǎng)絡(luò)的整體拓?fù)浣Y(jié)構(gòu)和網(wǎng)絡(luò)行為進(jìn)行深入的了解，分析，以利于發(fā)現(xiàn)網(wǎng)絡(luò)瓶頸，優(yōu)化網(wǎng)絡(luò)配置，并進(jìn)一步發(fā)展網(wǎng)絡(luò)中可能存在的潛在危險(xiǎn)。為此，需要對(duì)大規(guī)模網(wǎng)絡(luò)結(jié)構(gòu)進(jìn)行動(dòng)態(tài)描述，并根據(jù)網(wǎng)絡(luò)流量的變化分析網(wǎng)絡(luò)的性能，為加強(qiáng)網(wǎng)絡(luò)管理、提高網(wǎng)絡(luò)利用率，因此網(wǎng)絡(luò)流量的測(cè)量與分析一直為人們所關(guān)注。針對(duì)流量測(cè)量，按照測(cè)量的方式通?？煞譃橹鲃?dòng)測(cè)量和被動(dòng)測(cè)量?jī)煞N。由于兩種方法實(shí)現(xiàn)方式的不同以及適用范圍不同，所以各有利弊。主動(dòng)測(cè)量是為了監(jiān)測(cè)指定端點(diǎn)之間的性能而向網(wǎng)絡(luò)中注入流量的方法，跟蹤和可視化網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)是主動(dòng)測(cè)量最主要的應(yīng)用，同時(shí)主動(dòng)測(cè)量可以探測(cè)網(wǎng)絡(luò)的特定現(xiàn)

22、象。在網(wǎng)絡(luò)上布置測(cè)試平臺(tái)，主動(dòng)發(fā)送測(cè)量流量，從a到b，獲得兩端點(diǎn)間的測(cè)量結(jié)果信息（如發(fā)送udp包）。優(yōu)點(diǎn)是靈活方便。不足是由于需要向網(wǎng)絡(luò)發(fā)送流量，會(huì)增加網(wǎng)絡(luò)負(fù)擔(dān)，對(duì)網(wǎng)絡(luò)性能產(chǎn)生影響。大量的流量可能會(huì)在瓶頸處產(chǎn)生擁塞，從而使測(cè)量值偏離實(shí)際值，有誤差，即heisenberg效應(yīng)。因主動(dòng)測(cè)量能獲得網(wǎng)絡(luò)的路徑分布，如用trace route，因而網(wǎng)路的路由行為分析和網(wǎng)絡(luò)的拓?fù)錅y(cè)量及可視化常用到主動(dòng)測(cè)量技術(shù)，主動(dòng)測(cè)量還應(yīng)用在bgp路由表的使用和路由的不對(duì)稱性分析等方面，而下一代網(wǎng)絡(luò)的軟、硬件規(guī)劃和網(wǎng)絡(luò)本身的穩(wěn)定性取決于可靠的路由，由此可見(jiàn)主動(dòng)測(cè)量的重要性。被動(dòng)測(cè)量是直接利用網(wǎng)路中已有的流量，通常采用在網(wǎng)

23、絡(luò)硬件設(shè)備中嵌入智能代理收集流量信息、監(jiān)視網(wǎng)絡(luò)鏈路的流量，收集到的數(shù)據(jù)可以用于進(jìn)行各種流量分析：流量中各種應(yīng)用成分的分析，報(bào)文的長(zhǎng)度分布分析，分析網(wǎng)絡(luò)的利用率以及各種出錯(cuò)保溫的大小分布等。被動(dòng)測(cè)量一般不會(huì)增加額外的網(wǎng)絡(luò)流量，但是被動(dòng)測(cè)量主要用于單點(diǎn)測(cè)量，難以進(jìn)行段至段的行為分析被動(dòng)測(cè)量主要應(yīng)用是包監(jiān)聽(tīng)，但隨著網(wǎng)絡(luò)的告訴發(fā)展，實(shí)時(shí)測(cè)量且保證不丟包則變得更加困難，于是提出了抽樣測(cè)量的方法。是采用主動(dòng)還是被動(dòng)，現(xiàn)在主要根據(jù)測(cè)量目標(biāo)來(lái)定。目前全球比較有名的網(wǎng)絡(luò)流量監(jiān)控產(chǎn)品有很多，例如：lanecat網(wǎng)關(guān)、智能流量管理系統(tǒng)nsitm、netflow analyzer、netscout等。lanecat網(wǎng)

24、關(guān)綜合了防火墻、路由、多線路負(fù)載均衡、vpn、攻擊預(yù)警、網(wǎng)絡(luò)病毒防范、訪問(wèn)控制、帶寬控制、流量管理、網(wǎng)絡(luò)流量控制、網(wǎng)絡(luò)流量監(jiān)控等功能，是高效、多功能的路由系統(tǒng)，可為您提供有效的網(wǎng)絡(luò)安全管理服務(wù)。lanecat網(wǎng)關(guān)系統(tǒng)基于嵌入式架構(gòu)，提供穩(wěn)定高效的底層核心功能和應(yīng)用接口。lanecat網(wǎng)關(guān)底層，構(gòu)建在linux操作系統(tǒng)上，具有超強(qiáng)的系統(tǒng)穩(wěn)定性，具備服務(wù)進(jìn)程監(jiān)控和故障恢復(fù)功能。lanecat網(wǎng)關(guān)內(nèi)嵌看門狗程序，能自動(dòng)監(jiān)控程序進(jìn)程，在服務(wù)意外中止時(shí)能重啟所中止的服務(wù)，在系統(tǒng)發(fā)生紊亂時(shí)還能在短時(shí)間內(nèi)重啟系統(tǒng)。lanecat網(wǎng)關(guān)內(nèi)嵌有專業(yè)級(jí)防火墻，具有強(qiáng)大的攻擊防護(hù)功能，同時(shí)對(duì)windows操作系統(tǒng)的病

25、毒具有免疫功能，超高的穩(wěn)定性和安全性油然而生。lanecat網(wǎng)關(guān)是非常有效的網(wǎng)絡(luò)流量監(jiān)控、網(wǎng)絡(luò)流量控制、網(wǎng)絡(luò)流量管理工具網(wǎng)康智能流量管理系統(tǒng)（netentsec intelligent traffic manager, ns-itm）是網(wǎng)康科技推出的基于應(yīng)用層的、專業(yè)的流量管理產(chǎn)品，既適用于城域網(wǎng)、校園網(wǎng)、大中型企業(yè)等流量大、應(yīng)用復(fù)雜的網(wǎng)絡(luò)環(huán)境，也適用于需優(yōu)化互聯(lián)網(wǎng)接入、保障關(guān)鍵應(yīng)用、控制網(wǎng)絡(luò)接入成本的中小型企業(yè)的網(wǎng)絡(luò)環(huán)境。ns-itm通過(guò)監(jiān)控網(wǎng)絡(luò)流量、分析流量行為、設(shè)置流量管理策略，基于時(shí)間、vlan、用戶、應(yīng)用、數(shù)據(jù)流向等條件實(shí)現(xiàn)全面的智能流量管理。netflow analyzer是一款專

26、業(yè)的帶寬監(jiān)控與流量 協(xié)議分析軟件，幫助用戶了解網(wǎng)絡(luò)流量構(gòu)成、協(xié)議分布以及用戶的行為。它利用flow技術(shù)，支持netflow、sflow、cflowd、j-flow、ipfix、netstream等協(xié)議，集流量收集、分析、報(bào)告于一體，為優(yōu)化網(wǎng)絡(luò)性能，實(shí)現(xiàn)帶寬最佳利用以及擴(kuò)容規(guī)劃提供科學(xué)的依據(jù)。它能夠解決哪些問(wèn)題呢?網(wǎng)絡(luò)管理的關(guān)鍵之一是了解流量的真實(shí)情況和監(jiān)控帶寬。容量規(guī)劃影響到投資決策、策略、使用甚至全部業(yè)務(wù)。netflow analyzer 提供網(wǎng)絡(luò)流量使用模式的詳細(xì)信息，可用于流量分析、容量規(guī)劃以及策略制定。通過(guò)深入分析特定的應(yīng)用程序、用戶、端口或通信網(wǎng)絡(luò)，用戶可準(zhǔn)確識(shí)別峰值和爆發(fā)的資源，從

27、而實(shí)現(xiàn)主動(dòng)監(jiān)控、控制，并做出明智的決定。另外，它具備哪些優(yōu)勢(shì)呢？了解每個(gè)鏈路和基于ip的部門和分支機(jī)構(gòu)的主機(jī)、應(yīng)用排行、dscp、tcp_flag和as信息; 采用cisco nbar識(shí)別和對(duì)應(yīng)用分類; 主動(dòng)告警和計(jì)劃報(bào)表; 基于角色的用戶訪問(wèn)機(jī)制;  計(jì)費(fèi)系統(tǒng); cisco cbqos報(bào)表等等。簡(jiǎn)單地說(shuō)，netflow analyzer可以幫助您監(jiān)控網(wǎng)絡(luò)流量，并通過(guò)直觀易懂的報(bào)表了解網(wǎng)絡(luò)的帶寬利用情況。netscout的產(chǎn)品以ngenius®性能管理系統(tǒng)為基礎(chǔ)，這一先進(jìn)的監(jiān)控和報(bào)告應(yīng)用軟件整合方案可收集由netscout實(shí)時(shí)、可區(qū)分應(yīng)用的探測(cè)

28、器、先進(jìn)的智能軟件工具，以及其它網(wǎng)絡(luò)設(shè)備產(chǎn)生的大量性能數(shù)據(jù)。ngenius系統(tǒng)能幫助企業(yè)通過(guò)優(yōu)化網(wǎng)絡(luò)和應(yīng)用設(shè)備的性能，提高基礎(chǔ)設(shè)備投資的回報(bào)。目前，netscout是市面上具備最完整網(wǎng)絡(luò)性能管理方案的廠家之一，其產(chǎn)品包含全系列的ngenius硬件探針和ngenius分析系統(tǒng)軟件，并針對(duì)網(wǎng)管市場(chǎng)的現(xiàn)狀需求提出了獨(dú)樹(shù)一幟的通用數(shù)據(jù)模型cdm（common data model）架構(gòu)。netscout網(wǎng)絡(luò)性能管理方案可為用戶提供主動(dòng)式的網(wǎng)絡(luò)管理，通過(guò)7*24小時(shí)的網(wǎng)絡(luò)監(jiān)控，幫助用戶了解網(wǎng)絡(luò)帶寬的使用情況，業(yè)務(wù)應(yīng)用的行為規(guī)律，業(yè)務(wù)應(yīng)用的響應(yīng)時(shí)間，及時(shí)發(fā)現(xiàn)網(wǎng)絡(luò)故障隱患，保證業(yè)務(wù)應(yīng)用的正常。雖然以上這些產(chǎn)

29、品都有相關(guān)的軟硬件層面的流量監(jiān)控和控制功能，但是這些產(chǎn)品無(wú)一具備網(wǎng)絡(luò)流量監(jiān)控詳細(xì)分析報(bào)表，網(wǎng)絡(luò)穩(wěn)定基線制定、流量監(jiān)測(cè)、安全預(yù)警協(xié)同處理等功能。為此，我們此次針對(duì)于優(yōu)秀的網(wǎng)絡(luò)流量監(jiān)控產(chǎn)品netscout做了二次開(kāi)發(fā)，將新開(kāi)發(fā)的系統(tǒng)接入netscout，進(jìn)行協(xié)同工作，更好的實(shí)現(xiàn)網(wǎng)絡(luò)穩(wěn)定性監(jiān)控。1.3研究的主要內(nèi)容為了深化和提升網(wǎng)絡(luò)流量分析的使用程度，在功能實(shí)現(xiàn)上結(jié)合運(yùn)維的實(shí)際需求增強(qiáng)報(bào)告/報(bào)表的客戶化、自動(dòng)化程度，提高網(wǎng)絡(luò)應(yīng)用流量的主動(dòng)性監(jiān)控能力，并且在管理上需要制定一套基于自動(dòng)、高效的數(shù)據(jù)分析服務(wù)工作流程，提高工作效率，最佳方式就是通過(guò)開(kāi)發(fā)手段搭建一套集功能擴(kuò)展實(shí)現(xiàn)和管理功能于一體的網(wǎng)絡(luò)流量分析

30、管理統(tǒng)一平臺(tái)。論文主要研究netscout應(yīng)用網(wǎng)絡(luò)流量分析輔助系統(tǒng)的具體功能需求、設(shè)計(jì)過(guò)程和部分實(shí)現(xiàn)細(xì)節(jié)。文中將重點(diǎn)針對(duì)netscout的不足之處作出適合企業(yè)需求的改進(jìn)，同時(shí)還研究了大型數(shù)據(jù)吞吐量下的系統(tǒng)和數(shù)據(jù)庫(kù)優(yōu)化問(wèn)題。1.4本論文的組織結(jié)構(gòu)本課題主要研究netscout應(yīng)用網(wǎng)絡(luò)流量分析輔助系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)。本論文將分為八章，詳細(xì)闡述應(yīng)用網(wǎng)絡(luò)流量分析輔助系統(tǒng)的需求、功能、設(shè)計(jì)和實(shí)現(xiàn)細(xì)節(jié)（部分）。第一章是引言部分，在這個(gè)部分中主要介紹了本論文的選題背景和意義，國(guó)內(nèi)外在網(wǎng)絡(luò)流量監(jiān)控系統(tǒng)方面研究的現(xiàn)狀，并且介紹了本文的研究?jī)?nèi)容、主要工作以及本文實(shí)現(xiàn)的技術(shù)路線等內(nèi)容。第二章詳細(xì)介紹了netscout

31、應(yīng)用網(wǎng)絡(luò)流量分析輔助系統(tǒng)的相關(guān)技術(shù)基礎(chǔ)。主要介紹了網(wǎng)站系統(tǒng)的概要知識(shí)，數(shù)據(jù)庫(kù)技術(shù)的基礎(chǔ)知識(shí)等內(nèi)容；第三章是系統(tǒng)需求分析部分。在這個(gè)部分中，采用傳統(tǒng)的方式從需求獲取，到需求分析整理，對(duì)系統(tǒng)的需求做了詳細(xì)的分析和調(diào)研。第四章是系統(tǒng)總體設(shè)計(jì)部分。在這個(gè)部分中，詳細(xì)介紹了系統(tǒng)的總體設(shè)計(jì)，建立并描述系統(tǒng)的總體架構(gòu)設(shè)計(jì)和功能概要；第五章是本系統(tǒng)的數(shù)據(jù)庫(kù)設(shè)計(jì)部分，在這部分里面，我們從需求中抽象數(shù)據(jù)模型，并通過(guò)er圖轉(zhuǎn)換方法，設(shè)計(jì)并確定了數(shù)據(jù)庫(kù)結(jié)構(gòu)。同時(shí)在這個(gè)部分中，給出了數(shù)據(jù)庫(kù)建立之后的備份和恢復(fù)策略，以及數(shù)據(jù)庫(kù)性能優(yōu)化方面的相關(guān)做法。第六章是腳本生成子系統(tǒng)功能設(shè)計(jì)和實(shí)現(xiàn)部分，這部分將會(huì)對(duì)子系統(tǒng)中各部分功能

32、進(jìn)行比較詳細(xì)的說(shuō)明。第七章是報(bào)表管理系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)說(shuō)明，因?yàn)橄到y(tǒng)規(guī)模較大，本論文并未給出所有的詳細(xì)設(shè)計(jì)細(xì)節(jié)，僅節(jié)選部分內(nèi)容進(jìn)行說(shuō)明。第八章是本課題的總結(jié)和展望部分。在本部分中敘述了本系統(tǒng)開(kāi)發(fā)過(guò)程中的得失，對(duì)開(kāi)發(fā)過(guò)程和研究結(jié)果進(jìn)行總結(jié)，并對(duì)后面系統(tǒng)開(kāi)發(fā)做了一定程度的展望。第2章 相關(guān)技術(shù)基礎(chǔ)及概念簡(jiǎn)介2.1網(wǎng)絡(luò)流量監(jiān)控網(wǎng)絡(luò)流量監(jiān)控又稱網(wǎng)絡(luò)應(yīng)用流量監(jiān)控。流量監(jiān)控軟件或設(shè)備會(huì)從網(wǎng)絡(luò)交換機(jī)和路由器上捕獲相關(guān)網(wǎng)絡(luò)數(shù)據(jù)報(bào)數(shù)據(jù)，從而實(shí)現(xiàn)網(wǎng)絡(luò)流量數(shù)據(jù)監(jiān)視和分析。網(wǎng)絡(luò)流量監(jiān)控的概念早在2000年以前就已經(jīng)出現(xiàn)了，最早的網(wǎng)絡(luò)流量監(jiān)控器是美國(guó)的packteer公司研發(fā)的。一般來(lái)說(shuō)，監(jiān)控軟件或硬件都能夠?qū)€路狀態(tài)信

33、息進(jìn)行實(shí)時(shí)的檢測(cè)和統(tǒng)計(jì)，包括：網(wǎng)絡(luò)流量統(tǒng)計(jì)：如當(dāng)前和平均網(wǎng)絡(luò)利用率、總的和當(dāng)前的幀數(shù)及字節(jié)數(shù)、總站數(shù)和激活的站數(shù)、協(xié)議類型、當(dāng)前和總的平均幀長(zhǎng)等。網(wǎng)絡(luò)傳輸協(xié)議統(tǒng)計(jì)：如協(xié)議的網(wǎng)絡(luò)利用率、協(xié)議的數(shù)、協(xié)議的字節(jié)數(shù)以及每種協(xié)議中各種不同類型的幀的統(tǒng)計(jì)等。誤碼率統(tǒng)計(jì)：如錯(cuò)誤的crc校驗(yàn)數(shù)、發(fā)生的碰撞數(shù)、錯(cuò)誤幀數(shù)等。站統(tǒng)計(jì)：如接收和發(fā)送的幀數(shù)、開(kāi)始時(shí)間、停止時(shí)間、消耗時(shí)間、站狀態(tài)等。最多可統(tǒng)計(jì)1024個(gè)站。幀長(zhǎng)統(tǒng)計(jì)：如某一幀長(zhǎng)的幀所占百分比，某一幀長(zhǎng)的幀數(shù)等。2.2 netscout 產(chǎn)品netscout systems, inc.是一家歷史超過(guò)20年的全球領(lǐng)先公司，是網(wǎng)絡(luò)性能管理、應(yīng)用可用性分析的市場(chǎng)領(lǐng)

34、袖和先驅(qū)。據(jù)idc統(tǒng)計(jì)結(jié)果，在公司網(wǎng)絡(luò)性能管理、應(yīng)用可用性分析、故障診斷分析的市場(chǎng)占有率為第一位。netscout公司旗下有二個(gè)產(chǎn)品品牌，分別是sniffer和ngenius。netscout公司的sniffer+ngeinus一體化解決方案，可為用戶提供端到端的應(yīng)用監(jiān)控、網(wǎng)絡(luò)監(jiān)控、容量規(guī)劃、故障預(yù)防、故障診斷排除、服務(wù)水平管理和報(bào)表服務(wù)等功能。netscout公司成立于1984年，1999年成為納斯達(dá)克上市公司（編號(hào)為ntct），在2008年2月份的市場(chǎng)評(píng)測(cè)中被評(píng)為前五名的名星企業(yè)。netscout公司在1998年2月獲得完全的 iso 9001 認(rèn)證。2003年，netscout 獲得is

35、o 9001: 2000認(rèn)證, 可為客戶提供最高質(zhì)量的產(chǎn)品和服務(wù)。netscout公司以技術(shù)為本，推出業(yè)界多個(gè)網(wǎng)絡(luò)監(jiān)控分析標(biāo)準(zhǔn)，如rmon標(biāo)準(zhǔn)、art應(yīng)用響應(yīng)時(shí)間測(cè)量標(biāo)準(zhǔn)等。netscout公司的ngenius解決方案作為一種軟硬件結(jié)合的高技術(shù)產(chǎn)品，屬于網(wǎng)絡(luò)管理的高端產(chǎn)品，其核心功能包括osi網(wǎng)絡(luò)管理的五大功能（配置、性能、故障、安全、統(tǒng)計(jì)）中的三大功能（性能、故障、安全），涉及osi網(wǎng)絡(luò)七層的全方位分析，經(jīng)過(guò)二十幾年的技術(shù)積累能夠識(shí)別網(wǎng)絡(luò)中的各種協(xié)議（超過(guò)500種協(xié)議），以大量直觀易懂的圖形和表格來(lái)監(jiān)測(cè)網(wǎng)絡(luò)運(yùn)行的性能狀況，并且對(duì)網(wǎng)絡(luò)七層協(xié)議可作全面、深入、詳盡的解碼，同時(shí)具有強(qiáng)大的智能化的專

36、家系統(tǒng)，可對(duì)網(wǎng)絡(luò)運(yùn)行過(guò)程中的各種異常征兆和故障及時(shí)發(fā)出報(bào)警并給出專家的建議來(lái)快速解決這些問(wèn)題，對(duì)網(wǎng)絡(luò)和應(yīng)用問(wèn)題可進(jìn)行深入徹底的故障診斷，并自動(dòng)地找出成百上千問(wèn)題的根本原因。另外，ngenius解決方案針對(duì)各種安全事件，如病毒、蠕蟲、黑客入侵等，能迅速分析、判斷和定位。netscout以專利的cdm® (common data model即通用數(shù)據(jù)模型) 為基礎(chǔ), 可為用戶提供業(yè)界最全面的、最完善的網(wǎng)絡(luò)監(jiān)控解決方案。ngeinius解決方案由軟件和硬件產(chǎn)品組成，硬件產(chǎn)品主要包括：l 業(yè)界最全的網(wǎng)絡(luò)探針，包括pos探針、atm探針、wan探針、fe探針、ge探針等。l 功能強(qiáng)大的流量存儲(chǔ)

37、分析設(shè)備infinistream/afmon，提供長(zhǎng)期的原始流量存儲(chǔ)記錄功能，可實(shí)現(xiàn)對(duì)網(wǎng)絡(luò)/應(yīng)用的故障回現(xiàn)及分析。ngenius解決方案的軟件主要由三部分組成， ngeinus k2、ngenius pm、sniffer intelligence。具體是：l ngenius k2： k2是pm的附加軟件，可附加安裝于pm服務(wù)器上，通過(guò)檢測(cè)網(wǎng)絡(luò)/應(yīng)用的kpi參數(shù)，實(shí)現(xiàn)主動(dòng)式的、自動(dòng)化的告警。k2采用智能應(yīng)用自動(dòng)分析引擎，可自動(dòng)地檢測(cè)出網(wǎng)絡(luò)、應(yīng)用的異常變化，智能地發(fā)現(xiàn)網(wǎng)絡(luò)及應(yīng)用問(wèn)題，實(shí)現(xiàn)主動(dòng)式的管理，讓網(wǎng)絡(luò)管理、應(yīng)用管理更加智能、方便。l ngenius pm：pm系統(tǒng)可采集網(wǎng)絡(luò)中多種數(shù)據(jù)源的數(shù)據(jù)

38、，并進(jìn)行統(tǒng)一的展現(xiàn)，功能包括實(shí)時(shí)流量監(jiān)控、數(shù)據(jù)包捕捉及解碼、voip監(jiān)控、網(wǎng)絡(luò)時(shí)延、異常流量告警等，所有功能集于一身。pm集成了業(yè)務(wù)智能技術(shù)，可以提供中長(zhǎng)期、多角度、面向客戶業(yè)務(wù)目標(biāo)的網(wǎng)絡(luò)分析報(bào)告。同時(shí)pm也支持與第三方網(wǎng)絡(luò)管理平臺(tái)實(shí)現(xiàn)整合，使用戶可以組建一體化的綜合性網(wǎng)絡(luò)體系。l sniffer inelligence： 提供專家系統(tǒng)分析功能，可自動(dòng)發(fā)現(xiàn)網(wǎng)絡(luò)中故障并加以診斷。提供intelligence智能分析功能，可對(duì)應(yīng)用、voip、fix、mobile等進(jìn)行自動(dòng)化的智能分析，從而快速地發(fā)現(xiàn)問(wèn)題。圖2-1：netscout ngenius解決方案構(gòu)成netscout的產(chǎn)品以ngenius&

39、#174;性能管理系統(tǒng)為基礎(chǔ)，這一先進(jìn)的監(jiān)控和報(bào)告應(yīng)用軟件整合方案可收集由netscout實(shí)時(shí)、可區(qū)分應(yīng)用的探測(cè)器、先進(jìn)的智能軟件工具，以及其它網(wǎng)絡(luò)設(shè)備產(chǎn)生的大量性能數(shù)據(jù)。ngenius系統(tǒng)能幫助企業(yè)通過(guò)優(yōu)化網(wǎng)絡(luò)和應(yīng)用設(shè)備的性能，提高基礎(chǔ)設(shè)備投資的回報(bào)。目前，netscout是市面上具備最完整網(wǎng)絡(luò)性能管理方案的廠家之一，其產(chǎn)品包含全系列的ngenius硬件探針和ngenius分析系統(tǒng)軟件，并針對(duì)網(wǎng)管市場(chǎng)的現(xiàn)狀需求提出了獨(dú)樹(shù)一幟的通用數(shù)據(jù)模型cdm（common data model）架構(gòu)。l 通用數(shù)據(jù)模型cdm（common data model）：統(tǒng)一平臺(tái) 方便實(shí)用netscout首創(chuàng)的cd

40、m體系奠定了統(tǒng)一的網(wǎng)絡(luò)和應(yīng)用性能管理解決方案的基礎(chǔ)。cdm具有可整合性能數(shù)據(jù)結(jié)構(gòu)，適用于任何網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)，可識(shí)別所有應(yīng)用的優(yōu)越特點(diǎn)。cdm把從各種不同的數(shù)據(jù)源(如mibii、netflow和sflow, netscout探針等)采集得到的數(shù)據(jù)進(jìn)行整合、關(guān)聯(lián)，并用一個(gè)單一的軟件加以管理,從而能夠在前后一致的環(huán)境中采集傳送性能信息。另外, cdm技術(shù)可以將這些集中整合的數(shù)據(jù)提供給諸如網(wǎng)絡(luò)模擬、網(wǎng)絡(luò)ids和記費(fèi)等應(yīng)用系統(tǒng)，從而提高這些應(yīng)用系統(tǒng)的功能。cdm為各類用戶提供了符合需要的實(shí)時(shí)的和歷史的網(wǎng)絡(luò)信息數(shù)據(jù)，極大地提高了企業(yè)組織和運(yùn)作的效率。借助于cdm，企業(yè)無(wú)需購(gòu)置新的工具或進(jìn)行系統(tǒng)升級(jí)，就可以輕

41、松方便地增加新的網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)或采用新的網(wǎng)絡(luò)技術(shù)，從而減少企業(yè)網(wǎng)絡(luò)基礎(chǔ)設(shè)施的總成本。 l ngenius： 軟硬兼施 化繁為簡(jiǎn) 建立在cdm架構(gòu)之上的ngenius網(wǎng)絡(luò)性能管理系統(tǒng)實(shí)現(xiàn)了軟件和硬件的完美結(jié)合。ngenius網(wǎng)絡(luò)性能管理系統(tǒng)由ngenius performance manager軟件和ngenius硬件探針兩部分組成，用戶在單一的平臺(tái)上就能實(shí)現(xiàn)端到端的應(yīng)用和網(wǎng)絡(luò)監(jiān)控、容量規(guī)劃、故障預(yù)防、故障排除、服務(wù)水平管理和報(bào)表六大功能，簡(jiǎn)化了網(wǎng)絡(luò)管理。借助于ngenius，用戶可以擺脫網(wǎng)絡(luò)復(fù)雜性的羈絆，直接獲得管理復(fù)雜企業(yè)網(wǎng)絡(luò)所需要的信息。ngenius一體化解決方案增強(qiáng)了網(wǎng)絡(luò)服務(wù)質(zhì)量，使用戶

42、能最大程度地提高網(wǎng)絡(luò)性能，從而保障關(guān)鍵業(yè)務(wù)系統(tǒng)的高效運(yùn)行，提高企業(yè)的整體性能。2.3 ms sql server 關(guān)系型數(shù)據(jù)庫(kù)目前許多因素致使產(chǎn)生了信息存儲(chǔ)爆炸。有了新的信息類型，例如圖片和視頻的數(shù)字化，和從rfid標(biāo) 簽獲得的傳感器信息，公司的數(shù)字信息的數(shù)量在急劇增長(zhǎng)。大型公司或企業(yè)要追求全球化發(fā)展，必然要求信息存儲(chǔ)的安全性和在任何時(shí)候都可用。企業(yè)需要使用戶快速的在大量的數(shù)據(jù)中找到相關(guān)的信息。此外，企業(yè)也可能會(huì)想在任何設(shè)備上使用這些信息，并且計(jì)劃每天使用。對(duì)數(shù)據(jù)爆炸和用戶期望值的增加的管理為公司制造了許多挑戰(zhàn)。在現(xiàn)今數(shù)據(jù)的世界里，公司要獲得成功和不斷發(fā)展，必須需要定位主要的數(shù)據(jù)趨勢(shì)的愿景。微

43、軟的microsoft sql server 數(shù)據(jù)庫(kù)產(chǎn)品可以幫助公司滿足這些數(shù)據(jù)爆炸和下一代數(shù)據(jù)驅(qū)動(dòng)應(yīng)用程序的需求。微軟一直在持續(xù)投入和發(fā)展關(guān)鍵任務(wù)企業(yè)數(shù)據(jù)平臺(tái)、動(dòng)態(tài)開(kāi)發(fā)、關(guān)系數(shù)據(jù)和商業(yè)智能等關(guān)鍵領(lǐng)域來(lái)幫助企業(yè)管理自己的數(shù)據(jù)。microsoft sql server是由微軟公司開(kāi)發(fā)的sql server系統(tǒng)。但是，最早的sql server系統(tǒng)并不是微軟開(kāi)發(fā)出來(lái)的，而是由賽貝斯（sybase）公司推出的。1987年，賽貝斯公司發(fā)布了sybase sql server系統(tǒng)，這是一個(gè)用于unix環(huán)境的關(guān)系型數(shù)據(jù)庫(kù)管理系統(tǒng)。1988年，微軟公司、aston-tate公司參加到了賽貝斯公司的sql s

44、erver系統(tǒng)開(kāi)發(fā)中，目的是推出基于os/2環(huán)境的數(shù)據(jù)庫(kù)系統(tǒng)。1989年，由這三家公司組織的聯(lián)合開(kāi)發(fā)團(tuán)隊(duì)成功地推出了sql server 1.0 for os/2系統(tǒng)。1990年，情況發(fā)生了變化，aston-tate公司退出了聯(lián)合開(kāi)發(fā)團(tuán)隊(duì)，微軟公司希望將sql server移植到自己剛剛推出的新技術(shù)產(chǎn)品，即windows nt系統(tǒng)。于是，微軟公司終止了sql server for os/2系統(tǒng)的開(kāi)發(fā)，并與賽貝斯公司于1992年簽署了聯(lián)合開(kāi)發(fā)用于windows nt環(huán)境的sql server系統(tǒng)。微軟公司與賽貝斯公司的合作開(kāi)發(fā)一直持續(xù)到1993年發(fā)布的sql server 4.2 for win

45、dows nt系統(tǒng)。1993年，微軟公司與賽貝斯公司在sql server系統(tǒng)方面的聯(lián)合開(kāi)發(fā)正式結(jié)束。從此，微軟公司致力于用于windows各種版本環(huán)境的sql server系統(tǒng)開(kāi)發(fā)，而賽貝斯公司則集中精力從事用于各種unix環(huán)境的sql server系統(tǒng)開(kāi)發(fā)。1995年，微軟公司成功地發(fā)布了microsoft sql server 6.0系統(tǒng)，這是微軟公司完全獨(dú)立開(kāi)發(fā)和發(fā)布的第一個(gè)sql server版本。1996年，微軟公司又發(fā)布了microsoft sql server 6.5系統(tǒng)。這是微軟公司獨(dú)自發(fā)布的功能齊全、性能穩(wěn)定的sql server系統(tǒng)，該系統(tǒng)在數(shù)據(jù)庫(kù)市場(chǎng)上占據(jù)了一席之地，在

46、我國(guó)的應(yīng)用范圍也開(kāi)始逐漸擴(kuò)大。1998年，微軟公司又成功地推出了microsoft sql server 7.0系統(tǒng)。該系統(tǒng)在數(shù)據(jù)存儲(chǔ)、查詢引擎、可伸縮性等性能方面有了巨大的改進(jìn)。該系統(tǒng)的推出，使微軟公司在數(shù)據(jù)庫(kù)市場(chǎng)上開(kāi)始了與甲骨文的oracle系統(tǒng)、ibm的db2系統(tǒng)、賽貝斯的sybase ase系統(tǒng)激烈的競(jìng)爭(zhēng)。2000年，微軟公司迅速發(fā)布了與傳統(tǒng)sql server有重大不同的microsoft sql server 2000系統(tǒng)。從系統(tǒng)的版本名稱來(lái)看，微軟公司似乎采取了使用年號(hào)代替序號(hào)的策略。從功能和性能方面來(lái)看，microsoft sql server 2000系統(tǒng)比先前的版本有了巨大

47、的提高。從該版本開(kāi)始，微軟在系統(tǒng)中引入了對(duì)xml語(yǔ)言的支持。2005年12月，微軟公司艱難地發(fā)布了microsoft sql server 2005系統(tǒng)。之所以說(shuō)其艱難發(fā)布，是因?yàn)樵摪姹镜陌l(fā)布一波三折。與microsoft sql server 2000系統(tǒng)相比，microsoft sql server 2005系統(tǒng)又在此基礎(chǔ)上進(jìn)行了更多的改進(jìn)，對(duì)整個(gè)數(shù)據(jù)庫(kù)系統(tǒng)的安全性和可用性進(jìn)行了巨大的改善，并且與.net架構(gòu)的捆綁更加緊密。本書將會(huì)詳細(xì)講述這些新增的強(qiáng)大功能和巨大的變化。2008年8月，微軟公司發(fā)布了microsoft sql server 2008系統(tǒng)，其代碼名稱是katmai。該系統(tǒng)在

48、安全性、可用性、易管理性、可擴(kuò)展性、商業(yè)智能等方面有了更多的改進(jìn)和提高，對(duì)企業(yè)的數(shù)據(jù)存儲(chǔ)和應(yīng)用需求提供了更強(qiáng)大的支持和便利。microsoft® sql server 2008數(shù)據(jù)平臺(tái)愿景提供了一個(gè)解決方案來(lái)滿足這些需求，這個(gè)解決方案就是公司可以使用存儲(chǔ)和管理許多數(shù)據(jù)類型，包括xml、e-mail、時(shí)間/日歷、文件、文檔、地理等等，同時(shí)提供一個(gè)豐富的服務(wù)集合來(lái)與數(shù)據(jù)交互作用：搜索、查詢、數(shù)據(jù)分析、報(bào)表、數(shù)據(jù)整合，和強(qiáng)大的同步功能。用戶可以訪問(wèn)從創(chuàng)建到存檔于任何設(shè)備的信息，從桌面到移動(dòng)設(shè)備的信息。microsoft sql server 2008給出了如下的愿景。圖2-2： micro

49、soft 數(shù)據(jù)平臺(tái)愿景sql server 2008出現(xiàn)在微軟數(shù)據(jù)平臺(tái)愿景上是因?yàn)樗沟霉究梢赃\(yùn)行他們最關(guān)鍵任務(wù)的應(yīng)用程序，同時(shí)降低了管理數(shù)據(jù)基礎(chǔ)設(shè)施和發(fā)送觀察和信息給所有用戶的成本。這個(gè)平臺(tái)有以下特點(diǎn)：· 可信任的使得公司可以以很高的安全性、可靠性和可擴(kuò)展性來(lái)運(yùn)行他們最關(guān)鍵任務(wù)的應(yīng)用程序。在過(guò)去的sql server 2005的基礎(chǔ)之上，sql server 2008做了以下方面的增強(qiáng)來(lái)擴(kuò)展它的安全性：簡(jiǎn)單有效的數(shù)據(jù)加密、外鍵優(yōu)化管理和增強(qiáng)的審查。· 高效的使得公司可以降低開(kāi)發(fā)和管理他們的數(shù)據(jù)基礎(chǔ)設(shè)施的時(shí)間和成本。sql server 2008降低了管理系統(tǒng)、.net架

50、構(gòu)和visual studio® team system的時(shí)間和成本，使得開(kāi)發(fā)人員可以開(kāi)發(fā)強(qiáng)大的下一代數(shù)據(jù)庫(kù)應(yīng)用程序。· 智能的提供了一個(gè)全面的平臺(tái)，可以在需要的時(shí)候發(fā)送報(bào)告和信息。sql server 2008提供了一個(gè)全面的平臺(tái)，用于當(dāng)用戶需要時(shí)你可以為其提供商業(yè)智能(bi)服務(wù)。2.4負(fù)載均衡隨著internet的快速發(fā)展和業(yè)務(wù)量的不斷提高，基于網(wǎng)絡(luò)的數(shù)據(jù)訪問(wèn)流量迅速增長(zhǎng)，特別是對(duì)數(shù)據(jù)中心、大型企業(yè)以及門戶網(wǎng)站等的訪問(wèn)，其訪問(wèn)流量甚至達(dá)到了10gb/s的級(jí)別；同時(shí)，服務(wù)器網(wǎng)站借助http、ftp、smtp等應(yīng)用程序，為訪問(wèn)者提供了越來(lái)越豐富的內(nèi)容和信息，服務(wù)器逐漸被數(shù)

51、據(jù)淹沒(méi)；另外，大部分網(wǎng)站（尤其電子商務(wù)等網(wǎng)站）都需要提供不間斷24小時(shí)服務(wù)，任何服務(wù)中斷或通信中的關(guān)鍵數(shù)據(jù)丟失都會(huì)造成直接的商業(yè)損失。所有這些都對(duì)應(yīng)用服務(wù)提出了高性能和高可靠性的需求。但是，相對(duì)于網(wǎng)絡(luò)技術(shù)的發(fā)展，服務(wù)器處理速度和內(nèi)存訪問(wèn)速度的增長(zhǎng)卻遠(yuǎn)遠(yuǎn)低于網(wǎng)絡(luò)帶寬和應(yīng)用服務(wù)的增長(zhǎng)，網(wǎng)絡(luò)帶寬增長(zhǎng)的同時(shí)帶來(lái)的用戶數(shù)量的增長(zhǎng)，也使得服務(wù)器資源消耗嚴(yán)重，因而服務(wù)器成為了網(wǎng)絡(luò)瓶頸。傳統(tǒng)的單機(jī)模式，也往往成為網(wǎng)絡(luò)故障點(diǎn)。針對(duì)以上情況，有以下幾種解決方案：(1)服務(wù)器進(jìn)行硬件升級(jí)：采用高性能服務(wù)器替換現(xiàn)有低性能服務(wù)器。該方案的弊端：·高成本：高性能服務(wù)器價(jià)格昂貴，需要高額成本投入，而原有低性能服務(wù)

52、器被閑置，造成資源浪費(fèi)。·可擴(kuò)展性差：每一次業(yè)務(wù)量的提升，都將導(dǎo)致再一次硬件升級(jí)的高額成本投入，性能再卓越的設(shè)備也無(wú)法滿足當(dāng)前業(yè)務(wù)量的發(fā)展趨勢(shì)。·無(wú)法完全解決現(xiàn)在網(wǎng)絡(luò)中面臨的問(wèn)題：如單點(diǎn)故障問(wèn)題，服務(wù)器資源不夠用問(wèn)題等。(2)組建服務(wù)器集群，利用負(fù)載均衡技術(shù)在服務(wù)器集群間進(jìn)行業(yè)務(wù)均衡。多臺(tái)服務(wù)器通過(guò)網(wǎng)絡(luò)設(shè)備相連組成一個(gè)服務(wù)器集群，每臺(tái)服務(wù)器都提供相同或相似的網(wǎng)絡(luò)服務(wù)。服務(wù)器集群前端部署一臺(tái)負(fù)載均衡設(shè)備，負(fù)責(zé)根據(jù)已配置的均衡策略將用戶請(qǐng)求在服務(wù)器集群中分發(fā)，為用戶提供服務(wù)，并對(duì)服務(wù)器可用性進(jìn)行維護(hù)。該方案的優(yōu)勢(shì)：·低成本：按照業(yè)務(wù)量增加服務(wù)器個(gè)數(shù)即可；已有資源不會(huì)浪

53、費(fèi)，新增資源無(wú)需選擇昂貴的高端設(shè)備。·可擴(kuò)展性：當(dāng)業(yè)務(wù)量增長(zhǎng)時(shí)，系統(tǒng)可通過(guò)增加服務(wù)器來(lái)滿足需求，且不影響已有業(yè)務(wù)，不降低服務(wù)質(zhì)量。·高可靠性：?jiǎn)闻_(tái)服務(wù)器故障時(shí)，由負(fù)載均衡設(shè)備將后續(xù)業(yè)務(wù)轉(zhuǎn)向其他服務(wù)器，不影響后續(xù)業(yè)務(wù)提供，保證業(yè)務(wù)不中斷。負(fù)載均衡設(shè)備對(duì)外提供的服務(wù)稱為虛服務(wù)。虛服務(wù)由vpn實(shí)例、虛服務(wù)ip地址、服務(wù)協(xié)議、服務(wù)端口號(hào)唯一標(biāo)識(shí)，配置在負(fù)載均衡設(shè)備上。客戶的訪問(wèn)請(qǐng)求通過(guò)公共或私有網(wǎng)絡(luò)到達(dá)負(fù)載均衡設(shè)備，匹配到虛服務(wù)后，由負(fù)載均衡設(shè)備按照既定策略分發(fā)給真實(shí)服務(wù)。負(fù)載均衡提供了一種廉價(jià)、有效、透明的方法擴(kuò)展網(wǎng)絡(luò)設(shè)備和服務(wù)器的帶寬、增加吞吐量、加強(qiáng)網(wǎng)絡(luò)數(shù)據(jù)處理能力，提高網(wǎng)絡(luò)

54、的靈活性和可用性。負(fù)載均衡技術(shù)具有如下優(yōu)點(diǎn)：·高性能：通過(guò)調(diào)度算法，將客戶端請(qǐng)求合理地均衡到后端各臺(tái)服務(wù)器上，消除系統(tǒng)可能存在的瓶頸。·可擴(kuò)展性：當(dāng)服務(wù)的負(fù)載增長(zhǎng)時(shí)，系統(tǒng)能被擴(kuò)展來(lái)滿足需求，且不降低服務(wù)質(zhì)量。·高可用性：通過(guò)健康性檢測(cè)功能，能實(shí)時(shí)監(jiān)測(cè)應(yīng)用服務(wù)器的狀態(tài)，保證在部分硬件和軟件發(fā)生故障的情況下，整個(gè)系統(tǒng)的服務(wù)仍然可用。·透明性：高效地使由多個(gè)獨(dú)立計(jì)算機(jī)組成的松耦合的服務(wù)系統(tǒng)構(gòu)成一個(gè)虛服務(wù)器；客戶端應(yīng)用程序與服務(wù)系統(tǒng)交互時(shí)，就像與一臺(tái)高性能、高可用的服務(wù)器交互一樣，客戶端無(wú)須作任何修改。部分服務(wù)器的切入和切出不會(huì)中斷服務(wù)，而用戶覺(jué)察不到這些變化。

55、服務(wù)器負(fù)載均衡，顧名思義就是對(duì)一組服務(wù)器提供負(fù)載均衡業(yè)務(wù)。這一組服務(wù)器一般來(lái)說(shuō)都處于同一個(gè)局域網(wǎng)絡(luò)內(nèi)，并同時(shí)對(duì)外提供一組（或多組）相同（或相似）的服務(wù)。服務(wù)器負(fù)載均衡是數(shù)據(jù)中心最常見(jiàn)的組網(wǎng)模型。服務(wù)器負(fù)載均衡分為四層（l4）服務(wù)器負(fù)載均衡和七層（l7）服務(wù)器負(fù)載均衡兩種：·l4服務(wù)器負(fù)載均衡支持ipv4協(xié)議和ipv6協(xié)議，是基于流的服務(wù)器負(fù)載均衡，對(duì)報(bào)文進(jìn)行逐流分發(fā)，將同一條流的報(bào)文分發(fā)給同一個(gè)服務(wù)器。l4服務(wù)器負(fù)載均衡對(duì)基于http的7層業(yè)務(wù)無(wú)法做到按內(nèi)容進(jìn)行分發(fā)，限制了負(fù)載均衡業(yè)務(wù)的適用范圍。依據(jù)轉(zhuǎn)發(fā)方式，l4服務(wù)器負(fù)載均衡分為nat方式和dr方式。·l7服務(wù)器負(fù)載均衡

56、只支持ipv4協(xié)議，是基于內(nèi)容的服務(wù)器負(fù)載均衡，對(duì)報(bào)文的承載內(nèi)容進(jìn)行深度解析，包括http協(xié)議、rtsp協(xié)議等，根據(jù)其中的內(nèi)容進(jìn)行逐包分發(fā)，按既定策略將連接導(dǎo)向指定的服務(wù)器，實(shí)現(xiàn)了業(yè)務(wù)使用范圍更廣泛的服務(wù)器負(fù)載均衡。l7服務(wù)器負(fù)載均衡僅支持nat方式。第3章 系統(tǒng)需求分析現(xiàn)有的中國(guó)建設(shè)銀行數(shù)據(jù)中心應(yīng)用流量分析系統(tǒng)采用netscout和k2告警在很大程度上幫助建設(shè)銀行數(shù)據(jù)中心提高應(yīng)用的穩(wěn)定性和系統(tǒng)及應(yīng)用故障的快速恢復(fù)質(zhì)量。netscout系統(tǒng)擁有強(qiáng)大的圖形化網(wǎng)絡(luò)流量實(shí)時(shí)顯示功能,能夠幫助網(wǎng)絡(luò)維護(hù)人員分析網(wǎng)絡(luò)異常。每日netscout系統(tǒng)都會(huì)獲得大量的監(jiān)控?cái)?shù)據(jù)，但是管理人員不僅僅關(guān)注在某個(gè)時(shí)刻的數(shù)

57、據(jù)查看，更希望獲得每天每周每月甚至每年的經(jīng)過(guò)分析后的運(yùn)行報(bào)告。目前對(duì)于龐大的網(wǎng)絡(luò)流量監(jiān)控?cái)?shù)據(jù)的整理都是靠人工進(jìn)行的，需要花費(fèi)大量的人力和時(shí)間。網(wǎng)絡(luò)管理的最終目標(biāo)就是為了保障生產(chǎn)，保證系統(tǒng)高可用性和快速回復(fù)能力，保證應(yīng)用系統(tǒng)不間斷的正常運(yùn)行。隨著時(shí)代的進(jìn)步，建設(shè)銀行管理層發(fā)現(xiàn)，僅僅是等著故障出現(xiàn)后進(jìn)行快速搶修不能滿足需求。更好的辦法是盡可能的減少故障的出現(xiàn)，并能在故障出現(xiàn)后能夠快速恢復(fù)。而現(xiàn)有的netscout系統(tǒng)暫時(shí)不包含詳細(xì)和豐富的周報(bào)和月報(bào)功能，以及較為周全的提前預(yù)警情況 。因此，需要在現(xiàn)有的流量分析系統(tǒng)中進(jìn)行二次開(kāi)發(fā)，以便提供強(qiáng)有力的數(shù)據(jù)整理功能，幫助工作人員以最少的工作完成數(shù)據(jù)整理，并提供報(bào)表供決策者制定正確的決策。另外，原有系統(tǒng)中的告警功能，不能設(shè)置自定義基線，告警條目不足，在很大程度上限制了告警功能的使用。為此，本系統(tǒng)中也會(huì)包含針對(duì)原有系統(tǒng)的告警功能的不足而提出的新的解決方案。3.1系統(tǒng)功能概述ccb應(yīng)用網(wǎng)絡(luò)流量分析輔助系統(tǒng)需要解決的問(wèn)題主要有三方面：一：定期管理性報(bào)告。原有的定期管理報(bào)告具有以下缺陷：1. netscout報(bào)告只有圖形，無(wú)統(tǒng)計(jì)數(shù)字式的報(bào)表2. 報(bào)表只有pdf格式不可編輯，無(wú)法添加分析性的注解3. 通用的報(bào)告形式，針對(duì)客戶化定制的靈活性差4. 出具客戶化的報(bào)表需要手工制作，耗時(shí)長(zhǎng)工作量大