版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)
文檔簡介
combatlab出品某大型企業(yè)廣域網(wǎng)項目詳細設(shè)計方案
v2
大型企業(yè)全國廣域網(wǎng)項目
詳細設(shè)計方案
Version2
Combat-lab
2018年10月
目錄
第一章項目概述.................................................................4
1.1項目目標..................................................................4
1.1.1總體目標...................................................................................................................4
1.1.2時期目標...................................................................................................................4
1.2設(shè)計原則..................................................................5
第二章應(yīng)用分析.................................................................7
2.1應(yīng)用分類..................................................................7
2.1.1應(yīng)用系統(tǒng)總體框架...................................................................................................7
2.1.2業(yè)務(wù)系統(tǒng)應(yīng)用分類...................................................................................................8
2.1.3信息治理系統(tǒng)應(yīng)用分類............................................................................................9
2.2數(shù)據(jù)中心及分行定位.......................................................10
2.2.1時期一.....................................................................................................................10
2.2.2時期二.....................................................................................................................10
2.2.3時期三.....................................................................................................................11
第三章設(shè)備配置................................................................12
3.1差不多原則................................................................12
3.1.1命名規(guī)范.................................................................................................................12
3.1.2端口分配.................................................................................................................13
3.2北京數(shù)據(jù)中心.............................................................14
3.2.1設(shè)備配置..................................................................................................................14
3.2.2端口分配.................................................................................................................14
3.3上海數(shù)據(jù)中心.............................................................15
3.3.1設(shè)備配置..................................................................................................................15
3.3.2端口分配.................................................................................................................15
3.4一級分行.................................................................15
3.4.1設(shè)備配置..................................................................................................................15
3.4.2端口分酉已................................................................................................................16
第四章網(wǎng)絡(luò)結(jié)構(gòu)................................................................17
4.1網(wǎng)絡(luò)結(jié)構(gòu)設(shè)計原則.........................................................17
4.2網(wǎng)絡(luò)結(jié)構(gòu)時期分析.........................................................17
4.2.1時期一.....................................................................................................................17
4.2.2時期二.....................................................................................................................19
4.2.3時期三,...................................................................................................................21
4.3分行接入標準.............................................................22
4.3.1時期一.....................................................................................................................22
4.3.2時期二.....................................................................................................................23
4.3.3時期三,...................................................................................................................23
第五章冗余策略................................................................25
5.1拓撲冗余策略..............................................................25
5.1.1拓撲冗余策略設(shè)計原則..................................................25
5.1.2拓撲冗余策略(時期一)...............................................25
5.1.3拓撲冗余策略(時期二)...............................................27
5.1.4拓撲冗余策略(時期三)...............................................29
5.2運營商、設(shè)備、板卡冗余策略......................................................................................32
5.2.1運營商、設(shè)備、板卡冗余策略設(shè)計原則...................................32
5.2.2運營商、設(shè)備、板卡冗余策略時期一、二、三(核心骨干網(wǎng)).............32
5.2.3運營商、設(shè)備、板卡冗余策略時期一、二(一級骨干網(wǎng)).................34
5.2.4運營商、設(shè)備、板卡冗余策略時期三(一級骨干網(wǎng)).....................35
第六章路由策略.....................................................................................................................39
6.1路由總體規(guī)劃................................................................................................................39
6.1.1路由協(xié)議選擇..........................................................39
6.1.2路由協(xié)議部署(時期一、~)...........................................40
6.1.3路由協(xié)議部署(時期三)...............................................41
6.2廣域網(wǎng)路由策略...........................................................................................................42
6.2.1時期一、二............................................................42
6.2.2時期三................................................................45
6.3廣域區(qū)路由策略...........................................................................................................47
6.3.1時期一、二............................................................47
6.3.2時期三,...............................................................51
6.4局域網(wǎng)路由策略...........................................................................................................55
6.4.1時期一、二............................................................55
6.4.2時期三................................................................55
第七章流量工程.....................................................................................................................57
7.1流量分布.......................................................................................................................57
7.1.1時期一,...............................................................57
7.1.2時期二................................................................57
7.1.3時期三,...............................................................58
7.2QoS策略......................................................................................................................59
7.2.1總體策略..............................................................59
7.2.2時期一、~............................................................61
7.2.3時期三................................................................62
第八章網(wǎng)絡(luò)安全.....................................................................................................................64
8.1網(wǎng)絡(luò)安全原則................................................................................................................64
8.2設(shè)備安全.......................................................................................................................64
8.3業(yè)務(wù)安全.......................................................................................................................67
8.3.1時期一、二............................................................67
8.3.2時期三,...............................................................68
第九章IP地址分配................................................................................................................70
9.1IP地址分配原則...........................................................................................................70
9.2IP地址具體分配...........................................................................................................70
第十章網(wǎng)絡(luò)治理................................................................73
10.1網(wǎng)管系統(tǒng)選擇............................................................73
10.1.1選擇原則.............................................................73
10.1.2網(wǎng)元治理軟件.........................................................73
10.2網(wǎng)管系統(tǒng)部署............................................................74
第一章項目概述
1.1項目目標
1.1.1總體目標
隨著中南民族大學(xué)信息化建設(shè)的進行,到目前為止,中差不多建成以北京數(shù)
據(jù)中心為核心連接36個一級分行的一級骨干網(wǎng),在一級分行以下,建成了連接
各二級分行的二級網(wǎng)和連接縣支行的三級網(wǎng),網(wǎng)絡(luò)覆蓋所有營業(yè)網(wǎng)點,從而形成
了覆蓋X行所有機構(gòu)的全國網(wǎng)整體架構(gòu)。
本次X行廣域網(wǎng)項目,要緊是對X行現(xiàn)有MGX一級骨干網(wǎng)的替換更新以
及北京、上海之間核心骨干網(wǎng)的建設(shè),將一級骨干網(wǎng)從基于ATM交換的傳輸網(wǎng)
絡(luò)升級成純IP路由的數(shù)據(jù)網(wǎng)絡(luò),以更好的滿足X行業(yè)務(wù)進展的需要。
中國XX銀行廣域網(wǎng)的建設(shè)范疇包括:
>北京數(shù)據(jù)中心和上海數(shù)據(jù)中心之間的核心骨干網(wǎng)絡(luò)。
>一級分行與北京數(shù)據(jù)中心、上海數(shù)據(jù)中心之間的全國一級骨干網(wǎng)。
廣域網(wǎng)建設(shè)的總體目標是,在統(tǒng)籌考慮X行全行業(yè)務(wù)需求和進展的基礎(chǔ)上,
兼顧遠期進展目標,滿足上海生產(chǎn)中心及北京備援中心建設(shè)需要,構(gòu)建兩個數(shù)據(jù)
中心間以及以兩個數(shù)據(jù)中心為核心、連接36個一級分行的高效、穩(wěn)固、安全可
靠的廣域網(wǎng)絡(luò)。
1.1.2時期目標
中國XX銀行廣域網(wǎng)建設(shè)是一個長期的過程,本著統(tǒng)一規(guī)劃、分步實施的差
不多原則,總體上分為三個時期,各時期的具體目標如下:
>時期一(分行上連北京)
北京數(shù)據(jù)中心與上海數(shù)據(jù)中心之間高速骨干網(wǎng)物理連通,由于上海中心
尚未投入運行,核心骨干網(wǎng)并不承載實際的業(yè)務(wù)數(shù)據(jù)。
36個一級分行完成到北京數(shù)據(jù)中心的廣域上連,所有生產(chǎn)業(yè)務(wù)從原有的
MGX網(wǎng)切換至分行到北京的廣域鏈路上,實現(xiàn)生產(chǎn)業(yè)務(wù)直截了當上連北京
數(shù)據(jù)中心。
>時期二(分行上連北京上海)
上海數(shù)據(jù)中心正式投入運行,核心骨干網(wǎng)為兩個數(shù)據(jù)中心之間生產(chǎn)業(yè)務(wù)
的通訊提供高速互連通道。
36家一級分行完成到上海數(shù)據(jù)中心的廣域上連,生產(chǎn)業(yè)務(wù)(除開發(fā)測試
以外)從分行到北京的廣域鏈路切換至分行到上海的廣域鏈路上,實現(xiàn)生產(chǎn)
業(yè)務(wù)直截了當上連上海數(shù)據(jù)中心,測試業(yè)務(wù)直截了當上連北京數(shù)據(jù)中心。
>時期三(業(yè)務(wù)整合和鏈路優(yōu)化)
廣域網(wǎng)區(qū)合并,辦公業(yè)務(wù)接入廣域網(wǎng),實現(xiàn)生產(chǎn)辦公融合。
北京數(shù)據(jù)中心為全行的治理決策中心,上海中心為生產(chǎn)運行中心,核心
骨干網(wǎng)同時承載生產(chǎn)和辦公業(yè)務(wù)。
一級骨干網(wǎng)鏈路進行優(yōu)化,減少一級分行上連北京數(shù)據(jù)中心和上海數(shù)據(jù)
中心的廣域鏈路,使網(wǎng)絡(luò)結(jié)構(gòu)趨于完善,原先用于承載辦公業(yè)務(wù)的MGX網(wǎng)
絡(luò)退出使用,實現(xiàn)廣域網(wǎng)建設(shè)的最終目標。
1.2設(shè)計原則
中國XX銀行廣域網(wǎng)建設(shè)作為中國XX銀行網(wǎng)絡(luò)建設(shè)的重要組成部分,應(yīng)遵
循以下差不多原則:
>規(guī)范性
設(shè)計方案遵從X行相關(guān)網(wǎng)絡(luò)規(guī)范,包括廣域網(wǎng)建設(shè)規(guī)范、IP地址規(guī)范、數(shù)
據(jù)中心建設(shè)規(guī)范等,保證廣域網(wǎng)建設(shè)與其他系統(tǒng)建設(shè)的一致性。
>標準性
技術(shù)標準化,使用開放、標準的主流技術(shù)及協(xié)議,確保網(wǎng)絡(luò)的開放互連和升
級擴展。
>可靠性
網(wǎng)絡(luò)高可用性,網(wǎng)絡(luò)架構(gòu)必須能夠達到/超過業(yè)務(wù)系統(tǒng)對服務(wù)級別的要求。
通過多層次的冗余連接考慮,以及設(shè)備自身的冗余支持使得整個架構(gòu)在任意部分
都能夠滿足業(yè)務(wù)系統(tǒng)不間斷的連接需求。
>安全性
集成安全手段,網(wǎng)絡(luò)安全同時考慮生產(chǎn)系統(tǒng)和辦公系統(tǒng)數(shù)據(jù)的完整和安全。
網(wǎng)絡(luò)架構(gòu)需要具有支持整套安全體系實施的能力,以確保用戶、合作伙伴和職員
生產(chǎn)、辦公的安全。
>擴展性
可伸縮的網(wǎng)絡(luò)架構(gòu),網(wǎng)絡(luò)架構(gòu)在功能、容量、覆蓋能力等各方面具有易擴展
能力,以適應(yīng)快速的業(yè)務(wù)進展對基礎(chǔ)架構(gòu)的要求。
>易治理性
高效網(wǎng)絡(luò)治理,網(wǎng)絡(luò)架構(gòu)采納分層模塊化設(shè)計,同時配合整體網(wǎng)絡(luò)/系統(tǒng)治
理,優(yōu)化網(wǎng)絡(luò)/系統(tǒng)治理和支持愛護。
第二章應(yīng)用分析
2.1應(yīng)用分類
2.1.1應(yīng)用系統(tǒng)總體框架
X行應(yīng)用系統(tǒng)總體框架如下圖所示:
業(yè)務(wù)系統(tǒng)信息辭系統(tǒng)
總行AR1S系統(tǒng)[交換系統(tǒng)[網(wǎng)上銀行決策系統(tǒng)|信息系統(tǒng)|報表
金融眼務(wù)信息系統(tǒng)
一級前置系統(tǒng)前置系統(tǒng)
分行應(yīng)用開本地特本地信
色服務(wù)息服務(wù)
各種
接入
X行網(wǎng)絡(luò)所承載的應(yīng)用系統(tǒng)有兩大類:
第一類是業(yè)務(wù)系統(tǒng)應(yīng)用,是XX銀行對外開展業(yè)務(wù)的應(yīng)用系統(tǒng)的集合,包括
核心銀行系統(tǒng)、中間業(yè)務(wù)系統(tǒng)、國際業(yè)務(wù)系統(tǒng)等:
>核心銀行系統(tǒng):這是X行最重要的業(yè)務(wù)系統(tǒng),支持銀行大部分服務(wù)的渠
道,包括ABIS系統(tǒng)、交換系統(tǒng)、網(wǎng)上銀行?,F(xiàn)在核心銀行系統(tǒng)差不多
在大多數(shù)省份推廣使用,有部分省份的數(shù)據(jù)差不多上收到北京中心。
>中間業(yè)務(wù)系統(tǒng):支持各類代理業(yè)務(wù)(代繳費、代發(fā)工資等),各類投資
業(yè)務(wù)(保險、證券等),各類地點性聯(lián)行交換業(yè)務(wù)(同城交換等)。
>國際業(yè)務(wù)系統(tǒng):包括SWIFT、外匯寶系統(tǒng)等。
>客服中心。
針對以上應(yīng)用,一級分行放置了以下前置系統(tǒng):
>綜合應(yīng)用前置系統(tǒng):MIDS是分行各前置應(yīng)用系統(tǒng)與總行數(shù)據(jù)中心主機
之間的應(yīng)用網(wǎng)關(guān)。
>金融服務(wù)前置系統(tǒng):Tulip是一個開發(fā)和運行銀行延伸應(yīng)用的平臺。支
持各類代理業(yè)務(wù)(代繳費、代發(fā)工資等),各類投資業(yè)務(wù)的前置應(yīng)用(保
險、證券等),各類地點性聯(lián)行交換業(yè)務(wù)(同城交換等)。
>綜合業(yè)務(wù)系統(tǒng)中間層前置:AIPS包括銀行卡受理應(yīng)用(聯(lián)網(wǎng)聯(lián)合、貸
記卡受理、國際卡受理)、現(xiàn)金治理系統(tǒng)前置應(yīng)用(CMF)、支付結(jié)算類
應(yīng)用(大額支付、跨中心匯兌、漫游匯款、銀行匯票系統(tǒng)、西聯(lián)匯款)。
第二類是信息治理類應(yīng)用,是XX銀行支持企業(yè)信息治理、企業(yè)決策的應(yīng)用
系統(tǒng)和辦公自動化系統(tǒng)的集合,是企業(yè)治理的核心應(yīng)用平臺,包括:
>信貸治理系統(tǒng)(CMS)
>電子郵件系統(tǒng)
>遠程教育系統(tǒng)
>數(shù)據(jù)采集系統(tǒng)
>數(shù)據(jù)分析系統(tǒng)
>財務(wù)治理系統(tǒng)
>視頻會議系統(tǒng)
>IP
2.1.2業(yè)務(wù)系統(tǒng)應(yīng)用分類
依照顧用所使用網(wǎng)絡(luò)連接的特點,能夠?qū)I(yè)務(wù)系統(tǒng)的應(yīng)用分為兩類:
>聯(lián)機類
聯(lián)機類指實時交互的應(yīng)用,如ABIS、網(wǎng)上銀行、交換系統(tǒng)等,這類應(yīng)用
的特點是對時延要求比較敏銳,需要在短時刻內(nèi)完成數(shù)據(jù)的傳遞和確認,然
而數(shù)據(jù)通訊量較小。
聯(lián)機類應(yīng)用的保證等級要求專門高,大部分核心應(yīng)用屬于聯(lián)機性質(zhì),部
署QoS時需要給聯(lián)機應(yīng)用分配較高的優(yōu)先級,同時通過相應(yīng)的QoS機制保
證聯(lián)機業(yè)務(wù)的時延和帶寬。
>批量類
批量類指非實時交互的應(yīng)用,如FTP、報表傳遞等,這類應(yīng)用的特點是
數(shù)據(jù)量大,有一定突發(fā)性,承諾一定的時延,但需確保在一段時刻內(nèi)完成數(shù)
據(jù)的傳輸。
批量類應(yīng)用的保證等級要求較高,一樣是非核心的業(yè)務(wù)應(yīng)用,部署QoS
時給批量應(yīng)用分配較低的優(yōu)先級,通過相應(yīng)的QoS機制保證批量業(yè)務(wù)的帶
寬。
2.1.3信息治理系統(tǒng)應(yīng)用分類
依照顧用所使用網(wǎng)絡(luò)連接的特點,能夠?qū)⑿畔⒅卫硐到y(tǒng)的應(yīng)用分為兩類:
>聯(lián)機類
聯(lián)機類指實時交互的應(yīng)用,如視頻、語音、notes,email.信貸治理系統(tǒng)
等,這類應(yīng)用的特點是對時延要求比較敏銳,需要在短時刻內(nèi)完成數(shù)據(jù)的傳
遞和確認,然而數(shù)據(jù)通訊量較小。
聯(lián)機類應(yīng)用的保證等級要求專門高,大部分核心應(yīng)用屬于聯(lián)機性質(zhì),部
署QoS時需要給聯(lián)機應(yīng)用分配較高的優(yōu)先級,同時通過相應(yīng)的QoS機制保
證聯(lián)機業(yè)務(wù)的時延和帶寬。專門關(guān)于視頻、語音類應(yīng)用,對時延和抖動專門
敏銳,應(yīng)該將它們放入最高優(yōu)先級隊列,以獲得最佳的網(wǎng)絡(luò)服務(wù)。
>批量類
批量類指非實時交互的應(yīng)用,如FTP、報表傳遞等,這類應(yīng)用的特點是
數(shù)據(jù)量大,有一定突發(fā)性,承諾一定的時延,但需確保在一段時刻內(nèi)完成數(shù)
據(jù)的傳輸。
批量類應(yīng)用的保證等級要求較高,一樣是非核心的業(yè)務(wù)應(yīng)用,部署QoS
時給批量應(yīng)用分配較低的優(yōu)先級,通過相應(yīng)的QoS機制保證批量業(yè)務(wù)的帶
寬。
2.2數(shù)據(jù)中心及分行定位
在廣域網(wǎng)建設(shè)的不同時期,北京、上海數(shù)據(jù)中心和一級分行所承擔的職責(zé)會
發(fā)生相應(yīng)的變化,最終北京中心將成為治理決策中心,上海成為生產(chǎn)運行中心。
2.2.1時期一
數(shù)據(jù)中心及分行的功能定位如下:
>北京數(shù)據(jù)中心
所有業(yè)務(wù)(生產(chǎn)、辦公)的運行中心,也是一級骨干網(wǎng)的接入中心。各一級
分行完成到北京數(shù)據(jù)中心的廣域上連,生產(chǎn)業(yè)務(wù)切換至分行到北京的廣域鏈路。
>上海數(shù)據(jù)中心
上海數(shù)據(jù)中心還在建設(shè)之中,不對外提供任何服務(wù),各一級分行至上海數(shù)據(jù)
中心的廣域鏈路也沒有到位。
>一級分行
各一級分行將生產(chǎn)業(yè)務(wù)切換至廣域網(wǎng),辦公業(yè)務(wù)仍舊運行在MGX網(wǎng)上。部
分一級分行完成局域網(wǎng)改造和廣域網(wǎng)區(qū)的建設(shè),以規(guī)范組網(wǎng)方式接入廣域網(wǎng),其
他分行局域網(wǎng)尚未改造,以簡單模式接入廣域網(wǎng)。
2.2.2時期二
數(shù)據(jù)中心及分行的功能定位如下:
>北京數(shù)據(jù)中心
辦公業(yè)務(wù)、測試業(yè)務(wù)的運行中心,是全行的治理決策中心,生產(chǎn)業(yè)務(wù)的備援
中心。生產(chǎn)聯(lián)機業(yè)務(wù)從北京數(shù)據(jù)中心遷移至上海數(shù)據(jù)中心,其他生產(chǎn)業(yè)務(wù)也會連
續(xù)遷移到上海數(shù)據(jù)中心,最后北京數(shù)據(jù)中心只留下辦公業(yè)務(wù)和測試業(yè)務(wù)。
>上海數(shù)據(jù)中心
生產(chǎn)聯(lián)機業(yè)務(wù)的運行中心,也是全行生產(chǎn)業(yè)務(wù)的廣域接入中心。上海數(shù)據(jù)中
心正式投入運行后,北京數(shù)據(jù)中心的要緊生產(chǎn)業(yè)務(wù)會逐步搬遷過來,隨著上海數(shù)
據(jù)中心提供服務(wù)的增加,最終成為全行所有生產(chǎn)業(yè)務(wù)的運行中心。
>一級分行
各一級分行的生產(chǎn)業(yè)務(wù)從上連北京的廣域鏈路切換至上連上海的廣域鏈路
上,辦公業(yè)務(wù)仍舊運行在MGX網(wǎng)上。尚未完成局域網(wǎng)改造的分行開始進行局域
網(wǎng)改造工作,實現(xiàn)所有分行以統(tǒng)一的規(guī)范組網(wǎng)模式接入廣域網(wǎng)。
2.2.3時期三
數(shù)據(jù)中心及分行的功能定位如下:
>北京數(shù)據(jù)中心
辦公業(yè)務(wù)、測試業(yè)務(wù)的運行中心,是全行的治理決策中心,同時也是生產(chǎn)業(yè)
務(wù)的備援中心。
>上海數(shù)據(jù)中心
生產(chǎn)業(yè)務(wù)的運行中心,為全行提供生產(chǎn)服務(wù)。
>一級分行
各一級分行的生產(chǎn)業(yè)務(wù)、辦公業(yè)務(wù)一起運行在廣域網(wǎng)上,廣域網(wǎng)區(qū)合并,上
連北京和上海數(shù)據(jù)中心的廣域鏈路進行優(yōu)化,MGX設(shè)備停用。
第三章設(shè)備配置
3.1差不多原則
3.1.1命名規(guī)范
本次廣域網(wǎng)項目所涉及設(shè)備的命名規(guī)范遵循《中國XX銀行全國數(shù)據(jù)中心及
災(zāi)備中心網(wǎng)絡(luò)建設(shè)治理規(guī)范》的相關(guān)規(guī)定,設(shè)備命名規(guī)則將采納字母與數(shù)字結(jié)合
的方法,具體規(guī)則為:
字段L字段2一字段3nn
各字段的含義如下表:
字段名稱字段含義
字段1字段1用于標識設(shè)備安裝地點,對X行全國數(shù)據(jù)中心和災(zāi)備中心為:
都市+大樓+行級+樓層
其中:
>都市
北京:BJ
上海:SH
>大樓
北京豐臺大樓:FT
上海XX大樓:XX(具體大樓待定)
>樓層
一樓:01
二樓:02
其余類推
>行級
數(shù)據(jù)中心:0
一級分行:1
二級分行:2
三級支行:3
4保留
網(wǎng)點:5
下掛ATM:6
字段2字段2用于標識功能區(qū),依照X行全國數(shù)據(jù)中心和災(zāi)備中心的整體網(wǎng)絡(luò)架構(gòu),
定義為:
>核心區(qū):CO
>生產(chǎn)區(qū):PR
主機單機/開放平臺子區(qū):PH
主機Sysplex子區(qū):PS
字段名稱字段含義
>測試區(qū)TE
主機單機/開放平臺子區(qū):TH
主機Sysplex子區(qū):TS
>運行治理區(qū):OM
>MIS服務(wù)區(qū):MS
>生產(chǎn)外聯(lián)區(qū):EX
Internet接入子區(qū):EI
合作伙伴接入子區(qū):EP
>辦公接入?yún)^(qū):OA
>廣域網(wǎng)區(qū):WN
字段3字段3用于標識設(shè)備功能,,依照X行全國數(shù)據(jù)中心和災(zāi)備中心的整體邏輯層
次,定義為:
>核心層交換機:CS
>分布層交換機:DS
>接入層交換機:AS
>接入層路由器:AR
>防火墻:FW
>Sniffer:SNF
>VPN網(wǎng)關(guān):VG
>四層交換機:LB
>流量治理設(shè)備:PS
>IDS入侵檢測:IDS
>F5智能DNS:DNS
>ALO四層交換機:ALO
nnnn用于標識網(wǎng)絡(luò)設(shè)備編號,范疇為01-99
3.1.2端口分配
設(shè)備端口的分配遵循以下原則:
>端口分配遵循板卡冗余的差不多原則,盡可能分布在不同的板卡上。
>同一塊板卡內(nèi)部,端口依照端口編號從低到高分配。
>同一層次設(shè)備的端口分配策略盡可能一致。
>北京數(shù)據(jù)中心、上海數(shù)據(jù)中心一級骨干路由器下連36家一級分行,每
臺路由器上分配4個端口,分別下連ABCD四類分行,總帶寬平均的分
布在4個物理端口上,ABCD與一級分行的ID號對應(yīng)關(guān)系如下:
A:2M(101、104-105、107),4M(102-103.106、108),6M(110),
總帶寬為30Mo
B:2M(112、114、121、123、125),4M(109、113、116),6M(111),
總帶寬為28Mo
C:2M(126-129),4M(117-118,120、122、),6M(115),總帶寬為
30Mo
D:2M(130、134、138-140),4M(124、131、141),6M(119),總
帶寬為28M。
3.2北京數(shù)據(jù)中心
3.2.1設(shè)備配置
核心骨干路由器為2臺NE80,一級骨干路由器也為2臺NE80,設(shè)備詳細
配置如下:
名稱詳細描述數(shù)量
核心骨干路由器QuidwayNE80路由器(4端口GBIC光接口線路板、22
端口622MPOS單模光接口線路板、VRP5.10)
一級骨干路由器QuidwayNE80路由器(4端口GBIC光接口線路板、42
端口155MATM單模光接口線路板、VRP5.10)
網(wǎng)管工作站SunFireV490Server2
網(wǎng)元治理軟件QuidviewDM2
3.2.2端口分配
每臺核心骨干路由器通過I個POS端口與上海數(shù)據(jù)中心的核心骨干路由器
互連,2個1000M光口分別與2臺廣域區(qū)交換機互連。
每臺一級骨干路由器通過2個1000M光口分別與2臺廣域區(qū)交換機互連,4
個ATM端口與36個一級分行互連。
具體的端口互連方式參見方案附件表格。
3.3上海數(shù)據(jù)中心
3.3.1設(shè)備配置
核心骨干路由器為2臺NE80,一級骨干路由器也為2臺NE80,設(shè)備詳細
配置如下:
名稱詳細描述數(shù)量
核心骨干路由器QuidwayNE80路由器(4端口GBIC光接口線路板、22
端口622MPOS單模光接口線路板、VRP5.10)
一級骨干路由器QuidwayNE80路由器(4端口GBIC光接口線路板、42
端口155MATM單模光接口線路板、VRP5.10)
網(wǎng)管工作站SunFireV490Server2
網(wǎng)元治理軟件QuidviewDM2
3.3.2端口分配
每臺核心骨干路由器通過1個POS端口與北京數(shù)據(jù)中心的核心骨干路由器
互連,2個1000M光口分別與2臺廣域區(qū)交換機互連。
每臺一級骨干路由器通過2個1000M光口分別與2臺廣域區(qū)交換機互連,4
個ATM端口與36個一級分行互連。
具體的端口互連方式參見方案附件表格。
3.4一級分行
3.4.1設(shè)備配置
18個使用NE80路由器的一級分行,一級骨干路由器為2臺NE80,設(shè)備詳
細配置如下:
名稱詳細描述數(shù)量
一級骨干路由器QuidwayNE80路由器(4端口GBIC光接口線路板、42
端口155MATM單模光接口線路板、VRP5.10)
18個使用NE40路由器的一級分行,一級骨干路由器為2臺NE40,設(shè)備詳
細配置如下:
名稱詳細描述數(shù)量
一級骨干路由器QuidwayNE40路由器(4端口GBIC光接口線路板、82
端口155MATM單模光接口線路板、VRP5.10)
3.4.2端口分配
每臺一級骨干路由器通過2個ATM端口分別與北京、上海數(shù)據(jù)中心互連,
2個1000M光口分別與2臺廣域區(qū)交換機互連。
具體的端口互連方式參見方案附件表格。
第四章網(wǎng)絡(luò)結(jié)構(gòu)
4.1網(wǎng)絡(luò)結(jié)構(gòu)設(shè)計原則
中國XX銀行廣域網(wǎng)建設(shè)總體上分為三個時期,網(wǎng)絡(luò)結(jié)構(gòu)隨著時期的遞進逐
步完善,每個時期的網(wǎng)絡(luò)結(jié)構(gòu)設(shè)計原則如下:
>鏈路設(shè)計原則
核心骨干網(wǎng)使用POS鏈路,一級骨干網(wǎng)使用ATM鏈路。
>帶寬設(shè)計原則
核心骨干網(wǎng)使用高帶寬鏈路,保證數(shù)據(jù)中心之間的高速數(shù)據(jù)交換,一級骨干
網(wǎng)依照一級分行實際業(yè)務(wù)量分配帶寬。
>拓撲設(shè)計原則
廣域網(wǎng)建設(shè)初期(時期一、二),拓撲設(shè)計以鏈路冗余可靠為主,一級分行
雙鏈路分別上連北京數(shù)據(jù)中心和上海數(shù)據(jù)中心,廣域網(wǎng)建設(shè)后期(時期三),網(wǎng)
絡(luò)差不多運行穩(wěn)固,考慮到核心骨干鏈路的充分利用和一級骨干網(wǎng)的鏈路優(yōu)化,
逐步減少一級分行上連北京數(shù)據(jù)中心和上海數(shù)據(jù)中心的鏈路數(shù)量。
4.2網(wǎng)絡(luò)結(jié)構(gòu)時期分析
在廣域網(wǎng)建設(shè)的三個時期,廣域網(wǎng)建設(shè)逐步深入,網(wǎng)絡(luò)結(jié)構(gòu)連續(xù)優(yōu)化。網(wǎng)絡(luò)
結(jié)構(gòu)要緊包括鏈路、帶寬、拓撲三個方面,每個時期的網(wǎng)絡(luò)結(jié)構(gòu)都圍繞這三個方
面進行設(shè)計。
4.2.1時期一
生產(chǎn)和辦公相互獨立,廣域網(wǎng)由生產(chǎn)網(wǎng)和辦公網(wǎng)兩部分組成,由于上海中心
并未投產(chǎn),核心骨干網(wǎng)并不承載實際業(yè)務(wù)數(shù)據(jù)。廣域網(wǎng)網(wǎng)絡(luò)結(jié)構(gòu)如下:
>鏈路設(shè)計
在生產(chǎn)網(wǎng)中,核心骨干網(wǎng)使用2條POS鏈路互連北京數(shù)據(jù)中心和上海數(shù)據(jù)
中心,一級骨干網(wǎng)中每家一級分行使用2條ATM鏈路上連北京數(shù)據(jù)中心。
核心骨干網(wǎng)互連北京、上海兩個數(shù)據(jù)中心,網(wǎng)絡(luò)流量專門大,需要使用高速
鏈路互連。SDH是高速廣域鏈路技術(shù)的唯獨選擇,能夠提供高于155M(STM-1)
的帶寬。
一級骨干網(wǎng)互連北京數(shù)據(jù)中心和36家一級分行,為中心、分支網(wǎng)絡(luò)結(jié)構(gòu),
網(wǎng)絡(luò)流量中等,適合采納ATM鏈路技術(shù)。ATM是一種基于虛電路(VC)交換
的鏈路技術(shù),能夠在單個物理接口上配置多條VC,專門適用于中心、分支的網(wǎng)
絡(luò)結(jié)構(gòu),而且ATM能夠提供專門靈活的帶寬單位,從2M至155M不等。
在辦公網(wǎng)中,核心骨干網(wǎng)使用2條POS鏈路互連北京數(shù)據(jù)中心和上海數(shù)據(jù)
中心,一級骨干網(wǎng)使用原先的MGX網(wǎng)絡(luò)。
>帶寬設(shè)計
在生產(chǎn)網(wǎng)中,核心骨干網(wǎng)2條POS鏈路的帶寬為每條622M(STM-4),一
級骨干網(wǎng)中每家一級分行2條ATM鏈路的帶寬為每條2M、4M、6M不等。
核心骨干網(wǎng)的2條622M鏈路要緊用于兩個數(shù)據(jù)中心的高速數(shù)據(jù)交換,其上
承載生產(chǎn)聯(lián)機和生產(chǎn)批量數(shù)據(jù)。
一級骨干網(wǎng)中,每家分行通過2條等值帶寬的ATM鏈路上連北京數(shù)據(jù)中心,
分別用于承載生產(chǎn)聯(lián)機、生產(chǎn)批量(測試)數(shù)據(jù)。依照每個一級分行的實際業(yè)務(wù)
流量,具體帶寬分配如下:
2M:西藏、寧夏、廈門、大連、寧波、海南、青島、甘肅、山西、貴州、
新疆、青海、北京、內(nèi)蒙、吉林、江西、安徽、陜西。
4M:深圳、廣西、河南、福建、上海、河北、四川、天津、黑龍江、遼寧、
重慶、云南、湖北、湖南。
6M:浙江、山東、江蘇、廣東。
在辦公網(wǎng)中,核心骨干網(wǎng)2條POS鏈路的帶寬為每條155M,一級骨干網(wǎng)使
用原先的MGX網(wǎng)絡(luò)。
>拓撲設(shè)計
在生產(chǎn)網(wǎng)中,北京數(shù)據(jù)中心和上海數(shù)據(jù)中心通過高速鏈路互連,形成完整的
核心骨干網(wǎng)結(jié)構(gòu)。一級分行完成與北京數(shù)據(jù)中心的互連,一級骨干網(wǎng)結(jié)構(gòu)初步形
成。
生產(chǎn)業(yè)務(wù)從MGX網(wǎng)全部切換至分行至北京的一級骨干網(wǎng)上,MGX網(wǎng)不再
承載任何生產(chǎn)數(shù)據(jù)。由于上海中心尚未投產(chǎn),所有生產(chǎn)業(yè)務(wù)仍舊位于北京數(shù)據(jù)中
心,一級分行的生產(chǎn)聯(lián)機和生產(chǎn)批量(測試)等業(yè)務(wù)通過廣域網(wǎng)直截了當上連北
京數(shù)據(jù)中心。
在辦公網(wǎng)中,北京數(shù)據(jù)中心和上海數(shù)據(jù)中心通過高速鏈路互連,用于兩個中
心之間的辦公業(yè)務(wù)通訊,一級骨干網(wǎng)使用MGX網(wǎng)絡(luò)。
4.2.2時期二
生產(chǎn)和辦公相互獨立,廣域網(wǎng)由生產(chǎn)網(wǎng)和辦公網(wǎng)兩部分組成,上海中心正式
投入運行,要緊生產(chǎn)業(yè)務(wù)遷移至上海數(shù)據(jù)中心。廣域網(wǎng)網(wǎng)絡(luò)結(jié)構(gòu)如下:
A
>鏈路設(shè)計
在生產(chǎn)網(wǎng)中,核心骨干網(wǎng)使用2條POS鏈路互連北京數(shù)據(jù)中心和上海數(shù)據(jù)
中心,一級骨干網(wǎng)中每家一級分行使用4條ATM鏈路上連北京和上海數(shù)據(jù)中心。
一級骨干網(wǎng)中每家一級分行增加了2條上連上海中心的ATM鏈路,使一級
骨干網(wǎng)的網(wǎng)絡(luò)結(jié)構(gòu)更加完善。
在辦公網(wǎng)中,核心骨干網(wǎng)使用2條POS鏈路互連北京數(shù)據(jù)中心和上海數(shù)據(jù)
中心,一級骨干網(wǎng)使用原先的MGX網(wǎng)絡(luò)。
>帶寬設(shè)計
在生產(chǎn)網(wǎng)中,核心骨干網(wǎng)2條POS鏈路的帶寬為每條622M,一級骨干網(wǎng)中
每家一級分行4條ATM鏈路的帶寬為每條2M、4M、6M不等。
核心骨干網(wǎng)2條622M鏈路不僅提供兩個數(shù)據(jù)中心的高速數(shù)據(jù)交換,而且為
一級分行提供迂回通訊路徑。
一級骨干網(wǎng)中,每家分行通過4條等值帶寬的ATM鏈路上連北京和上海數(shù)
據(jù)中心,上連上海數(shù)據(jù)中心的2條ATM鏈路用于承載生產(chǎn)聯(lián)機、生產(chǎn)批量數(shù)據(jù),
上連北京數(shù)據(jù)中心的鏈路用于承載測試數(shù)據(jù)。每個一級分行ATM鏈路的帶寬分
配值與時期一相同。
在辦公網(wǎng)中,核心骨干網(wǎng)2條POS鏈路的帶寬為每條155M,一級骨干網(wǎng)使
用原先的MGX網(wǎng)絡(luò)。
>拓撲設(shè)計
在生產(chǎn)網(wǎng)中,北京數(shù)據(jù)中心和上海數(shù)據(jù)中心通過高速鏈路互連,形成核心骨
干網(wǎng)結(jié)構(gòu)。一級分行增加與上海數(shù)據(jù)中心的連接,實現(xiàn)同時與北京和上海數(shù)據(jù)中
心的互連,形成完整的一級骨干網(wǎng)結(jié)構(gòu)。
一級分行直連上海數(shù)據(jù)中心后,數(shù)據(jù)通訊路徑發(fā)生改變,一級分行的生產(chǎn)聯(lián)
機通訊直截了當上連上海數(shù)據(jù)中心,生產(chǎn)批量通訊經(jīng)上海數(shù)據(jù)中心到達北京數(shù)據(jù)
中心,測試通訊直截了當上連北京數(shù)據(jù)中心。
在辦公網(wǎng)中,北京數(shù)據(jù)中心和上海數(shù)據(jù)中心通過高速鏈路互連,用于兩個中
心之間的辦公業(yè)務(wù)通訊,一級骨干網(wǎng)使用MGX網(wǎng)絡(luò)。
4.2.3時期三
生產(chǎn)和辦公實現(xiàn)業(yè)務(wù)整合,辦公網(wǎng)并入生產(chǎn)網(wǎng),統(tǒng)一成一個廣域網(wǎng)。廣域網(wǎng)
網(wǎng)絡(luò)結(jié)構(gòu)如下:
>鏈路設(shè)計
核心骨干網(wǎng)使用2條POS鏈路互連北京和上海數(shù)據(jù)中心,一級骨干網(wǎng)中每
家一級分行使用3條(或2條)ATM鏈路上連北京和上海數(shù)據(jù)中心。
一級骨干網(wǎng)鏈路會逐步減少,一級分行上連北京和上海數(shù)據(jù)中心的鏈路從4
條減至3條,甚至2條。通過減少一級骨干鏈路能夠優(yōu)化網(wǎng)絡(luò)結(jié)構(gòu),提高核心骨
干網(wǎng)的利用率。
>帶寬設(shè)計
核心骨干網(wǎng)2條POS鏈路的帶寬為2條622M,一級骨干網(wǎng)中每家一級分行
的ATM鏈路的帶寬總量不變。
核心骨干網(wǎng)的2條622M鏈路分別用于承載生產(chǎn)和辦公業(yè)務(wù),在故障情形下
能夠互相備份。
一級骨干網(wǎng)中,每家分行通過3條(或2條)鏈路上連北京和上海數(shù)據(jù)中心,
帶寬總量不變,減少鏈路的帶寬增加至同個數(shù)據(jù)中心(北京或上海)的剩余廣域
鏈路上。
>拓撲設(shè)計
北京數(shù)據(jù)中心和上海數(shù)據(jù)中心通過高速鏈路互連,形成核心骨干網(wǎng)結(jié)構(gòu)。一
級分行同時上連北京數(shù)據(jù)中心和上海數(shù)據(jù)中心,形成一級骨干網(wǎng)結(jié)構(gòu)。
一級骨干網(wǎng)將對鏈路進行優(yōu)化,每個一級分行的上連鏈路從4條逐步精簡到
3條,最后2條。一級分行的所有生產(chǎn)類通訊直截了當上連上海數(shù)據(jù)中心,所有
辦公類通訊直截了當上連北京數(shù)據(jù)中心。
生產(chǎn)、辦公二網(wǎng)融合,全部業(yè)務(wù)切換至廣域網(wǎng)。MGX網(wǎng)上不再承載任何數(shù)
據(jù),在廣域網(wǎng)運行一段時刻后,MGX網(wǎng)絡(luò)將退出使用。
4.3分行接入標準
北京、上海數(shù)據(jù)中心的局域網(wǎng)建設(shè)是完全符合數(shù)據(jù)中心建設(shè)規(guī)范要求的,達
到了廣域網(wǎng)接入的全部條件。一級分行的局域網(wǎng)改造工作相對滯后,無法在廣域
網(wǎng)建設(shè)之前完全達到規(guī)范組網(wǎng)的要求,因此在廣域網(wǎng)建設(shè)的不同時期制定不同的
分行接入標準,以保證所有的分行具備廣域網(wǎng)接入條件。
4.3.1時期一
一級分行廣域接入的網(wǎng)絡(luò)結(jié)構(gòu)如下:
生產(chǎn)局域網(wǎng)
一級分行的廣域網(wǎng)接入標準如下:
>局域網(wǎng)結(jié)構(gòu)
一級分行的生產(chǎn)局域網(wǎng)尚未改造完成,沒有形成統(tǒng)一的生產(chǎn)局域網(wǎng)核心,生
產(chǎn)上連區(qū)直截了當與廣域區(qū)相連。
>廣域區(qū)結(jié)構(gòu)
由分行提供2臺三層交換機,完成廣域區(qū)內(nèi)部的網(wǎng)絡(luò)互連,廣域區(qū)交換機直
截了當與生產(chǎn)上連區(qū)交換機相連。
4.3.2時期二
一級分行廣域接入的網(wǎng)絡(luò)結(jié)構(gòu)如下:
一級分行的廣域網(wǎng)接入標準如下:
>局域網(wǎng)結(jié)構(gòu)
生產(chǎn)局域網(wǎng)改造完成,生產(chǎn)上連區(qū)回來生產(chǎn)核心區(qū),通過生產(chǎn)核心區(qū)接入廣
域區(qū)。
>廣域區(qū)結(jié)構(gòu)
廣域區(qū)交換機直截了當與生產(chǎn)局域網(wǎng)的核心交換機相連。
4.3.3時期三
一級分行廣域接入的網(wǎng)絡(luò)結(jié)構(gòu)如下:
一級分行的廣域網(wǎng)接入標準如下:
>局域網(wǎng)結(jié)構(gòu)
辦公局域網(wǎng)改造完成,整個局域網(wǎng)結(jié)構(gòu)達到一級分行數(shù)據(jù)中心建設(shè)規(guī)范要
求。將辦公局域網(wǎng)也接入廣域區(qū),實現(xiàn)二網(wǎng)融合。
>廣域區(qū)結(jié)構(gòu)
生產(chǎn)和辦公的廣域區(qū)合并,廣域區(qū)交換機同時與生產(chǎn)局域網(wǎng)核心交換機和辦
公局域網(wǎng)核心交換機相連。
第五章冗余策略
5.1拓撲冗余策略
5.1.1拓撲冗余策略設(shè)計原則
拓撲冗余策略是指網(wǎng)絡(luò)拓撲結(jié)構(gòu)所提供的冗余能力,通過合理設(shè)計網(wǎng)絡(luò)拓撲
結(jié)構(gòu)能夠提高網(wǎng)絡(luò)的可靠性和使用效率,網(wǎng)絡(luò)拓撲冗余策略的設(shè)計原則如下:
>數(shù)據(jù)分流
廣域鏈路正常情形下,不同類別的應(yīng)用運行在不同的廣域鏈路上,以充分利
用廣域網(wǎng)絡(luò)帶寬。
北京數(shù)據(jù)中心為治理決策中心,所有辦公類業(yè)務(wù)(包括測試)運行在上連北
京數(shù)據(jù)中心的廣域鏈路上,上海數(shù)據(jù)中心為生產(chǎn)業(yè)務(wù)中心,所有生產(chǎn)類業(yè)務(wù)
運行在上連上海的廣域鏈路上,與應(yīng)用實際所在的位置(北京數(shù)據(jù)中心或上
海數(shù)據(jù)中心)無關(guān)。
>冗余備份
廣域鏈路故障情形下,原先運行在故障鏈路上的應(yīng)用能夠迅速切換到其他正
常的廣域鏈路上,保證業(yè)務(wù)的不間斷運行。
冗余備份策略分為兩個層次,包括數(shù)據(jù)中心內(nèi)部的冗余和數(shù)據(jù)中心之間的冗
余。當鏈路發(fā)生故障時,第一在數(shù)據(jù)中心內(nèi)部查找備份鏈路,假如本中心內(nèi)
沒有任何可用鏈路,再查找跨數(shù)據(jù)中心的備份鏈路。
5.1.2拓撲冗余策略(時期一)
>核心骨干網(wǎng)
核心骨干網(wǎng)網(wǎng)絡(luò)拓撲結(jié)構(gòu)如下:
上海數(shù)據(jù)中心
核心骨干網(wǎng)由2條POS622M鏈路構(gòu)成,由于上海數(shù)據(jù)中心還在建設(shè)之中,
核心骨干網(wǎng)上并沒有數(shù)據(jù)流量。
>一級骨干網(wǎng)
一級骨干網(wǎng)網(wǎng)絡(luò)拓撲結(jié)構(gòu)如下:
一級骨干網(wǎng)中每個一級分行由2條ATM鏈路構(gòu)成,上連北京數(shù)據(jù)中心,分
別承載生產(chǎn)聯(lián)機和生產(chǎn)批量(測試)等業(yè)務(wù),業(yè)務(wù)與鏈路的對應(yīng)關(guān)系如下:
業(yè)務(wù)類型生產(chǎn)聯(lián)機生產(chǎn)批量
(測試)
線路序號
一級分行到北京數(shù)據(jù)12
中心鏈路一
一級分行到北京數(shù)據(jù)2
中心鏈路二
注:表格中的數(shù)字標識鏈路選擇的順序,數(shù)字小的優(yōu)先.
在網(wǎng)絡(luò)正常條件下,生產(chǎn)聯(lián)機業(yè)務(wù)運行在一級骨干網(wǎng)鏈路一(一級分行到北
京數(shù)據(jù)中心鏈路一)上,生產(chǎn)批量(測試)業(yè)務(wù)運行在一級骨干網(wǎng)鏈路二(一級
分行到北京數(shù)據(jù)中心的鏈路二)上。
當一級骨干網(wǎng)鏈路一發(fā)生故障時,其上承載的生產(chǎn)聯(lián)機業(yè)務(wù)切換至一級骨干
網(wǎng)鏈路二。
當一級骨干網(wǎng)鏈路二發(fā)生故障時,其上承載的生產(chǎn)批量(測試)業(yè)務(wù)切換至
一級骨干網(wǎng)鏈路一。
5.1.3拓撲冗余策略(時期二)
>核心骨干網(wǎng)
核心骨干網(wǎng)網(wǎng)絡(luò)拓撲結(jié)構(gòu)如下:
核心骨干網(wǎng)由2條POS622M鏈路構(gòu)成,分別承載生產(chǎn)聯(lián)機和生產(chǎn)批量(測
試)等業(yè)務(wù),業(yè)務(wù)與鏈路的對應(yīng)關(guān)系如下:
業(yè)務(wù)類型生產(chǎn)聯(lián)機生產(chǎn)批量
線路序號
北京數(shù)據(jù)中心到上海12
數(shù)據(jù)中心鏈路一
北京數(shù)據(jù)中心到上海21
數(shù)據(jù)中心鏈路二
在網(wǎng)絡(luò)正常條件下,生產(chǎn)聯(lián)機業(yè)務(wù)運行在核心骨干網(wǎng)鏈路一上,生產(chǎn)批量業(yè)
務(wù)運行在核心骨干網(wǎng)鏈路二上。
當核心骨干網(wǎng)鏈路一發(fā)生故障時,其上承載的生產(chǎn)聯(lián)機業(yè)務(wù)切換至核心骨干
網(wǎng)鏈路二。
當核心骨干網(wǎng)鏈路二發(fā)生故障時,其上承載的生產(chǎn)批量業(yè)務(wù)切換至核心骨干
網(wǎng)鏈路一。
>一級骨干網(wǎng)
一級骨干網(wǎng)網(wǎng)絡(luò)拓撲結(jié)構(gòu)如下:
一級骨干網(wǎng)中每個一級分行由4條ATM鏈路構(gòu)成,分別承載生產(chǎn)聯(lián)機和生
產(chǎn)批量、測試等業(yè)務(wù),業(yè)務(wù)與鏈路的對應(yīng)關(guān)系如下:
業(yè)務(wù)類型生產(chǎn)聯(lián)機生產(chǎn)批量測試
線路序號
一級分行到北京數(shù)據(jù)342
中心鏈路一
一級分行到北京數(shù)據(jù)431
中心鏈路二
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 云南警官學(xué)院《柳琴戲藝術(shù)概論》2023-2024學(xué)年第一學(xué)期期末試卷
- 配電設(shè)施運行安全與事故預(yù)防制度
- 餐廳業(yè)績月度總結(jié)模板
- 業(yè)務(wù)操作-房地產(chǎn)經(jīng)紀人《業(yè)務(wù)操作》真題匯編3
- 全球旅游業(yè)年度總結(jié)模板
- 三育人先進個人主要事跡
- 二零二五年飯店員工勞動合同及員工培訓(xùn)經(jīng)費保障合同2篇
- 人教版三年級數(shù)學(xué)下冊第四單元兩位數(shù)乘兩位數(shù)綜合卷(含答案)
- 二零二五版小學(xué)教師崗位績效評價與激勵機制合同3篇
- 煙臺南山學(xué)院《工程管理專業(yè)概論》2023-2024學(xué)年第一學(xué)期期末試卷
- 人工智能趣味科普系列
- 工藝工程師的專業(yè)技能培養(yǎng)
- 第二章 新聞評論中的觀點
- SAP財務(wù)操作說明
- 會議室設(shè)備安裝培訓(xùn)課件
- 檢驗科培訓(xùn)課件
- 京東物流倉儲管理現(xiàn)狀及對策探析
- 管溝開挖教學(xué)課件
- 催收公司管理制度
- 房屋托管培訓(xùn)課件
- 醫(yī)療器械推廣合作協(xié)議
評論
0/150
提交評論