數(shù)據(jù)交換共享整合系統(tǒng)平臺建設(shè)方案詳細

數(shù)據(jù)交換共享整合協(xié)同平臺設(shè)計整合協(xié)同平臺的主要功能是從其它子系統(tǒng)中提取共享數(shù)據(jù),并對多來源渠行組織,以保證數(shù)據(jù)間關(guān)系的正確性、可理解性并防止數(shù)據(jù)冗余；以各種形式提供數(shù)據(jù)效勞,采用分層次的方法對各類用戶設(shè)置權(quán)限,使不同用戶既能獲得各自所需要的數(shù)據(jù),又能保證數(shù)據(jù)傳輸過程的平安性及共享數(shù)據(jù)的互操作性和互用性；維護根底信息、動態(tài)業(yè)務(wù)數(shù)據(jù)以及系統(tǒng)治理配置參數(shù)；支撐系統(tǒng)的網(wǎng)絡(luò)構(gòu)架、信息平安、網(wǎng)絡(luò)治理、流程治理、數(shù)據(jù)庫維護和備份等運維能力.整合協(xié)同平臺根據(jù)功能可分為兩個局第一局部,根底數(shù)據(jù)和共享數(shù)據(jù)的交換效勞和路由流程治理,該局部是交換平臺的根底,包括：靜態(tài)交換數(shù)據(jù)、動態(tài)交換數(shù)據(jù)、圖形數(shù)據(jù)及表格、統(tǒng)計資料等屬性數(shù)據(jù).第二局部,各子系統(tǒng)之間的接口實現(xiàn),根據(jù)事先制訂好的標準、標準,實現(xiàn)各子系統(tǒng)之間的數(shù)據(jù)共享和傳輸操作.在接入中央平臺時,應(yīng)按系統(tǒng)集成要求設(shè)計系統(tǒng)結(jié)構(gòu),各類數(shù)據(jù)接口遵循系統(tǒng)集成標準.第一章中央平臺設(shè)計整合協(xié)同平臺效勞器是公共根底平臺的核心局部,XMA整合協(xié)同平臺提供一整套一致性等數(shù)據(jù)交換問題,解決按需查詢、公共數(shù)據(jù)存取限制等問題.各業(yè)務(wù)子系統(tǒng)都要統(tǒng)一使用XMA整合協(xié)同平臺和制定數(shù)據(jù)交換標準.各業(yè)務(wù)部門通過數(shù)據(jù)級整合或者應(yīng)用級整合通過XMA整合協(xié)同平臺向數(shù)據(jù)中央提供數(shù)據(jù),也通過XMA整合協(xié)同平臺訪問共享數(shù)據(jù).共享數(shù)據(jù)庫的數(shù)據(jù)采集、更新、維護.業(yè)務(wù)資料庫、公共效勞數(shù)據(jù)庫的數(shù)據(jù)采集.提供平安可靠的共享數(shù)據(jù)效勞.業(yè)務(wù)部門之間的業(yè)務(wù)數(shù)據(jù)交換.結(jié)合工作流的協(xié)調(diào)數(shù)據(jù)效勞.傳輸治理傳輸治理治理、平安接口傳輸治理傳輸治理數(shù)據(jù)供需方的接口數(shù)據(jù)系統(tǒng)：為了滿足應(yīng)用層交換和數(shù)據(jù)層交換,交換代理必須葉會話治理：為了能提供數(shù)據(jù)的交換方式如主動〔推〕、被動〔拉〕；支持定時和實時策略,支持超時限制治理等功能,數(shù)據(jù)交換平臺必須有會話策略、會話限制和治理功能.數(shù)據(jù)治理：為了數(shù)據(jù)能按標準進行交換,能根據(jù)部署的路由規(guī)那么進行交換必須有數(shù)據(jù)路由、數(shù)據(jù)模板治理、數(shù)據(jù)解析、數(shù)據(jù)轉(zhuǎn)換等功能.為了和平安平臺結(jié)合,還必須有與平安平臺的接口設(shè)計功能.XMA整合協(xié)同平臺底層采用消息中間件技術(shù),實現(xiàn)可靠的數(shù)據(jù)傳輸.在應(yīng)用層基于效勞,實現(xiàn)數(shù)據(jù)交換,必須支持數(shù)據(jù)采集、數(shù)據(jù)匯總、數(shù)據(jù)分發(fā)、數(shù)據(jù)更新通知、數(shù)據(jù)段傳輸、數(shù)據(jù)壓縮/解壓縮、數(shù)據(jù)緩存等.共享數(shù)據(jù)是一個公共的資源,可以供多個業(yè)務(wù)系必須經(jīng)過用戶的驗證授權(quán)訪問.止匕外,還需要從數(shù)據(jù)中央運作的流程、規(guī)程制度等方面保證共享數(shù)據(jù)不被用于非法途徑.程中的平安要求就十分嚴格.XMA整合協(xié)同平臺必須提供平安機制保證數(shù)據(jù)交換信息合.通過平安認證平臺和XMA整合協(xié)同平臺,能夠保護交換信息內(nèi)容免遭隨著工程工程的推進,需要數(shù)據(jù)交換的部門會越來越多,XMA負載平衡的支持,在分布式的體系結(jié)構(gòu)上可以添加主機的方式提升整體計算水平,進行面向效勞的適應(yīng)性負載平衡.運行日志查看,性能統(tǒng)計.支持各個分支數(shù)據(jù)源匯總數(shù)據(jù)到數(shù)據(jù)中央.采集公共數(shù)據(jù)的過程可以看成是一個數(shù)據(jù)匯總的過程,通過XMA整合協(xié)同平臺將各業(yè)務(wù)部門的公共數(shù)據(jù)采集回來,聚集到數(shù)據(jù)中央的緩存數(shù)據(jù)庫.經(jīng)過數(shù)據(jù)治理系統(tǒng)的比對、校驗、轉(zhuǎn)換得到一致的數(shù)據(jù).數(shù)據(jù)分發(fā)是從數(shù)據(jù)中央的角度,主動向各數(shù)據(jù)使用數(shù)據(jù)效勞,依照數(shù)據(jù)使用權(quán)限的規(guī)那么,從數(shù)據(jù)中央把數(shù)據(jù)分發(fā)到各個數(shù)據(jù)使用部門,實現(xiàn)數(shù)據(jù)共享、信息聯(lián)動.XMA整合協(xié)同平臺提供實時按需的數(shù)據(jù)存取訪問效勞,通過統(tǒng)一標準的數(shù)據(jù)接口,數(shù)據(jù)交換效勞可以把某個數(shù)據(jù)庫的數(shù)據(jù)轉(zhuǎn)換成標準XML數(shù)據(jù)集轉(zhuǎn)換模塊,實現(xiàn)對各種異構(gòu)數(shù)據(jù)轉(zhuǎn)換到統(tǒng)一標準標準、具有一致性和完整性的公共數(shù)據(jù).數(shù)據(jù)接口系統(tǒng)應(yīng)該允許用戶自己配置和治理相關(guān)的效勞,如：數(shù)據(jù)提取服務(wù)、數(shù)據(jù)發(fā)送效勞、數(shù)據(jù)接收效勞、數(shù)據(jù)存儲效勞等.數(shù)據(jù)接口系統(tǒng)應(yīng)該是一個開放的系統(tǒng),要提供一些可擴充的接口以及二次開發(fā)接對數(shù)據(jù)效勞進行監(jiān)控治理,用戶權(quán)限治理,運行日志查看,性能統(tǒng)計.通過數(shù)據(jù)效效勞器平安治理配置.XMA整合協(xié)同平臺可以支持不同方式的機構(gòu)和系統(tǒng)間的數(shù)據(jù)交換與協(xié)同,基于文件交換的方式用于外部或內(nèi)部系統(tǒng)間非實時批量交換.基于WebServices效勞的數(shù)據(jù)交換方式主要用于外部機構(gòu)部門與數(shù)間實時的數(shù)據(jù)交換和業(yè)務(wù)協(xié)同應(yīng)用.XMLRPC等協(xié)議的無縫集成,支持這些應(yīng)用系統(tǒng)的接口,提供基于WebServices的應(yīng)用系統(tǒng)整適宜配器,并提供快速整合WebServices應(yīng)用的工具和接口API.數(shù)據(jù)提供方定義公開數(shù)據(jù)效勞,以效勞的形式封裝數(shù)據(jù)交換的內(nèi)容和協(xié)議數(shù)據(jù)使用方調(diào)用數(shù)據(jù)提供方的公開數(shù)據(jù)效勞以獲取所需的數(shù)據(jù),并且根據(jù)一定的數(shù)據(jù)轉(zhuǎn)換和數(shù)據(jù)更新規(guī)那么,把數(shù)據(jù)更新到本地數(shù)據(jù)源.通過本地數(shù)據(jù)效勞和公開數(shù)據(jù)效勞的交互實現(xiàn)數(shù)據(jù)提供方和數(shù)據(jù)使用方之間的數(shù)據(jù)交換.基于數(shù)據(jù)庫接口交換的方式主要用于內(nèi)部系統(tǒng)間的實時或非實時數(shù)據(jù)交換方式.交換的雙方通過定義發(fā)送和接收任務(wù)來進行數(shù)據(jù)庫接口的交換.根據(jù)交換的數(shù)據(jù)一種是數(shù)據(jù)不落地的數(shù)據(jù)交換.換數(shù)據(jù)庫中提取數(shù)據(jù),并根據(jù)定義好的模板打包生成標準的XML數(shù)據(jù)包,由定制好的發(fā)送路由發(fā)送給接收方.接收方接收到XML數(shù)據(jù)包后自動進行解包處理,并將數(shù)據(jù)存儲到接收方的前置機交換數(shù)據(jù)庫中.基于文件交換的方式主要用于外部或內(nèi)部的非實時批量數(shù)據(jù)交換方式.交換的雙方通過定義發(fā)送和接收任務(wù)來進行數(shù)據(jù)文件的交換.根據(jù)交換的數(shù)交換,一種是基于其他文件格式的數(shù)據(jù)交換.據(jù)庫中提取數(shù)據(jù),并根據(jù)定義好的模板打包生成標準的XML文件,由定制好的發(fā)送任務(wù)發(fā)送給接收方.接收方接收到XML文件后自動進行解包處理,并將數(shù)據(jù)存儲前置機交換數(shù)據(jù)庫中.基于其他文件格式的數(shù)據(jù)交換由業(yè)務(wù)系統(tǒng)將需要交換的數(shù)據(jù)文件放置到前置機上的規(guī)定路徑下,通過XMA整合協(xié)同平臺發(fā)送到目的地交由接收部門第二章平臺接口設(shè)計制定的接口標準內(nèi)容為整合協(xié)同平臺和各接入部門之間,系統(tǒng)互聯(lián)所涉及的數(shù)據(jù)交換接口.系統(tǒng)之間的信息傳輸和交換通過計算機系統(tǒng)成.數(shù)據(jù)接口信息平臺〞與接入部門信息系統(tǒng)之間通信的通用接口模型如下圖.運輸層以下層次的通信協(xié)議選用適宜的標準協(xié)議,運輸層和網(wǎng)絡(luò)層建議選用統(tǒng)一的TCP/IP協(xié)議,便于各節(jié)點之間組網(wǎng)傳輸,數(shù)據(jù)鏈路層和物理層可根據(jù)實際通信條件情況靈活選用,如ADSL、E1在整合協(xié)同平臺,根據(jù)對信息的各種需求,維護一個用于數(shù)據(jù)共享的標準數(shù)據(jù)注冊中央,采用標準化數(shù)據(jù)的方式向各接入系統(tǒng)及各應(yīng)用系統(tǒng)提供共享的信息；各接入系統(tǒng)在整合協(xié)同平臺處對應(yīng)維護一張數(shù)據(jù)字典,用于完成非標數(shù)據(jù)和標準數(shù)據(jù)的譯,從而向共享的標準數(shù)據(jù)庫提供標準化的數(shù)據(jù)信息；對于單一功能領(lǐng)域的特殊數(shù)據(jù)信息,系統(tǒng)提供在各子系統(tǒng)之間直接進行交換的途徑滿足特定功能的應(yīng)用需求；系統(tǒng)需要有一個專門的維護和治理機構(gòu),分別對系統(tǒng)的數(shù)據(jù)字典、標在數(shù)據(jù)傳輸中,由于系統(tǒng)數(shù)據(jù)的異構(gòu)特性,在數(shù)據(jù)發(fā)送接口和接收接口需要對數(shù)據(jù)格式根據(jù)數(shù)據(jù)字典的要求進行轉(zhuǎn)換,統(tǒng)一于標準的數(shù)據(jù)格式滿足應(yīng)用的要求.應(yīng)用層協(xié)議的分層設(shè)計,各層功能明確,層之間可通過標準化的接口進行調(diào)用和傳某一層協(xié)議的功能擴展或變化時,將不影響另一層協(xié)議的功能.采用數(shù)據(jù)登記標準的、基于XML格式的數(shù)據(jù)接口方案設(shè)計,靈活性比擬好,系統(tǒng)擴展方便,適合接入系統(tǒng)的增加或接入信息內(nèi)容的擴展,有利于滿足新的系統(tǒng)接入和系統(tǒng)開展的需求.數(shù)據(jù)傳輸協(xié)議基于一些主流的、成熟的數(shù)據(jù)傳輸協(xié)議,能很好適應(yīng)系統(tǒng)擴展的需求.數(shù)據(jù)中央通過XMA整合協(xié)同平臺以數(shù)據(jù)效勞的方式從各業(yè)務(wù)部保存到公共數(shù)據(jù)緩存庫,然后使用公共數(shù)據(jù)治理維護系統(tǒng)進行數(shù)據(jù)比對、沖突檢查、數(shù)據(jù)審核、數(shù)據(jù)轉(zhuǎn)換.當數(shù)據(jù)到達一致性、完整性要求時,數(shù)據(jù)被發(fā)布到公共數(shù)據(jù)發(fā)布庫,通過XMA整合協(xié)同平臺以數(shù)據(jù)效勞的形式提供數(shù)據(jù)使用方訪問.該系統(tǒng)不僅要能夠滿足基于現(xiàn)狀條件下對信息資源的整合利用和標準管理,還要適應(yīng)未來對信息資源的深度開發(fā)和多媒體信息資源庫擴展的要求..1資源目錄治理的結(jié)構(gòu)數(shù)據(jù)標準標準治理,與XMA整合協(xié)同平臺結(jié)合,提供數(shù)據(jù)轉(zhuǎn)換、整理、發(fā)布等功能.丁數(shù)據(jù)共享交換平臺/數(shù)據(jù)采集、更新、維護、使用機制/數(shù)據(jù)標準標準.2資源目錄治理的功能元數(shù)據(jù)目錄集中治理數(shù)據(jù)元數(shù)據(jù)的發(fā)布與維護,系統(tǒng)授權(quán)給分系統(tǒng)治理員完成對本部門元數(shù)據(jù)的維護工作..2.2效勞注冊與接口發(fā)布.專業(yè)資料.學(xué)習參考.建立業(yè)務(wù)部門數(shù)據(jù)于標準標準數(shù)據(jù)的轉(zhuǎn)換映射關(guān)系和轉(zhuǎn)換規(guī)那么,將業(yè)務(wù)部門的數(shù)據(jù)轉(zhuǎn)換為符合標準標準的數(shù)據(jù).數(shù)據(jù)轉(zhuǎn)換重用數(shù)據(jù)整合協(xié)同平臺的功能.數(shù)據(jù)中央通過XMA整合協(xié)同平臺從區(qū)級數(shù)據(jù)中央及各業(yè)務(wù)部門采集數(shù)據(jù)并放據(jù)中央的緩存數(shù)據(jù)庫中,然后通過數(shù)據(jù)治理系統(tǒng)對數(shù)據(jù)進行比對、清洗,檢查數(shù)據(jù)沖突,對數(shù)據(jù)進行審核校驗.保證數(shù)據(jù)一致性、完整性.布.因此必須提供主題治理功能.主題治理重用數(shù)據(jù)整合協(xié)同平臺的功能.為方便對數(shù)據(jù)中央的治理和維護,需要一套功能完整的運行治理與監(jiān)控維護系統(tǒng),保證整個數(shù)據(jù)中央系統(tǒng)和信息資源的高可靠、高可控和高效.運行管理系統(tǒng)主要提供應(yīng)數(shù)據(jù)中央的系統(tǒng)治理人員使用,用于保證數(shù)據(jù)中央的平安可靠和高效運行.其功能主要包括面向平安性的用戶治理、權(quán)限治理和密碼治理；面向可面向運行治理機制的信息治理等.提供滿足監(jiān)測統(tǒng)計要求的功能,提供對檢測日志內(nèi)容勞器、網(wǎng)絡(luò)設(shè)備、備份和存儲設(shè)備、數(shù)據(jù)交換節(jié)點設(shè)備和系統(tǒng)等.運行監(jiān)控治理要涉及不同領(lǐng)域的多種協(xié)議和接口-比方SN治理,桌面治理接口〔DMI〕用于桌面系統(tǒng)治理系統(tǒng)環(huán)境.WBEM有兩個關(guān)鍵的組成局部〔但有可能會使用更多的標準,比方使用X運行治理與監(jiān)控系統(tǒng)通過數(shù)據(jù)整合協(xié)同平臺的資源治理體系和智能代理共同來完代理層代理層—智能代理智能智能代理代理JMX標準包含假設(shè)干現(xiàn)有標準治理協(xié)議的JavaAJMX標準向業(yè)界各領(lǐng)域的用戶提供了裝配代碼、創(chuàng)立智能代理、實現(xiàn)分布式治理中間件和治理者的方式,并且可使這些解決方案平滑的集成到現(xiàn)有治理系統(tǒng)中.另外JMX標準也提供了假設(shè)干現(xiàn)有標準治理技術(shù)的JavaAPI.JMX側(cè)重治理軟件架構(gòu)和數(shù)據(jù)而WBEM那么側(cè)重治理網(wǎng)絡(luò)設(shè)備,他們各有分工又互相合作.第三章平安認證治理在工程中,根據(jù)需求把平安認證平臺應(yīng)用到每個功能和模塊.平安認證在技術(shù)上采用了大量先進成熟的平安技術(shù),支持的功能和相應(yīng)的數(shù)字簽名等保證舉措,來認證用戶、實體的身份,保證消息的完整性和交易的不可否認性,保證交易平安通信通道：通過SSL等標準的平安通道協(xié)議,提供通信層的平安,保障通信雙方的身份正確性,通道和會話的私密性,消息的完整性和交易的不可否認性.平安總線技術(shù)特性身份認證(Authentication)平安總線技術(shù)特性單點登錄(SingleSign-on)授權(quán)訪問限制(Authorization)可定制的訪問限制列表(ACL)權(quán)限治理(Group,User,Action,Permission)插件式的數(shù)據(jù)加密模塊的部署支持平安通信協(xié)議,如SSL,HTTPS...集成其他平安效勞兼容LDAP,NTDomain等平安效勞下列圖表示數(shù)據(jù)在應(yīng)用層交換的請求/響應(yīng)流程圖證之外,還包括了數(shù)據(jù)的加解密過程.系統(tǒng)技術(shù)實現(xiàn)的優(yōu)勢特性換方式.系統(tǒng)的穩(wěn)定性和性能已經(jīng)在多個政府、銀行、電信中得到應(yīng)用.數(shù)據(jù)共享交換平臺設(shè)計了統(tǒng)一的治理總線和平安總線接口、采用了即插即即插即用的柔性架構(gòu)使系統(tǒng)有足夠好的可擴展水平,各局部之間必須是松散耦合的,每個局部系統(tǒng)中的新增的模塊只需要在一處配置,可以被多個子系統(tǒng)共享的水平.保證系統(tǒng)必須保證在廣域網(wǎng)環(huán)境下的具有足夠的平安性,符合信息化建設(shè)中的平安要求,輸即插即用協(xié)議棧：可靠傳輸TCP/UDP隊列協(xié)議存儲轉(zhuǎn)發(fā)…群組消息協(xié)議發(fā)布/訂閱,P2P-其他協(xié)議故障檢測…可靠傳遞協(xié)議丟包重傳…數(shù)據(jù)傳輸協(xié)議其他部門或綜合應(yīng)用提供支撐,如公共效勞系統(tǒng)、決策支持系統(tǒng)等,真正做到成為企業(yè)信息系統(tǒng)的樞紐.第四章系統(tǒng)水平及性能指標XMA整合協(xié)同平臺效勞器是任務(wù)關(guān)鍵系統(tǒng),縱向聯(lián)接多級系統(tǒng),橫向聯(lián)接多個業(yè)務(wù)部門,系統(tǒng)結(jié)構(gòu)復(fù)雜、業(yè)務(wù)量大、吞吐量高,需要具備良好的平安性、穩(wěn)定性、可用性、可伸縮性和可擴展性.XMA整合協(xié)同平臺的技術(shù)路線采用SOA、EAI、ETL、XML等大量成熟的先進技術(shù),架構(gòu)在展性的應(yīng)用需求.通過提供統(tǒng)一的集成平臺降低了資源整合和應(yīng)用的本錢和復(fù)雜性,同時提供對現(xiàn)有應(yīng)用程序集成強有力支持.XMA整合協(xié)同平臺是各個部門建設(shè)業(yè)務(wù)系統(tǒng)的一個標準架構(gòu),作為數(shù)據(jù)中央的平臺建設(shè),必須能滿足及支持區(qū)域性體系架構(gòu)的要求.系統(tǒng)遵循國際主流的SOA架構(gòu)體系,采用先進、主流、可靠、平好的系統(tǒng)架構(gòu),具有優(yōu)秀的技術(shù)水平和性能指標.米用面向效勞架構(gòu)〔SOA〕設(shè)計和企業(yè)效勞總線〔ESB政好的移植性.數(shù)據(jù)庫接口方式,支持主流關(guān)系型數(shù)據(jù)庫的接口,包括了ORACLE、SQLSERVERSYBASEDB2等基于文件交換方式,支持基于自定義格式的文件交換支持效勞、消息、數(shù)據(jù)庫、文件等多種交換方式,并具有良支持大數(shù)據(jù)包的交換,進行分塊傳輸,數(shù)據(jù)量大小不應(yīng)受限制,在保證一定數(shù)據(jù)傳輸速度的同時,可防止占用全部網(wǎng)絡(luò)交換路由治理,提供基于動態(tài)路由的交換,可加置拓批量數(shù)據(jù)交換由數(shù)據(jù)抽取工具完成,支持數(shù)據(jù)抽取、數(shù)據(jù)清洗、數(shù)據(jù)比對、數(shù)據(jù)校驗、數(shù)據(jù)轉(zhuǎn)換等處理,支持異構(gòu)數(shù)據(jù)OracleSybaseSQLServ