政務數(shù)據(jù)交換技術(shù)方案

數(shù)據(jù)交換中間件技術(shù)方案目錄1 工程概況 42 與業(yè)務應用接入關(guān)系 42.1 與已有業(yè)務系統(tǒng)的支撐關(guān)系 42.2 與新建業(yè)務系統(tǒng)的支撐關(guān)系 42.3 與業(yè)務系統(tǒng)之間的公共支撐關(guān)系 53 總體技術(shù)路線 53.1 JAVAEE標準 53.2 中間件技術(shù) 53.3 SOA效勞體系架構(gòu) 63.4 ESB企業(yè)效勞總線 73.5 異構(gòu)系統(tǒng)適配器效勞 73.6 XSLT效勞 83.7 WebServices 83.8 消息隊列技術(shù) 84 數(shù)據(jù)交換技術(shù)方案 94.1 需求分析 94.2 產(chǎn)品配置 104.3 產(chǎn)品部署 115 交換監(jiān)控擴展設計 125.1 功能圖 125.2 功能描述 126 ESB效勞總線系統(tǒng)功能 136.1 效勞封裝 13 XML數(shù)據(jù)表示 13 適配器效勞 14 數(shù)據(jù)描述工具 14 數(shù)據(jù)自動同步功能 156.2 共享交換機制 15 實時交換機制 15 定時交換機制 16 單向交換機制 16 雙向交換機制 166.3 效勞庫及管理 166.4 效勞編排功能 17 效勞編排 17 數(shù)據(jù)加工 18 效勞流程合成 196.5 數(shù)據(jù)可靠傳輸通道 196.6 效勞管理監(jiān)控 22 效勞資源管理 22 效勞流程管理 22 效勞流程監(jiān)控 22 平安及授權(quán)機制 23 效勞流程日志 257 硬件建議配置 258 方案特點 269 產(chǎn)品介紹 279.1 應用集成中間件TongIntegratorSOA套件 27 產(chǎn)品概述 27 產(chǎn)品組成結(jié)構(gòu) 28 產(chǎn)品特點 309.2 消息中間件TongLINK/Q 31 產(chǎn)品概述 31 主要功能 31 技術(shù)特點 339.3 應用效勞器中間件TongWeb 34 產(chǎn)品概述 34 主要功能 35 技術(shù)特點 4010 工程預算 41工程概況隨著政府職能部門效勞意識的不斷增強，以及便民效勞需求的日益增加，外網(wǎng)接件內(nèi)網(wǎng)辦理等應用需求越來越多。面對越來越多內(nèi)外網(wǎng)系統(tǒng)、專網(wǎng)與其他網(wǎng)絡之間數(shù)據(jù)信息平安、高效、可靠共享交換的需求，亟需一套平安、高效、可靠的數(shù)據(jù)信息共享交換解決方案。業(yè)務數(shù)據(jù)交換是一個跨多系統(tǒng)、跨網(wǎng)絡、跨防火墻〔網(wǎng)閘〕，不同平安域之間數(shù)據(jù)平安、可靠交換的信息系統(tǒng)，需要確保內(nèi)外網(wǎng)數(shù)據(jù)交換的一致性，以及數(shù)據(jù)交換的平安、可靠、高效。公司專注于國產(chǎn)根底中間件領(lǐng)域，在我國電子政務根底支撐平臺體系、數(shù)據(jù)信息資源共享交換等政務信息化領(lǐng)域的研究建設工作，公司產(chǎn)品廣泛應用在全國一百多個電子政務數(shù)據(jù)共享交換平臺體系建設工程中，得到用戶的高度認可和支持。與業(yè)務應用接入關(guān)系與已有業(yè)務系統(tǒng)的支撐關(guān)系數(shù)據(jù)交換系統(tǒng)建設不涉及原有專業(yè)系統(tǒng)的內(nèi)部業(yè)務流程，而是要求業(yè)務系統(tǒng)通過松耦合的“橋接”方式將數(shù)據(jù)資源提供給平臺。橋接技術(shù)上可以是數(shù)據(jù)結(jié)果、程序接口、URL地址、WebService接口等。數(shù)據(jù)交換系統(tǒng)為業(yè)務應用提供數(shù)據(jù)資源效勞。對需要獲取的應用系統(tǒng)數(shù)據(jù)資源經(jīng)過采集、轉(zhuǎn)換處理、傳輸、寫入數(shù)據(jù)庫中供給用系統(tǒng)使用。既可以實現(xiàn)上級機構(gòu)向上級機構(gòu)系統(tǒng)聚集數(shù)據(jù)，又可以實現(xiàn)上級機構(gòu)系統(tǒng)向下級機構(gòu)數(shù)據(jù)共享下發(fā)，同時可實現(xiàn)各應用系統(tǒng)的流程集成效勞。數(shù)據(jù)交換系統(tǒng)為業(yè)務應用提供界面及用戶認證效勞。對需要集成的應用系統(tǒng)，可以將一個外部的URL資源做為用戶表單的一局部與其他常用HTML組件組合在一起使用，利用外部應用頁面豐富表單元素。與新建業(yè)務系統(tǒng)的支撐關(guān)系對于新建業(yè)務系統(tǒng)，數(shù)據(jù)交換系統(tǒng)只需要擴展一個接入節(jié)點可以采集并共享的數(shù)據(jù)交換傳輸給新建業(yè)務系統(tǒng)，提供數(shù)據(jù)共享效勞。效勞的技術(shù)實現(xiàn)可以是數(shù)據(jù)庫、消息、WebService等多種方式。與業(yè)務系統(tǒng)之間的公共支撐關(guān)系ESB效勞總線是連接各應用系統(tǒng)的公共數(shù)據(jù)共享傳輸通道。各業(yè)務系統(tǒng)可以通過數(shù)據(jù)交換系統(tǒng)的適配器接入，由ESB企業(yè)效勞總線來完成適配器效勞之間的消費關(guān)系。消費關(guān)系可以是直接消費、間接消費。直接消費通過ESB進行內(nèi)部效勞合成，直接為業(yè)務系統(tǒng)效勞；間接消費通過ESB的效勞注冊中心，進行公共效勞發(fā)布，可檢索、查詢、代理運行等多種方式，供其外部調(diào)用?？傮w技術(shù)路線JAVAEE標準為了保證高可用性、高可靠性和可擴展性，系統(tǒng)必須要選擇支持強大的企業(yè)級計算的成熟的技術(shù)路線。能夠滿足這些條件的技術(shù)首推JAVAEE企業(yè)標準。JAVAEE是主流的開發(fā)技術(shù)平臺，已成IT領(lǐng)域的國際工業(yè)標準，圍繞著JAVAEE有眾多的廠家和產(chǎn)品，其中不乏優(yōu)秀的軟件產(chǎn)品，合理集成以JAVAEE為標準的軟件產(chǎn)品構(gòu)建數(shù)據(jù)交換系統(tǒng)，可以得到較好的穩(wěn)定性、高可靠性和擴展性。JAVAEE技術(shù)的根底是JAVA語言，JAVA語言的與操作系統(tǒng)平臺無關(guān)性，保證了基于JAVAEE平臺開發(fā)的應用系統(tǒng)和支撐環(huán)境可以跨平臺運行。中間件技術(shù)中間件具有以下的一些特點：滿足大量應用的需要；運行于多種硬件和OS平臺；支持分布式計算，提供跨網(wǎng)絡、硬件和OS平臺的透明性的應用或效勞的交互功能；支持標準的協(xié)議；支持標準的接口。程序員通過調(diào)用中間件提供的大量API，實現(xiàn)異構(gòu)環(huán)境的通訊，從而屏蔽異構(gòu)系統(tǒng)中復雜的操作系統(tǒng)和網(wǎng)絡協(xié)議。針對不同的操作系統(tǒng)和硬件平臺，它們可以有符合接口和協(xié)議標準的多種實現(xiàn)。由于標準接口對于可移植性和標準協(xié)議對于互操作性的重要性，中間件已成為許多標準化工作的主要局部。對于應用軟件開發(fā)，中間件遠比操作系統(tǒng)和網(wǎng)絡效勞更為重要，中間件提供的程序接口定義了一個相對穩(wěn)定的高層應用環(huán)境，不管底層的計算機硬件和系統(tǒng)軟件怎樣更新?lián)Q代，只要將中間件升級更新，并保持中間件對外的接口定義不變，應用軟件幾乎不需任何修改，從而保護了企業(yè)在應用軟件開發(fā)和維護中的重大投資。中間件是一種獨立的系統(tǒng)軟件或效勞程序，分布式應用軟件借助這種軟件在不同的技術(shù)之間共享資源。中間件軟件管理著市民端程序和數(shù)據(jù)庫或者早期應用軟件之間的通訊。中間件在分布式的市民和效勞之間扮演著承上啟下的角色，如事務管理、負載均衡以及基于Web的計算等。利用這些技術(shù)有助于減輕開發(fā)者的負擔，使他們利用現(xiàn)有的硬件設備、操作系統(tǒng)、網(wǎng)絡、數(shù)據(jù)庫管理系統(tǒng)以及對象模型創(chuàng)立分布式應用軟件時更加得心應手。由于中間件能夠保護企業(yè)的投資，保證應用軟件的相對穩(wěn)定，實現(xiàn)應用軟件的功能擴展；同時中間件產(chǎn)品在很大程度上簡化了一個由不同硬件構(gòu)成的分布式處理環(huán)境的復雜性，所以它的出現(xiàn)正日益引起用戶的關(guān)注。SOA效勞體系架構(gòu)SOA〔ServiceOrientedArchitecture，縮寫SOA〕，即面向效勞的體系架構(gòu)，提供了一種構(gòu)建IT組織的標準和方法，并通過建立可組合、可重用的效勞體系來減少IT業(yè)務冗余并確保信息系統(tǒng)的可持續(xù)開展以及快速構(gòu)建。SOA的實現(xiàn)對技術(shù)沒有限制。SOA是關(guān)于共享和管理效勞的結(jié)構(gòu)，對所采用的技術(shù)只需要滿足它的需要就可以。雖然Web效勞協(xié)議到目前為止還是首選的創(chuàng)立和部署SOA架構(gòu)的標準，但是也可以使用其他標準，比方CORBA、COM和JAVAEE。甚至可以采用私有技術(shù)創(chuàng)立SOA。SOA可以節(jié)省組織本錢，包括重復利用已存在的軟件作為效勞，以及增強改變IT方案適應需求變革或靈活性的能力。SOA對兼容性的需求完全處在松耦，可以通過在工程實施過程中為創(chuàng)立和部署大多數(shù)SOA提供的端到端解決方案解決兼容性問題。ESB企業(yè)效勞總線ESB〔EnterpriseServiceBus，縮寫ESB〕，即企業(yè)效勞總線，是SOA的骨干，在完成效勞的接入，效勞間的通信和交互根底上，還提供平安性、可靠性、高性能的效勞能力保障。采用SOA架構(gòu)，基于ESB總線進行信息系統(tǒng)集成，如下列圖所示，信息系統(tǒng)之間的交互通過總線進行，這樣可以降低應用系統(tǒng)、各個組件及相關(guān)技術(shù)的耦合度，消除應用系統(tǒng)點對點集成瓶頸，降低集成開發(fā)難度，提高復用，增進系統(tǒng)開發(fā)和運行效率，便于業(yè)務系統(tǒng)靈活重構(gòu)，快速適應業(yè)務及流程變化需要。異構(gòu)系統(tǒng)適配器效勞異構(gòu)系統(tǒng)適配器效勞是數(shù)據(jù)交換系統(tǒng)的根底效勞部件，是各信息系統(tǒng)接入ESB的橋梁，是多種異構(gòu)系統(tǒng)之間互連互通及互操作的效勞單元。適配器應遵循國際級行業(yè)標準，提供標準的XML數(shù)據(jù)對象、效勞接口、效勞操作方法，如下列圖示，真正實現(xiàn)了信息系統(tǒng)效勞重用。適配器效勞應分為提供效勞者和消費效勞者，既可以提供效勞消費，也可以消費其他效勞?？梢詫崿F(xiàn)信息系統(tǒng)常用文件、數(shù)據(jù)庫、通訊等技術(shù)適配能力，并可以按照特定標準進行適配器效勞定制，滿足可擴展需要。XSLT效勞XSLT是擴展樣式表轉(zhuǎn)換語言〔ExtensibleStylesheetLanguageTransformations〕的簡稱，它是把XML文檔轉(zhuǎn)化為另一文檔的轉(zhuǎn)換語言，即將源文檔的所有數(shù)據(jù)或者局部數(shù)據(jù)，利用XPath進行選擇，生成另外的XML文檔或者其他可直接顯示或打印的文件格式。XSLT效勞是用來對數(shù)據(jù)進行轉(zhuǎn)換的一種效勞，通過XSLT效勞，一種數(shù)據(jù)格式可以輕松的轉(zhuǎn)換為另一種數(shù)據(jù)格式。WebServicesWebServices即Web效勞，屬于輕量級訪問協(xié)議效勞。效勞的技術(shù)實現(xiàn)和表現(xiàn)形式多種多樣，例如：適配器效勞、XSLT效勞、效勞編排效勞等，這些效勞都可以發(fā)布為Web效勞。同樣，ESB總線還可以訪問其他信息系統(tǒng)提供的WEB效勞。Web效勞是相關(guān)的主要協(xié)議和技術(shù)包括SOAP〔SimpleObjectAccessProtocol，簡單對象訪問協(xié)議〕、WSDL〔WebServicesDescriptionLanguage，Web效勞描述語言〕、UDDI〔UniversalDescriptionandIntegration，統(tǒng)一描述、發(fā)現(xiàn)和集成〕。SOAP用來定義數(shù)據(jù)描述和遠程訪問的標準；WSDL是發(fā)布和請求Web效勞的描述語言；UDDI那么把Web效勞與用戶聯(lián)系起來，起中介作用。消息隊列技術(shù)為了實現(xiàn)大數(shù)據(jù)效勞的并發(fā)壓力控制、網(wǎng)絡上大數(shù)據(jù)的可靠傳輸，ESB將實現(xiàn)數(shù)據(jù)適配器效勞與消息適配器效勞的編排，解決多部門、多信息系統(tǒng)之間數(shù)據(jù)發(fā)送、接收過程中的可靠傳輸保障需求。消息隊列技術(shù)基于點對點的隊列通訊通道，確保信息系統(tǒng)之間的數(shù)據(jù)有且僅有一次完整傳輸給對方，并為適配器效勞提供異步數(shù)據(jù)緩存機制，提高適配器效勞的數(shù)據(jù)并發(fā)壓力承載能力。數(shù)據(jù)交換技術(shù)方案需求分析電子政務業(yè)務涉及內(nèi)外網(wǎng)兩個域，需要解決跨網(wǎng)絡、跨平安域數(shù)據(jù)平安、可靠傳輸處理等問題。并要面向五十多個業(yè)務應用實現(xiàn)整合和數(shù)據(jù)交互。系統(tǒng)接入：實現(xiàn)門戶外網(wǎng)應用、內(nèi)網(wǎng)辦理的系統(tǒng)數(shù)據(jù)接入。提供豐富的適配器，支持XML標準和內(nèi)外網(wǎng)系統(tǒng)接入的松耦合接入效勞，不會影響現(xiàn)有內(nèi)網(wǎng)業(yè)務系統(tǒng)的正常穩(wěn)定運行。數(shù)據(jù)獲?。禾峁?shù)據(jù)的定時、實時平安獲取效勞，支持數(shù)據(jù)完整性驗證。數(shù)據(jù)加解密：提供數(shù)據(jù)加解密效勞，滿足內(nèi)外網(wǎng)數(shù)據(jù)交換平安的需要。支持多種數(shù)據(jù)加解密算法。傳輸認證：提供交換域之間雙方的身份認證，支持雙向認證。平安傳輸通道：提供數(shù)據(jù)平安傳輸通道，在網(wǎng)絡通訊協(xié)議之上建立更平安的數(shù)據(jù)可靠傳輸虛擬專用通道。產(chǎn)品配置為了解決上述問題和需求，我們采用了基于中間件的內(nèi)外網(wǎng)數(shù)據(jù)交換解決方案。方案從數(shù)據(jù)交換的平安性、可靠性、可用性、可擴展性等方面，闡述如何解決業(yè)務面臨的內(nèi)外網(wǎng)數(shù)據(jù)平安、實時/定時采集、同步和可靠交換傳輸?shù)葐栴}。方案采用的中間件產(chǎn)品主要包括：序號產(chǎn)品及版本數(shù)量功能概要描述1應用集成中間件TongIntegratorSOA套件TongIntegratorESB2提供數(shù)據(jù)交換框架及ESB效勞總線，交換流程、控制管理、日志審計等功能效勞。分別部署在內(nèi)網(wǎng)和外網(wǎng)交換效勞器上。TongIntegratorESBAdaptor29提供系統(tǒng)自動適配、數(shù)據(jù)自動采集、數(shù)據(jù)加工轉(zhuǎn)換、數(shù)據(jù)加載入庫等功能效勞。部署在需要交換的業(yè)務系統(tǒng)效勞器或者前置機上。2消息中間件TongLINK/Q2提供數(shù)據(jù)信息平安、高效可靠、傳輸效勞通道，提供數(shù)據(jù)通訊雙方身份認證、傳輸平安通道建立、數(shù)據(jù)加解密等數(shù)據(jù)傳輸可靠保障效勞。部署在內(nèi)、外網(wǎng)交換效勞器上和需要采用分布式的系統(tǒng)交換效勞器上。3應用效勞器中間件TongWeb1提供交換管理監(jiān)控應用系統(tǒng)的運行支撐效勞。部署在交換管理效勞器上。4交換監(jiān)控擴展1基于中間件是實現(xiàn)交換監(jiān)控。產(chǎn)品部署數(shù)據(jù)交換產(chǎn)品部署實施如下列圖所示：在本工程中，內(nèi)外網(wǎng)跨平安域數(shù)據(jù)交換基于公司先進、成熟的應用集成中間件TongIntegrator和消息中間件TongLink/Q設計構(gòu)建，交換管理基于應用效勞器中間件TongWeb設計實現(xiàn)?？紤]應用系統(tǒng)比擬多，對局部業(yè)務采用WEB效勞代理模式，對文件效勞器采用分布式傳輸模式，對業(yè)務數(shù)據(jù)量大采用分布式部署模式。對DMZ區(qū)的系統(tǒng)采用分布式代理模式部署。應用集成中間件TongIntegrator提供系統(tǒng)適配接入、數(shù)據(jù)采集與同步、數(shù)據(jù)轉(zhuǎn)換、數(shù)據(jù)過濾、數(shù)據(jù)壓縮、數(shù)據(jù)加工清洗、異常處理、日志審計、監(jiān)控管理等功能效勞。消息中間件TongLINK/Q為內(nèi)外網(wǎng)跨平安域數(shù)據(jù)信息的平安、可靠、高效傳輸處理提供平安通道、身份認證、數(shù)據(jù)加解密、數(shù)據(jù)壓縮、數(shù)據(jù)路由、斷點續(xù)傳等效勞保障。應用效勞器中間件TongWeb為交換管理WEB頁面提供開發(fā)、運行環(huán)境和底層支撐效勞。交換監(jiān)控擴展設計功能圖功能描述總監(jiān)控中心交換結(jié)構(gòu)圖分級顯示：顯示節(jié)點上流程名和起停狀態(tài)。顯示所有交換節(jié)點。顯示所有交換流程及狀態(tài)顯示各部門交換條數(shù)的餅圖。顯示整體交換數(shù)據(jù)交換條數(shù)，包括總體發(fā)送量、總體接收量、總交換量。顯示有提示錯誤定位，可以是數(shù)據(jù)庫錯誤、通訊錯誤、數(shù)據(jù)錯誤。顯示系統(tǒng)當前時間及當前時間完成的交換量。業(yè)務域監(jiān)控中心對本域的發(fā)送總量作統(tǒng)計。包括總體發(fā)送量、總體接收量、總交換量。對本域根據(jù)交換流程的交換日志進行實時顯示。數(shù)據(jù)交換總量按歷史發(fā)送圖分時間報表〔選擇時間周期〕，并可以導出為EXCEL.顯示當前交換傳輸通道的傳輸速率。顯示有提示報錯信息的交換流程。顯示本域交換節(jié)點。顯示本域交換流程。顯示本域各部門交換量的餅圖。ESB效勞總線系統(tǒng)功能效勞封裝數(shù)據(jù)效勞封裝主要是完成數(shù)據(jù)加工處理的過程，包括數(shù)據(jù)格式轉(zhuǎn)換、數(shù)據(jù)清洗、以及數(shù)據(jù)加工等數(shù)據(jù)處理功能。數(shù)據(jù)效勞封裝首先是適配器效勞。適配器效勞是外系統(tǒng)接入數(shù)據(jù)交換系統(tǒng)的橋梁，是多種異構(gòu)系統(tǒng)之間互連互通及互操作的重要組件。適配器遵循JCA1.5標準，真正實現(xiàn)了適配器的重用。常見的適配器，如結(jié)構(gòu)化及非結(jié)構(gòu)化文件適配器，Oracle、DB2、SqlServer、KingBase、MySql、Access、Excel等數(shù)據(jù)庫適配器，F(xiàn)TP、SMTP/POP3、JMS等通訊類適配器等。除了系統(tǒng)本身集成的適配器之外，它還提供了適配器開發(fā)工具，便于用戶開發(fā)適合自己需要的定制適配器，并無縫集成到開發(fā)系統(tǒng)中。效勞封裝是數(shù)據(jù)交換接入的最前端，無論直接交換還是“橋接”交換，都可以采用該適配器效勞封裝實現(xiàn)。XML數(shù)據(jù)表示即根據(jù)轉(zhuǎn)換定義的規(guī)那么，完成數(shù)據(jù)轉(zhuǎn)換的處理。將原始的數(shù)據(jù)轉(zhuǎn)換為需要的數(shù)據(jù)格式。統(tǒng)一的數(shù)據(jù)和效勞表示——標準XML。不同的系統(tǒng)傳輸數(shù)據(jù)內(nèi)容和方式都可能不一樣，不同的系統(tǒng)提供效勞的方式和數(shù)據(jù)格式也不一樣，為了使不同系統(tǒng)在互相交互時有一個統(tǒng)一的接口表現(xiàn)方式，需要定義一套統(tǒng)一的接口〔效勞方式和數(shù)據(jù)格式〕表示方式，因為XML的強大描述能力，使用XML來描述各系統(tǒng)的效勞接口和數(shù)據(jù)傳輸方式。適配器效勞不同的業(yè)務系統(tǒng)存儲數(shù)據(jù)的方式可能各不相同，需要支持數(shù)據(jù)源的不同存儲方式〔如不同的數(shù)據(jù)庫、文件等〕。采用適配器效勞技術(shù)。接入的適配器效勞封裝主要是為了減少開發(fā)工作量，努力實現(xiàn)接入部門的“零編程”目標。適配器效勞是外系統(tǒng)接入數(shù)據(jù)交換系統(tǒng)的橋梁，是多種異構(gòu)系統(tǒng)之間互連互通及互操作的重要組件。適配器遵循JCA1.5標準，真正實現(xiàn)了適配器的重用。常見的適配器，如結(jié)構(gòu)化及非結(jié)構(gòu)化文件適配器，Oracle、DB2、SqlServer、KingBase、MySql、Access、Excel等數(shù)據(jù)庫適配器，F(xiàn)TP、SMTP/POP3、JMS等通訊類適配器等。除了系統(tǒng)本身集成的適配器之外，它還提供了適配器開發(fā)工具，便于用戶開發(fā)適合自己需要的定制適配器，并無縫集成到開發(fā)系統(tǒng)中。數(shù)據(jù)描述工具數(shù)據(jù)共享的主要功能是數(shù)據(jù)采集和數(shù)據(jù)應用，需要有一個方便的數(shù)據(jù)描述工具和數(shù)據(jù)描述方式，作為整個數(shù)據(jù)共享的根底。數(shù)據(jù)共享效勞的技術(shù)實現(xiàn)及其表現(xiàn)形式可以有多種，如本產(chǎn)品提供的Java效勞、常用的Web效勞等。在TIStudio工具中，能夠?qū)⒂脩魟?chuàng)立的Java效勞、適配器效勞等，發(fā)布為Web效勞，而且還提供了訪問外系統(tǒng)提供的Web效勞的開發(fā)工具。且數(shù)據(jù)效勞方式支持已有應用的快速接入及效勞化封裝，并提供代理效勞的快速開發(fā)向?qū)В员阃ㄟ^效勞總線統(tǒng)一提供已有應用效勞或第三方效勞的接入、訪問和管理。支持Web效勞的常用工業(yè)標準，如WSDL、SOAP、UDDI、WS-Security、WS-IBasicProfile等數(shù)據(jù)自動同步功能數(shù)據(jù)共享效勞存在著大量的數(shù)據(jù)抽取和數(shù)據(jù)同步需求，需要提供根本的數(shù)據(jù)自動抽取和同步功能，支持數(shù)據(jù)同步功能的快速建立。同步方式分為：全表、時間戳、觸發(fā)器三種方式。共享交換機制根據(jù)業(yè)務系統(tǒng)需求，建立實時交換、定時交換機制。實時交換機制實時交換機制采用觸發(fā)器機制，依靠數(shù)據(jù)庫自身的實時觸發(fā)管理，確保數(shù)據(jù)交換的實時同步，實時同步時間在毫秒級。觸發(fā)器分為INSERT、UPATE、DELETE三種。即業(yè)務表在數(shù)據(jù)變化時根據(jù)三種觸發(fā)條件判斷屬于那種數(shù)據(jù)更新方式并定位數(shù)據(jù)記錄。在數(shù)據(jù)加載時通過定位信息獲取數(shù)據(jù)并按照觸發(fā)類型進行數(shù)據(jù)更新同步。定時交換機制定時交換機制采用時間戳方式，依靠操作系統(tǒng)時間就需要在業(yè)務表中統(tǒng)一添加時間字段作為時間戳〔如表中已有相應的時間字段，可以不必添加〕，每當更新修改業(yè)務數(shù)據(jù)時，同時修改時間戳字段值。當數(shù)據(jù)加載時，通過上次運行時間、本次運行時間與時間戳字段的比擬來決定進行何種數(shù)據(jù)抽取。單向交換機制無論是定時還是實時交換機制，都可以設定為單向交換。即針對一個數(shù)據(jù)源，只是做同一種操作向其他數(shù)據(jù)源做數(shù)據(jù)同步。雙向交換機制對于實時數(shù)據(jù)同步可以支持雙向交換。即針對一個數(shù)據(jù)源，在往其他數(shù)據(jù)源做數(shù)據(jù)同步的同時，該數(shù)據(jù)源又要受被其同步的數(shù)據(jù)源的變化做實時同步。效勞庫及管理使用標準接口〔支持UDDI和JAXR接口〕的效勞注冊庫進行效勞注冊和檢索、Web效勞部署后的啟動/停止控制及將部署后的效勞列表查詢功能集成進了監(jiān)控中心等，可提供完整的Web效勞封裝、開發(fā)、部署、運行監(jiān)控、運行效勞水平數(shù)據(jù)監(jiān)測統(tǒng)計、效勞注冊和檢索等全生命周期管理。另外，集成了基于標準標準的效勞注冊庫可供用戶直接使用。效勞編排功能效勞編排基于Java的編碼調(diào)試開發(fā)環(huán)境，能夠讓用戶根據(jù)具體業(yè)務，開發(fā)相應效勞，或者進行效勞的合成與編排。Java效勞對外可以封裝提供業(yè)務效勞，供其他效勞或應用消費；另外它也能夠消費其他效勞，將不同的業(yè)務效勞進行組裝，形成粒度更大的業(yè)務效勞。效勞編排：消費其他效勞〔按一定邏輯順序消費即所謂對這些被消費效勞的編排〕，同時對其他消費者提供效勞〔將多個效勞編排起來完成更大任務的功能〕將已經(jīng)開發(fā)的業(yè)務效勞和其所用到的效勞建立連接關(guān)系，進行合成組裝，構(gòu)成一個能夠打包和部署、完成某些業(yè)務功能的應用。數(shù)據(jù)加工標準的數(shù)據(jù)處理模塊——過濾，格式轉(zhuǎn)換、合并、拆分。因為不同的系統(tǒng)使用數(shù)據(jù)方式和格式都可能不一樣，為了方便各系統(tǒng)間數(shù)據(jù)的交換，需要提供一些標準的數(shù)據(jù)處理模塊，以實現(xiàn)不同系統(tǒng)間自動的數(shù)據(jù)格式轉(zhuǎn)換。包括數(shù)據(jù)庫數(shù)據(jù)、普通文件數(shù)據(jù)、XML格式數(shù)據(jù)間的互相映射和轉(zhuǎn)換。提供圖形可視化的異構(gòu)數(shù)據(jù)格式轉(zhuǎn)換映射工具，內(nèi)置豐富函數(shù)，能夠?qū)⑤斎霐?shù)據(jù)和輸出數(shù)據(jù)進行不同格式間的轉(zhuǎn)換(如結(jié)構(gòu)化的XML、非XML或Java對象數(shù)據(jù))，從而可快速集成異構(gòu)應用，無需考慮表示數(shù)據(jù)采用的格式。還提供了基于XSLT效勞、Java效勞、數(shù)據(jù)庫函數(shù)三種圖形可視化數(shù)據(jù)格式轉(zhuǎn)換工具。效勞流程合成將已經(jīng)開發(fā)的業(yè)務效勞和其所用到的效勞建立連接關(guān)系，進行合成組裝，構(gòu)成一個能夠打包和部署、完成某些業(yè)務功能的應用。合成應用，是一個組件、效勞的裝配過程，它創(chuàng)立的成果，是能夠打包和部署的業(yè)務應用。通過合成應用，能夠把TI效勞發(fā)布為Web效勞。數(shù)據(jù)可靠傳輸通道TongLINK/Q作為公司的消息中間件產(chǎn)品，它以其獨特的消息、隊列、可靠等機制和技術(shù)優(yōu)勢為各種分布式應用系統(tǒng)的開發(fā)注入了強大動力，極大地推動了數(shù)據(jù)交換及應用系統(tǒng)集成的開展。在分布式系統(tǒng)之間通過消息點對點傳輸、播送傳輸模式的實現(xiàn)，建立與集成環(huán)境松散耦合的專用傳輸通道，實現(xiàn)消息可靠傳輸。通過把消息保存在可靠隊列中來保障“可靠傳輸”，并在傳輸中具有斷點續(xù)傳功能，能夠應對網(wǎng)絡故障、機器故障，保障消息一次傳輸、可靠到達。邏輯結(jié)構(gòu)圖TongLINK/Q先進的隊列、消息及路由等處理機制，使其能夠為應用系統(tǒng)提供高效、靈活的同步和異步傳輸處理、存儲轉(zhuǎn)發(fā)、消息路由等技術(shù)支持，確保消息在任何情況下都能夠平安、可靠的送達。通過使用TongLINK/Q，應用系統(tǒng)完全不需要擔憂消息傳遞過程中可能遇到的各種障礙〔機器故障、網(wǎng)絡故障等〕和異常。TongLINK/Q提供點對點、發(fā)布訂閱、路由、集群等多種方式的消息傳遞模式，極大方便了企業(yè)應用的靈活構(gòu)建，同時TongLINK/Q通過對核心、進程管理、隊列管理等各層面的優(yōu)化和改良，能夠更加充分地利用硬件和網(wǎng)絡資源，極大地提高了傳輸效率，為各種不同應用模式、不同系統(tǒng)規(guī)模、不同消息傳輸量的系統(tǒng)提供了強有力的后臺支撐。TongLINK/Q為系統(tǒng)的管理人員提供了豐富易用的管理工具，以滿足不同的管理習慣和管理需求。通過管理工具，在系統(tǒng)運行過程中，可以對系統(tǒng)對象進行動態(tài)管理和控制，以到達對系統(tǒng)運行規(guī)模進行調(diào)控、節(jié)省系統(tǒng)資源、提高效率的目的。通過基于瀏覽器模式的可視化監(jiān)控管理中心，用戶可以在任何運行IE的遠端對系統(tǒng)進行遠程集中管理，包括系統(tǒng)的遠程啟動、停止、配置和監(jiān)控，極大地方便了系統(tǒng)的維護和管理。TongLINK/Q全面支持JMS1.1標準標準，用戶可借助于它進行標準化的應用開發(fā)，并能夠輕松地與其他系統(tǒng)進行集成。通過JMS1.1標準，TongLINK/Q能夠無縫的與公司的其他的中間件產(chǎn)品進行集成，如與JAVAEE應用效勞器TongWeb、企業(yè)應用集成產(chǎn)品TongIntegratorSOA套件等有機的集成。TongLINK/Q作為一個消息傳遞的可靠平臺，應用系統(tǒng)可以借助于它輕松地交換和處理消息，而無需考慮消息傳遞的具體細節(jié)，能夠大大降低開發(fā)難度，縮短開發(fā)周期，節(jié)約開發(fā)本錢。效勞管理監(jiān)控效勞資源管理建立效勞資源中心，主要功能是集中管理包括效勞、組件、工程及相應權(quán)限等各種系統(tǒng)資源，類似于版本控制軟件如CVS，它包括用戶/組管理、資源管理、權(quán)限控制、資源目錄效勞等功能。通過TongIntegratorSOA套件提供的客戶端開發(fā)工具TIStudio，可以對資源和權(quán)限進行存儲、配置及相應管理，以支持團隊協(xié)作開發(fā)。效勞流程管理效勞流程管理包括節(jié)點、工程、效勞、組件及業(yè)務流程等運行狀況的集中管理，能夠?qū)λO(jiān)控的對象進行狀態(tài)參看、啟動/停止等控制。效勞流程監(jiān)控監(jiān)控管理邏輯節(jié)點及部署在邏輯節(jié)點上面的工程、效勞、組件及業(yè)務流程等運行狀況的集中管理監(jiān)控平臺。通過監(jiān)控管理中心，用戶可以查看邏輯節(jié)點及部署在邏輯節(jié)點上面的工程、效勞、組件及業(yè)務流程等運行狀態(tài)、日志信息等，并能夠?qū)λO(jiān)控的對象進行如啟動/停止等控制。監(jiān)控管理中心基于JMX標準，管理功能可擴展，并方便用戶編程訪問。監(jiān)控管理中心的界面基于Web瀏覽器方式，方便用戶查看系統(tǒng)運行狀態(tài)，跟蹤效勞、業(yè)務流程運行信息，便于對監(jiān)控對象進行分析、診斷。平安及授權(quán)機制聯(lián)機協(xié)同開發(fā)時的開發(fā)資源權(quán)限管理與訪問控制。交換資源監(jiān)控的平安訪問控制管理。提供接入效勞總線的Web效勞與發(fā)布Web效勞的平安保障機制，包括消息完整性、機密性、不可抵賴性及訪問身份鑒別等，支持SSL/TLS、WS-Security等平安標準。提供跨網(wǎng)絡節(jié)點消息傳輸?shù)目煽俊⑵桨脖Ｕ蠙C制。能夠集成第三方CA認證和SSL認證，具有靈活的權(quán)限控制與管理功能以及消息簽名與加密機制?？梢约墒≈行钠桨蚕到y(tǒng)實現(xiàn)共享交換的統(tǒng)一認證和授權(quán)。效勞流程日志建立運行日志，記錄任何效勞在任何時刻的運行信息，幫助完成系統(tǒng)平安運行記錄。.硬件建議配置名稱效勞器配置要求安裝產(chǎn)品數(shù)量備注中心ESB效勞器LINUX/WINDOWS：64位4路，2U、1*四核、16GB內(nèi)存100GB熱插拔、千兆網(wǎng)卡TongIntegratorStudio(ESBAdaptor)TongIntegratorLH(ESBServer)TongLINK/Q2管理監(jiān)控效勞器LINUX/WINDOWS：4GB內(nèi)存以上效勞器TongIntegratorMC/RCTongLINK/QMCTongWEB監(jiān)控擴展系統(tǒng)1節(jié)點分布式效勞器或者效勞代理效勞器LINUX/WINDOWS：64位2路，2U、1*四核8GB內(nèi)存80GB熱插拔、千兆網(wǎng)卡TongIntegratorStudio(ESBAdaptor)TongIntegratorLH(ESBServer)TongLINK/QN根據(jù)接入系統(tǒng)數(shù)量決定方案特點成熟平安的中間件產(chǎn)品公司是國家密碼管理局認證的商用密碼產(chǎn)品生產(chǎn)定點單位，擁有國家商用密碼產(chǎn)品銷售許可證。本方案采用的3款中間件產(chǎn)品都是經(jīng)過國內(nèi)政府、軍工、交通能源、電信電力市場廣泛驗證的成熟產(chǎn)品。數(shù)據(jù)平安獲取提供數(shù)據(jù)的定時、實時平安獲取效勞，支持基于MD5的數(shù)據(jù)完整性驗證。按照內(nèi)外網(wǎng)系統(tǒng)數(shù)據(jù)訪問的平安策略，滿足內(nèi)外網(wǎng)數(shù)據(jù)平安獲取需要。數(shù)據(jù)加解密提供數(shù)據(jù)加解密效勞，滿足內(nèi)外網(wǎng)數(shù)據(jù)交換平安的需要。支持RC5、DES、3DES等數(shù)據(jù)加解密算法。數(shù)據(jù)傳輸平安認證提供交換域數(shù)據(jù)傳輸平安認證，在不同交換域之間通過用戶名、密碼進行交換雙方的身份認證，支持雙向認證。數(shù)據(jù)平安傳輸通道提供數(shù)據(jù)平安傳輸通道，在網(wǎng)絡通訊協(xié)議之上建立更平安的數(shù)據(jù)可靠傳輸虛擬專用通道?？煽啃运x用的中間件產(chǎn)品都是成熟產(chǎn)品，都具有良好的平安性、可靠性。提供全面的事件監(jiān)控機制，通過交換系統(tǒng)的監(jiān)控和容錯機制，能夠及時監(jiān)控并發(fā)現(xiàn)問題，提供可靠性保障。易用性提供圖形組件配置，根本實現(xiàn)零編程。當數(shù)據(jù)交換子系統(tǒng)運行的時候，系統(tǒng)管理員可以通過獨立的管理平臺〔可視化工具〕對交換系統(tǒng)進行管理監(jiān)控，交換任務與管理完全別離。系統(tǒng)管理員利用可視化建模工具為數(shù)據(jù)文件建模，利用映射定義工具為不同的數(shù)據(jù)格式文件之間定義轉(zhuǎn)換形式。開發(fā)人員利用圖形化編輯工具，通過鼠標操作即可完成數(shù)據(jù)交換的采集加工配置?？梢暬O(jiān)控提供圖形化WEB監(jiān)控系統(tǒng)，方便維護和業(yè)務管理。產(chǎn)品介紹應用集成中間件TongIntegratorSOA套件產(chǎn)品概述TongIntegratorSOA套件作為公司的企業(yè)應用集成產(chǎn)品，主要功能是在兩個或更多的異構(gòu)系統(tǒng)〔如不同的數(shù)據(jù)庫、消息中間件、ERP或CRM等〕之間進行資源整合，實現(xiàn)互連互通、數(shù)據(jù)共享、業(yè)務流程協(xié)調(diào)統(tǒng)一等功能，構(gòu)建靈活可擴展的分布式企業(yè)應用。TongIntegratorSOA套件是一個全新的符合SOA架構(gòu)的應用效勞整合平臺，內(nèi)置了企業(yè)效勞總線〔EnterpriseServiceBus，簡稱ESB〕，基于工業(yè)標準，用于構(gòu)建可管理、可擴展及經(jīng)濟高效的EAI解決方案。TongIntegratorSOA套件提供了從企業(yè)應用集成的設計、開發(fā)、部署，到運行、管理、監(jiān)控各個生命周期階段的工具和完整解決方案。它提供的開發(fā)工具，簡單、經(jīng)濟、可擴展，并全面支持效勞及效勞常用形式WebService，簡化了效勞的創(chuàng)立與封裝，并能夠使用戶靈活地編排效勞，以滿足不斷變化地業(yè)務需要和業(yè)務處理流程。TongIntegratorSOA套件基于工業(yè)標準，如遵循JAVAEE標準,完全支持XML數(shù)據(jù)交換、Web效勞常用標準〔如SOAP、WSDL等〕。為了方便用戶進行異構(gòu)系統(tǒng)接入，TongIntegratorSOA套件還提供了大量的基于JCA標準的適配器，如文件系統(tǒng)、各種數(shù)據(jù)庫、消息中間件等系統(tǒng)的適配器。產(chǎn)品組成結(jié)構(gòu)TongIntegratorSOA套件產(chǎn)品結(jié)構(gòu)由集成開發(fā)工具TIStudio、監(jiān)控管理中心、資源中心、運行環(huán)境邏輯節(jié)點、便于應用集成開發(fā)的組件和套件〔如適配器、Java效勞等〕、及企業(yè)效勞總線TIESB組成，如下圖，每個組成局部的具體功能，請參考下面章節(jié)。TongIntegratorSOA套件產(chǎn)品組成結(jié)構(gòu)資源中心資源中心主要功能是集中管理包括效勞、組件、工程及相應權(quán)限等各種系統(tǒng)資源，類似于版本控制軟件如CVS，它包括用戶/組管理、資源管理、權(quán)限控制、資源目錄效勞等功能。通過TongIntegratorSOA套件提供的客戶端開發(fā)工具TIStudio，可以對資源和權(quán)限進行存儲、配置及相應管理，以支持團隊協(xié)作開發(fā)。集成開發(fā)工具TIStudioTongIntegratorSOA套件集成開發(fā)工具TIStudio是用于開發(fā)效勞、組件及業(yè)務流程的集成開發(fā)工具，它提供了完整的從設計、開發(fā)、配置到打包部署整個階段的GUI工具。TIStudio還是一個完善的分布式開發(fā)環(huán)境，它集成了資源權(quán)限管理功能，基于工程、組件、效勞等資源的權(quán)限管理，支持團隊協(xié)作開發(fā)，方便團隊進行分工合作，提高開發(fā)效率。作為強大的分布式EAI集成開發(fā)環(huán)境TIStudio，它提供如下功能：支持分布式開發(fā)和部署使用資源中心，可以支持團隊協(xié)作開發(fā)；沒有資源中心，使用脫機模式能夠支持用戶個體獨立開發(fā)和部署。完整支持WebService開發(fā)，提供效勞定義、消費、注冊、發(fā)布和檢索等功能；提供數(shù)據(jù)庫適配器效勞，支持Sybase、MSSQLServer、Oracle、DB2等常見關(guān)系型數(shù)據(jù)庫的適配接入。并支持數(shù)據(jù)庫的定時、實時數(shù)據(jù)采集及雙向同步。提供效勞的定義、消費、組裝等的開發(fā)工具，并能夠基于標準接口如JAXR、UDDI與效勞注冊庫集成使用，如進行效勞的發(fā)布注冊、復雜條件檢索等，以便用戶從效勞注冊庫中檢索適宜的效勞進行消費組裝及注冊管理。為保障跨網(wǎng)絡的WebService的通訊平安，還提供了完整的效勞通訊平安機制的配置開發(fā)工具，如基于SSL、WS-Security的平安屬性配置，提供傳輸層、消息層等的身份驗證、消息機密性和完整性的平安機制保障。強大的效勞和業(yè)務流程編排工具，構(gòu)建業(yè)務靈活圖形可視化的異構(gòu)數(shù)據(jù)格式映射和轉(zhuǎn)換工具，基于拖拽配置，無需編碼提供國內(nèi)最常用的數(shù)據(jù)集成的開發(fā)配置工具，可快速開發(fā)數(shù)據(jù)集成應用內(nèi)置許多適配器、組件和效勞，方便用戶快速開發(fā)界面友好，提供了豐富的開發(fā)向?qū)渲渺`活，邏輯環(huán)境與物理環(huán)境進行了抽象別離支持分散與集中的資源存儲和控制，資源檢索方便使用資源中心，開發(fā)的適配器、組件、效勞、工程等資源可以集中存儲在資源中心，并進行資源權(quán)限的有效控制，這樣便于資源共享復用、版本控制及團隊協(xié)作開發(fā)；沒有資源中心，使用脫機模式的TIStudio能夠?qū)①Y源本地保存和控制，便于用戶獨立開發(fā)和部署工程，將來如果使用資源中心，能夠?qū)⒚摍C環(huán)境下開發(fā)的資源上傳到資源中心，使用方式非常靈活方便。邏輯節(jié)點邏輯節(jié)點是組件、效勞及業(yè)務流程的運行環(huán)境，它包含了實現(xiàn)JAVAEE1.4標準的應用效勞器。TongIntegratorSOA套件基于標準的JAVAEE1.4標準，因此在其上開發(fā)的組件、效勞及相應的業(yè)務流程，最終要打包成標準的JAVAEE相關(guān)組件和應用，部署到相應的JAVAEE應用效勞器上運行。由于基于開放式標準，TongIntegratorSOA套件的邏輯節(jié)點具有可配置、能擴展及便于移植的特點。如邏輯節(jié)點中集成使用JMS效勞器，既可以是公司的TongLINK/Q消息中間件，又可以是其他公司支持JMS1.1標準的消息中間件產(chǎn)品，如開源ActiveMQ等。監(jiān)控管理中心監(jiān)控管理中心是監(jiān)控管理邏輯節(jié)點及部署在邏輯節(jié)點上面的工程、效勞、組件及業(yè)務流程等運行狀況的集中管理監(jiān)控平臺。通過監(jiān)控管理中心，用戶可以查看邏輯節(jié)點及部署在邏輯節(jié)點上面的工程、效勞、組件及業(yè)務流程等運行狀態(tài)、日志信息等，并能夠?qū)λO(jiān)控的對象進行如啟動/停止等控制。監(jiān)控管理中心基于JMX標準，管理功能可擴展，并方便用戶編程訪問。監(jiān)控管理中心的界面基于Web瀏覽器方式，方便用戶查看系統(tǒng)運行狀態(tài)，跟蹤效勞、業(yè)務流程運行信息，便于對監(jiān)控對象進行分析、診斷。產(chǎn)品特點符合SOA架構(gòu)內(nèi)部集成了企業(yè)效勞總線功能，支持效勞的查找、訪問、路由及效勞的治理。集成開發(fā)工具TIStudio，支持效勞的開發(fā)封裝、消費、效勞編排、消息路由、及業(yè)務流程構(gòu)建與部署，覆蓋了效勞開發(fā)的多個環(huán)節(jié)。基于開放式標準，高度可擴展TongIntegratorSOA套件的技術(shù)架構(gòu)及實現(xiàn)基于開放式標準，如JAVAEE1.4標準，適配器遵循JCA1.5標準，監(jiān)控管理基于JMX標準，支持JMS、SOAP、WSDL、UDDI等標準?；陂_放式標準，便于系統(tǒng)遷移并便于將來擴展。全面支持WebService，并提供WebService的全生命周期管理支持WebService的封裝和訪問及完整的平安機制，并支持Web效勞的常用協(xié)議，如SOAP、WSDL、WS-Security等。提供的集成開發(fā)工具，支持Web效勞的編排及不同粒度的效勞封裝，便于創(chuàng)立松耦合及可復用的面向效勞架構(gòu)。另外，還支持WebService的全生命周期的治理。包括：開發(fā)時基于標準接口從效勞注冊庫檢索效勞進行消費組裝，發(fā)布后的效勞注冊到效勞注冊庫等；運行時提供監(jiān)控管理工具，對WebService的運行狀態(tài)進行監(jiān)控，并能夠?qū)π诘倪\行水平和能力〔如效勞消費和負載情況〕進行統(tǒng)計和評價?？缙脚_基于Java和標準的JAVAEE標準實現(xiàn)，保證了集成平臺本身及創(chuàng)立的效勞、組件和業(yè)務流程應用能夠跨平臺部署和運行，支持市場上常見的Linux、Windows及大多數(shù)Unix操作系