版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)
文檔簡介
1、企業(yè)數(shù)據(jù)集成DI平臺方案高性能、易管控的數(shù)據(jù)集成平臺目 錄 TOC o 1-3 h z u HYPERLINK l _Toc517725950 1DI產(chǎn)品定位描述 PAGEREF _Toc517725950 h 4 HYPERLINK l _Toc517725951 2DI產(chǎn)品概述 PAGEREF _Toc517725951 h 5 HYPERLINK l _Toc517725952 3DI產(chǎn)品客戶價值 PAGEREF _Toc517725952 h 6 HYPERLINK l _Toc517725953 4DI產(chǎn)品關(guān)鍵特性 PAGEREF _Toc517725953 h 7 HYPERLIN
2、K l _Toc517725954 4.1數(shù)據(jù)集成平臺部署結(jié)構(gòu) PAGEREF _Toc517725954 h 7 HYPERLINK l _Toc517725955 4.2增量數(shù)據(jù)抽取模式 PAGEREF _Toc517725955 h 7 HYPERLINK l _Toc517725956 4.3兩種數(shù)據(jù)處理模型(同步、異步) PAGEREF _Toc517725956 h 9 HYPERLINK l _Toc517725957 4.3.1同步數(shù)據(jù)處理模型 PAGEREF _Toc517725957 h 9 HYPERLINK l _Toc517725958 4.3.2異步數(shù)據(jù)處理模型 P
3、AGEREF _Toc517725958 h 9 HYPERLINK l _Toc517725959 4.3.3兩種體系架構(gòu)的比較 PAGEREF _Toc517725959 h 10 HYPERLINK l _Toc517725960 4.3.4兩種體系架構(gòu)所適應(yīng)的環(huán)境 PAGEREF _Toc517725960 h 11 HYPERLINK l _Toc517725961 4.4業(yè)務(wù)模型調(diào)度 PAGEREF _Toc517725961 h 11 HYPERLINK l _Toc517725962 4.5作業(yè)監(jiān)控 PAGEREF _Toc517725962 h 14 HYPERLINK l
4、_Toc517725963 4.5.1對資源的重點監(jiān)控 PAGEREF _Toc517725963 h 15 HYPERLINK l _Toc517725964 4.6企業(yè)級的負載均衡(HA)能力 PAGEREF _Toc517725964 h 16 HYPERLINK l _Toc517725965 4.7功能和資源權(quán)限管理 PAGEREF _Toc517725965 h 17 HYPERLINK l _Toc517725966 5DI產(chǎn)品的特點和優(yōu)勢 PAGEREF _Toc517725966 h 18 HYPERLINK l _Toc517725967 6DI產(chǎn)品組成及功能概述 PAGE
5、REF _Toc517725967 h 21 HYPERLINK l _Toc517725968 6.1DI Server PAGEREF _Toc517725968 h 21 HYPERLINK l _Toc517725969 6.2DI Component Library PAGEREF _Toc517725969 h 22 HYPERLINK l _Toc517725970 6.3DI Studio PAGEREF _Toc517725970 h 23 HYPERLINK l _Toc517725971 6.4DI Governor PAGEREF _Toc517725971 h 24
6、HYPERLINK l _Toc517725972 6.5DI Metadata Warehouse PAGEREF _Toc517725972 h 24 HYPERLINK l _Toc517725973 7DI產(chǎn)品環(huán)境配置 PAGEREF _Toc517725973 h 25 HYPERLINK l _Toc517725974 7.1支持的操作系統(tǒng) PAGEREF _Toc517725974 h 25 HYPERLINK l _Toc517725975 7.1.1DI Studio(數(shù)據(jù)集成建模工具)支持的操作系統(tǒng) PAGEREF _Toc517725975 h 25 HYPERLINK
7、l _Toc517725976 7.1.2DI Server(數(shù)據(jù)集成引擎)支持的操作系統(tǒng) PAGEREF _Toc517725976 h 25 HYPERLINK l _Toc517725977 7.1.3DI Governor(數(shù)據(jù)集成治理環(huán)境)支持的操作系統(tǒng) PAGEREF _Toc517725977 h 25 HYPERLINK l _Toc517725978 7.2支持的JavaEE服務(wù)器 PAGEREF _Toc517725978 h 25 HYPERLINK l _Toc517725979 7.3支持的數(shù)據(jù)庫 PAGEREF _Toc517725979 h 26 HYPERLIN
8、K l _Toc517725980 7.4支持的瀏覽器 PAGEREF _Toc517725980 h 26 HYPERLINK l _Toc517725981 7.5支持的JDK版本 PAGEREF _Toc517725981 h 26 HYPERLINK l _Toc517725982 7.5.1開發(fā)環(huán)境支持的JDK PAGEREF _Toc517725982 h 26 HYPERLINK l _Toc517725983 7.5.2運行環(huán)境支持的JDK PAGEREF _Toc517725983 h 26 HYPERLINK l _Toc517725984 8典型案例 PAGEREF _T
9、oc517725984 h 27 HYPERLINK l _Toc517725985 8.1諸暨市智慧安居工程數(shù)據(jù)交換平臺建設(shè) PAGEREF _Toc517725985 h 27 HYPERLINK l _Toc517725986 8.1.1客戶簡介 PAGEREF _Toc517725986 h 27 HYPERLINK l _Toc517725987 8.1.2背景與問題 PAGEREF _Toc517725987 h 27 HYPERLINK l _Toc517725988 8.1.3產(chǎn)品與方案 PAGEREF _Toc517725988 h 27 HYPERLINK l _Toc51
10、7725989 8.1.4實施效果 PAGEREF _Toc517725989 h 29 HYPERLINK l _Toc517725990 8.2上海銀行CRM系統(tǒng) PAGEREF _Toc517725990 h 30 HYPERLINK l _Toc517725991 8.2.1上海銀行簡介 PAGEREF _Toc517725991 h 30 HYPERLINK l _Toc517725992 8.2.2背景與問題 PAGEREF _Toc517725992 h 30 HYPERLINK l _Toc517725993 8.2.3產(chǎn)品與方案 PAGEREF _Toc517725993 h
11、 30 HYPERLINK l _Toc517725994 8.2.4實施效果 PAGEREF _Toc517725994 h 31 DI產(chǎn)品定位描述企業(yè)大量的IT投資建立了眾多的信息系統(tǒng),但是隨著信息系統(tǒng)的增加,各自孤立工作的信息系統(tǒng)將會造成大量的冗余數(shù)據(jù)和業(yè)務(wù)人員的重復(fù)勞動。企業(yè)急需通過建立底層數(shù)據(jù)集成平臺來聯(lián)系橫貫整個企業(yè)的異構(gòu)系統(tǒng)、應(yīng)用、數(shù)據(jù)源等,完成在企業(yè)內(nèi)部的ERP、CRM、SCM、數(shù)據(jù)庫、數(shù)據(jù)倉庫,以及其它重要的內(nèi)部系統(tǒng)之間無縫的共享和交換數(shù)據(jù)。在實施數(shù)據(jù)集成的過程中,不同的數(shù)據(jù)內(nèi)容、數(shù)據(jù)格式和數(shù)據(jù)質(zhì)量千差萬別,有時甚至?xí)龅綌?shù)據(jù)格式不能轉(zhuǎn)換或數(shù)據(jù)轉(zhuǎn)換格式后丟失信息等棘手問題,嚴
12、重阻礙了數(shù)據(jù)在各部門和各應(yīng)用系統(tǒng)中的流動與共享。因此,對企業(yè)內(nèi)各異構(gòu)系統(tǒng)底層數(shù)據(jù)進行有效的整合已成為增強企業(yè)商業(yè)競爭力的必然選擇。 DI產(chǎn)品定位于企業(yè)數(shù)據(jù)集成,通過DI實現(xiàn)異構(gòu)數(shù)據(jù)源的ETL操作,于此同時 DI產(chǎn)品更可以完成對數(shù)據(jù)集成過程中的模型進行管控、處理過程中的數(shù)據(jù)監(jiān)控以及模型作業(yè)自動化等工作。 DI產(chǎn)品概述 DI是一個高性能、易管控的數(shù)據(jù)集成平臺,通過 DI可以完成對各種類型數(shù)據(jù)的訪問、過濾、清洗、轉(zhuǎn)換、加載等ETL過程,通過 DI實現(xiàn)不同模式,如:基于觸發(fā)器、基于時間戳、基于全文比對、基于日志的數(shù)據(jù)同步,最終實現(xiàn)異構(gòu)數(shù)據(jù)的有機整合,在數(shù)據(jù)集成的過程中,借助 DI其強大的模型管控能力,
13、在實施過程中進行開發(fā)過程的規(guī)范化、代碼自動化、代碼和質(zhì)量可控化、調(diào)度管理統(tǒng)一化和監(jiān)控可視化。 DI產(chǎn)品客戶價值 DI產(chǎn)品帶給客戶的價值主要來自三個方面:無需編碼、快速的數(shù)據(jù)集成模型以及ETL處理開發(fā)??焖偻ㄟ^模型設(shè)計器或者作業(yè)自動化生成工具實現(xiàn)數(shù)據(jù)處理模型,完成數(shù)據(jù)庫、半結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)之間的ETL工作。大大節(jié)約了開發(fā)周期以及開發(fā)難度。強大的作業(yè)調(diào)度以及管控能力。使得數(shù)據(jù)處理更加業(yè)務(wù)化、可視化,使得企業(yè)的信息化部門可以更加方便、全面地了解數(shù)據(jù)處理模型的運行情況,有助于迅速定位和排除故障,更重要的是為及時主動的采取業(yè)務(wù)優(yōu)化措施提供了可能性。組件模型持續(xù)積累能力。可高效的開發(fā)、積累和復(fù)用已經(jīng)設(shè)
14、計好的數(shù)據(jù)處理模型,通過元數(shù)據(jù)倉庫對模型信息進行有效管理,持續(xù)性的降低了開發(fā)成本、管理成本以及人員流失成本。 DI產(chǎn)品關(guān)鍵特性數(shù)據(jù)集成平臺部署結(jié)構(gòu)數(shù)據(jù)集成平臺中DI Server可搭建集群進行部署,各自運行在獨立的JVM上,各自之間通過基于HTTP的心跳信號進行信息交互;DI Metadata Warehouse可采用文件形式進行存儲,也可引入關(guān)系型數(shù)據(jù)庫存儲元數(shù)據(jù),可部署在獨立的服務(wù)器上,多個DI Server共用一個元數(shù)據(jù)倉庫;DI Studio安裝在技術(shù)開發(fā)人員工作機上用于開發(fā)數(shù)據(jù)處理模型;開發(fā)出的數(shù)據(jù)處理模型可通過Governor進行部署管理、執(zhí)行監(jiān)控等操作。增量數(shù)據(jù)抽取模式增量數(shù)據(jù)抽
15、取的核心問題是,通過什么辦法可以找出上次數(shù)據(jù)處理完成之后變化的數(shù)據(jù)。普元數(shù)據(jù)集成產(chǎn)品( DI)提供了以下幾種方式可以找出這種數(shù)據(jù)變化。基于觸發(fā)器的增量數(shù)據(jù)抽取在這種方式下需要在業(yè)務(wù)數(shù)據(jù)庫中針對增、刪、改三種操作建立觸發(fā)器,并由觸發(fā)器將變化的數(shù)據(jù)寫入臨時表中,最后由DI從臨時表中讀取數(shù)據(jù),實現(xiàn)增量數(shù)據(jù)抽取。優(yōu)點:借助數(shù)據(jù)庫本身的機制,可靠性強。缺點:對源系統(tǒng)有影響,需要建立觸發(fā)器以及臨時表或臨時數(shù)據(jù)存儲文件。基于日志文件的增量數(shù)據(jù)抽取這種方式是使用數(shù)據(jù)庫本身的日志系統(tǒng),由DI讀取并解析數(shù)據(jù)庫的日志文件,然后在目標數(shù)據(jù)庫中進行相應(yīng)操作。優(yōu)點:可靠性強,對源系統(tǒng)沒有影響。缺點:各數(shù)據(jù)庫系統(tǒng)的日志文件
16、絕大部分都是私有的,例如Oracle數(shù)據(jù)庫的日志文件只有Oracle本身的ETL工具才可以讀取?;跁r間戳的增量數(shù)據(jù)抽取使用這種方式進行增量數(shù)據(jù)抽取的前提是源數(shù)據(jù)庫與目標數(shù)據(jù)庫都必須有時間戳字段。DI先讀取目標數(shù)據(jù)庫中的最大時間,然后以這個時間作為參數(shù)從源數(shù)據(jù)庫中讀取大于這個時間的所有數(shù)據(jù)。優(yōu)點:處理速度快,數(shù)據(jù)處理邏輯相對簡單。缺點:源數(shù)據(jù)庫沒有時間戳字段的表需要更改表結(jié)構(gòu),而且需要源數(shù)據(jù)庫來維護時間戳字段;無法實現(xiàn)數(shù)據(jù)同步,因為使用時間戳字段無法獲取刪除后的數(shù)據(jù)。下圖使用DI實現(xiàn)基于時間戳的增量數(shù)據(jù)抽?。荷蠄D黃色連接線表示將上一組件獲取的數(shù)據(jù)作為參數(shù)傳給下一組件。插入/更新:源數(shù)據(jù)庫以目標
17、數(shù)據(jù)庫最大時間作為參數(shù)進行數(shù)據(jù)查詢得到的數(shù)據(jù)有些是新增的、有些是修改的。插入/更新組件根據(jù)主鍵字段進行邏輯判斷,如果目標數(shù)據(jù)庫存在這一主鍵所描述的數(shù)據(jù)行,那么這條數(shù)據(jù)就進行更新操作,如果沒有就進行新增操作。基于全文比對的增量數(shù)據(jù)抽取通過ETL引擎獲取某一時刻源數(shù)據(jù)庫與目標數(shù)據(jù)庫的數(shù)據(jù)快照,然后逐一進行對比,找出新增、刪除、修改的數(shù)據(jù)后進行相應(yīng)操作。優(yōu)點:對源系統(tǒng)沒有任何影響。缺點:面對海量數(shù)據(jù)(千萬級、萬萬級)進行比對時有一定的性能問題。備注:全文比對的核心算法是將每條數(shù)據(jù)的每一列進行逐一比對,很顯然這種頻繁的I/O操作以及復(fù)雜的比對運算會造成較大的性能開銷,在實際的應(yīng)用過程中,可以事先對數(shù)據(jù)
18、進行預(yù)處理,將每一條數(shù)據(jù)生成一個唯一的HASH值,然后由DI對這個HASH值進行比對,找出變化的數(shù)據(jù)。這樣既減少了I/0操作又提高了計算效率。下圖使用DI實現(xiàn)基于全文比對的增量數(shù)據(jù)抽?。荷蠄D實現(xiàn)了人力資源管理系統(tǒng)與財務(wù)系統(tǒng)間的數(shù)據(jù)同步。DI處理邏輯首先獲取兩個系統(tǒng)的數(shù)據(jù)快照,根據(jù)比對記錄組件對數(shù)據(jù)進行逐一比對,并產(chǎn)生狀態(tài)字段存儲比對的結(jié)果,最后由過濾記錄組件根據(jù)狀態(tài)字段將數(shù)據(jù)劃分類型并交給相應(yīng)組件對目標數(shù)據(jù)庫進行操作。兩種數(shù)據(jù)處理模型(同步、異步)同步數(shù)據(jù)處理模型在同步數(shù)據(jù)處理過程中沒有中間步驟過渡, DI真正的充當(dāng)?shù)臄?shù)據(jù)源到目標數(shù)據(jù)庫之間集數(shù)據(jù)傳輸、數(shù)據(jù)處理的橋梁。異步數(shù)據(jù)處理模型異步ETL
19、流程的架構(gòu),需要在數(shù)據(jù)源與目標數(shù)據(jù)庫兩個端點部署兩個DI引擎,搭建一個集群環(huán)境。數(shù)據(jù)源端的DI引擎負責(zé)從數(shù)據(jù)源中抽取數(shù)據(jù),然后寫到文本文件中;目標數(shù)據(jù)庫端的DI引擎根據(jù)文本文件的內(nèi)容,將數(shù)據(jù)加載到目標數(shù)據(jù)庫中。中間通過網(wǎng)絡(luò)互聯(lián),目前 DI支持FTP、JMS、P2P、Socket等多種傳輸方式。兩種體系架構(gòu)的比較類別異步數(shù)據(jù)處理同步數(shù)據(jù)處理性能比同步模式提供了更好的數(shù)據(jù)處理性能,因為在網(wǎng)絡(luò)傳輸過程中,通過FTP、P2P這種傳輸方式要比直接通過數(shù)據(jù)庫鏈接要快很多。要避免出現(xiàn)性能瓶頸的解決方法是盡量縮小數(shù)據(jù)抽取的時間粒度,比如將抽取周期定位每日抽取,這樣可以保證每次抽取的增量數(shù)據(jù)是相對較少的,這樣可
20、以降低ETL處理的壓力。靈活性數(shù)據(jù)處理包括兩個步驟:1、將數(shù)據(jù)庫中的數(shù)據(jù)導(dǎo)出到中間過渡的文本。2、裝載數(shù)據(jù)文件。導(dǎo)出的處理過程比較靈活,可以從源表中導(dǎo)出,也可以從相關(guān)視圖中導(dǎo)出,甚至也可以先將源表輸出到前置機然后再導(dǎo)出到文本文件。在數(shù)據(jù)處理過程中一次性的完成數(shù)據(jù)導(dǎo)出和裝載的工作,這樣簡化了設(shè)計和測試的過程,但是從另一方面也降低了靈活性。適應(yīng)性通過中間的過渡文件進行數(shù)據(jù)交換,數(shù)據(jù)源和目標數(shù)據(jù)倉庫之間沒有直接的聯(lián)系,所以只要文本文件的數(shù)據(jù)結(jié)構(gòu)不發(fā)生變化,源和目標的數(shù)據(jù)結(jié)構(gòu)即使改變也不會對ETL流程產(chǎn)生很大的影響。在數(shù)據(jù)處理過程中,數(shù)據(jù)源和目標數(shù)據(jù)倉庫的字段關(guān)系被綁定到具體的映射(Mapping)中
21、,當(dāng)源或者目標的數(shù)據(jù)結(jié)構(gòu)發(fā)生變化,相對應(yīng)的映射關(guān)系也要做出修改。開發(fā)效率在異步ETL處理模式中,因為數(shù)據(jù)源和目標數(shù)據(jù)倉庫的數(shù)據(jù)接口是分開的,所以只要定義好中間的文本文件數(shù)據(jù)接口就可以將開發(fā)任務(wù)獨立成兩個模塊,分別完成源數(shù)據(jù)抽取與目標數(shù)據(jù)倉庫裝載的開發(fā)工作,各自模塊完成之后再將其裝配,這樣可以大大提高開發(fā)效率。要求ETL開發(fā)人員不僅需要全面了解源數(shù)據(jù)的體系結(jié)構(gòu),而且對目標數(shù)據(jù)倉庫的數(shù)據(jù)結(jié)構(gòu)也要非常熟悉,這對開發(fā)人員自身的素質(zhì)有很高的要求。數(shù)據(jù)類型支持如果數(shù)據(jù)源中包含圖形數(shù)據(jù),需要將其導(dǎo)出成字節(jié)流(Byte Stream,ASCII OR Unicode)并寫入文本文件中,實現(xiàn)起來有一定的難度。從
22、源到目標可以直接映射,不需要使用ASCII或Unicode作為中間過渡。兩種體系架構(gòu)所適應(yīng)的環(huán)境條件異步ETL同步ETL數(shù)據(jù)傳輸大數(shù)據(jù)量小數(shù)據(jù)量網(wǎng)絡(luò)連接廣域網(wǎng)局域網(wǎng)源系統(tǒng)和目標數(shù)據(jù)倉庫在物理架構(gòu)上是否屬于不同的分布式環(huán)境是不是業(yè)務(wù)模型調(diào)度全面性調(diào)度全面的、專業(yè)的調(diào)度管理,有效提高了數(shù)據(jù)管理水平。提供日歷方案+頻度方案+作業(yè)+消息配置等按需的任務(wù)調(diào)度,有利于提高了開發(fā)效率,減少了開發(fā)成本。靈活的調(diào)度機制支持事件機制和定時機制的調(diào)度方式。支持靈活的、多角度的作業(yè)調(diào)度管理,包括事件、文件到達和計劃調(diào)度以及手工觸發(fā)。日歷配置如下圖所示:計劃任務(wù)配置如下圖所示:靈活配置,可維護性強定制簡單化,僅需簡單的
23、鼠標點擊拖拉即可完成任務(wù)調(diào)度。調(diào)度活動痕跡化,為管理風(fēng)險做到可控化。靈活的消息機制,把各種消息自動分發(fā)給用戶(例:將作業(yè)的執(zhí)行狀態(tài)通知給管理員等)。平臺組件化,耦合度低,接口簡單,易開發(fā)。平臺三層架構(gòu),結(jié)構(gòu)清晰,具有良好的穩(wěn)定性和容錯性。采用了先進的JavaEE技術(shù)架構(gòu),平臺具有很強的跨平臺性和良好的可移植性??膳渲玫拇碡撦d加權(quán)算法,可以在執(zhí)行作業(yè)時支持多機集群,根據(jù)負載情況合理分擔(dān)作業(yè)執(zhí)行的服務(wù)器,從而能承載大規(guī)模數(shù)據(jù)的高負荷運行。調(diào)度平臺的邏輯架構(gòu)如下圖所示:監(jiān)控和管理控制臺管理控制臺是用戶設(shè)計調(diào)度作業(yè)、進行調(diào)度監(jiān)控和資源監(jiān)控的控制界面,有兩種用戶角色:管理員和操作員,管理員具備平臺所有
24、的操作權(quán)限,操作員只能監(jiān)視系統(tǒng)運行狀態(tài),以及作業(yè)異常時允許有限的管理功能。調(diào)度引擎調(diào)度引擎是 DI調(diào)度的核心組件,它接收作業(yè)觸發(fā)監(jiān)控接口的作業(yè)輸入,然后檢查作業(yè)的依賴關(guān)系,通過資源管理器的資源分配將作業(yè)分發(fā)到調(diào)度代理執(zhí)行作業(yè)。作業(yè)觸發(fā)監(jiān)控接口是調(diào)度引擎的輸入組件,它以控制文件的方式對外提供服務(wù),接收器定時掃描接收目錄中的控制文件,并且掃描間隔可以定制。作業(yè)流執(zhí)行策略作業(yè)流定義了一組具有相互依賴關(guān)系的作業(yè)。作業(yè)流執(zhí)行策略定義了作業(yè)失敗后的執(zhí)行策略,包括忽略、作業(yè)失敗后的重試策略(失敗后從斷點執(zhí)行還是重頭執(zhí)行,失敗重試間隔,失敗重試次數(shù))和是否檢查上次狀態(tài)(如果檢查,失敗后不能自動運行,需要干預(yù)后
25、重置狀態(tài))。作業(yè)流分支在構(gòu)成一個作業(yè)流的諸多作業(yè)中,可以對每一個作業(yè)依據(jù)參數(shù)、作業(yè)執(zhí)行狀態(tài)、作業(yè)返回碼等要素進行控制,從而實現(xiàn)對作業(yè)流更精準和復(fù)雜的控制,滿足實際項目多種運用場景的需要。作業(yè)流嵌套作業(yè)流可以引用作業(yè)流實現(xiàn)作業(yè)流的依賴要。作業(yè)/流優(yōu)先級選項/VIP通道在事件、計劃調(diào)度和直接運行作業(yè)時可指定作業(yè)或作業(yè)流的優(yōu)先級,并按優(yōu)先級運行。支持作業(yè)(流)復(fù)雜依賴關(guān)系定義作業(yè)之間的依賴關(guān)系,根據(jù)依賴關(guān)系,控制作業(yè)流中定義的作業(yè)執(zhí)行。作業(yè)(流)前置配置:作業(yè)流能夠定義前置(一個或多個作業(yè)流,并且由前置作業(yè)流執(zhí)行狀態(tài)來控制該作業(yè)流是否執(zhí)行)。作業(yè)(流)后置配置:根據(jù)作業(yè)(流)的執(zhí)行狀態(tài)、返回值、作業(yè)
26、參數(shù)等來決定后置作業(yè)(流)是否執(zhí)行。靈活的自動翻牌翻牌策略定義:支持單個作業(yè)(流)自動翻牌、支持按組自動翻牌。翻牌觸發(fā)方式:按計劃調(diào)度運行翻牌、手動翻牌、事件觸發(fā)翻牌。翻牌規(guī)則:支持自定義翻牌頻度、自定義翻牌日歷。調(diào)度代理調(diào)度代理接收調(diào)度引擎的執(zhí)行命令,管理作業(yè)從啟動到完成,完成后存儲作業(yè)日志,返回作業(yè)執(zhí)行結(jié)果到調(diào)度引擎。資源管理器資源管理器是作業(yè)進行資源分配的管理組件,作業(yè)在分發(fā)到調(diào)度代理前需要查詢資源管理器目前的資源狀態(tài),判斷是否有合適的服務(wù)器執(zhí)行作業(yè),另外資源管理器還負責(zé)實時采集服務(wù)器資源狀態(tài),為控制臺監(jiān)控資源提供信息。通知和報警可以在作業(yè)流上設(shè)置作業(yè)流執(zhí)行狀態(tài)通知和報警,在執(zhí)行成功和失
27、敗后,系統(tǒng)告警,并將異常明細通過Email發(fā)給相關(guān)運維人員。作業(yè)監(jiān)控全局性監(jiān)控全局的作業(yè)運行監(jiān)控服務(wù),有效提高數(shù)據(jù)管理水平。靈活的作業(yè)狀態(tài)日志查詢,支持作業(yè)批次的。詳細日志的查詢,全局查看作業(yè)文件日志或執(zhí)行腳本。簡單靈活的作業(yè)流水分析與監(jiān)控,快速定位問題??梢暬O(jiān)控支持可視化的多角度作業(yè)運行監(jiān)控,包括總覽全局的總體監(jiān)控和明細型的計劃監(jiān)控以及事件監(jiān)控。支持可視化服務(wù)器狀態(tài)監(jiān)控,及時了服務(wù)器的運行狀況(啟動/異常等)。支持資源預(yù)警,提供圖形化方式實時跟蹤服務(wù)器CPU、內(nèi)存、磁盤空間等狀態(tài)變化,設(shè)置服務(wù)器資源閥值,實時告警通知。擴展性強支持分布式集群,實現(xiàn)負載均衡,具有良好的穩(wěn)定性。二次開發(fā)接口豐富
28、,擴展靈活。靈活的任務(wù)封裝機制,靈活擴展作業(yè)類型。監(jiān)控管理界面如下圖所示:作業(yè)執(zhí)行日志:對資源的重點監(jiān)控定義監(jiān)控資源可以定義服務(wù)器監(jiān)控資源,包括管理服務(wù)器、調(diào)度服務(wù)器、代理服務(wù)器??梢詫ι鲜龆x的資源選擇是否監(jiān)控,其中可以對作業(yè)服務(wù)器選擇是否參與負載均衡。閥值設(shè)置定義高位警戒線和低位警戒線定義監(jiān)控數(shù)據(jù)采集頻度定義代理狀態(tài)采集頻度定義負載均衡加權(quán)值算法資源監(jiān)控Web的、圖形化的監(jiān)控界面監(jiān)控服務(wù)器資源情況包括物理內(nèi)存使用情況、硬盤使用情況、連接狀態(tài)、服務(wù)器工作狀態(tài)(在線or離線)等。以下是資源監(jiān)控界面:企業(yè)級的負載均衡(HA)能力DI Governor系統(tǒng)采用三層架構(gòu),管理平臺、調(diào)度服務(wù)器、代理可
29、以根據(jù)客戶的負載集中部署,也可以分來部署。系統(tǒng)對三層架構(gòu)都提供了高可用方案。管理平臺通過應(yīng)用服務(wù)器的負載均衡來達到更高的并發(fā)數(shù)。支持多個調(diào)度服務(wù)器的分布式調(diào)度,以分擔(dān)負載。代理HA和負載均衡支持;系統(tǒng)可以檢測代理是否活動,當(dāng)機的代理不再執(zhí)行作業(yè),系統(tǒng)通過資源檢測,自動尋找資源最優(yōu)的代理進行作業(yè)的執(zhí)行。另外,代理提供作業(yè)并行度,用于控制最大同時運行作業(yè)數(shù)量,防止資源耗盡。功能和資源權(quán)限管理DI Governor提供企業(yè)級的權(quán)限管理機制。圍繞登錄用戶的信息及權(quán)限提供一整套管理機制,由系統(tǒng)管理員進行統(tǒng)一管理。用戶管理是控制用戶功能權(quán)限、數(shù)據(jù)訪問權(quán)限、資源訪問權(quán)限的基礎(chǔ)。支持按用戶、角色進行權(quán)限管理。
30、DI Governor對系統(tǒng)提供的所有資源提供記錄級的權(quán)限管理??晒芾碣Y源包括:數(shù)據(jù)源、ETL服務(wù)器、代理服務(wù)器、調(diào)度服務(wù)器、作業(yè)目錄、作業(yè)、作業(yè)參數(shù)、作業(yè)流、計劃任務(wù)、頻度、日歷、事件、公共組件、映射和公共監(jiān)控。 DI產(chǎn)品的特點和優(yōu)勢完全圖形化設(shè)計,基于元數(shù)據(jù)驅(qū)動,直觀可控。企業(yè)在實施數(shù)據(jù)集成項目時往往面臨大批量的異構(gòu)數(shù)據(jù),原始通過手工編寫代碼或者采用數(shù)據(jù)庫存儲過程的方式通常也可實現(xiàn)簡單的數(shù)據(jù)集成功能,但隨著項目實施范圍不斷擴大,項目面臨不可控。 DI提供了基于SWT的數(shù)據(jù)變換和模型設(shè)計工具,開發(fā)人員只需在圖形化環(huán)境中通過拖拽方式就可以描述復(fù)雜的數(shù)據(jù)變換和任務(wù)流程,不需要進行任何編碼,業(yè)務(wù)人
31、員也可非常容易的了解數(shù)據(jù)的流向。系統(tǒng)提供超過40個數(shù)據(jù)處理組件,應(yīng)對各種復(fù)雜處理。同時引擎基于元數(shù)據(jù)驅(qū)動,可以對一系列的數(shù)據(jù)交互流程進行統(tǒng)一管理,對技術(shù)層面和業(yè)務(wù)層面的元數(shù)據(jù)進行存儲,支撐了決策支持系統(tǒng)、數(shù)據(jù)治理等業(yè)務(wù)的實施。靈活的調(diào)度配置。調(diào)度及相關(guān)配置簡單、靈活、易用;支持靈活的、多角度的模型作業(yè)調(diào)度機制,包括事件、數(shù)據(jù)庫就緒、文件到達和計劃調(diào)度以及手工觸發(fā)。 DI不但可以調(diào)度自身的數(shù)據(jù)集成引擎,更可以調(diào)度第三方ETL工具,如:DataStage和PowerCenter。多角度的運行監(jiān)控。監(jiān)控平臺提供了總攬全局的總體監(jiān)控和明細型的計劃監(jiān)控以及事件監(jiān)控;可視化的多維度作業(yè)運行監(jiān)控,使得極佳的
32、易用性獲得最大限度推廣;提供調(diào)度環(huán)境多個DI引擎的資源監(jiān)控,包括CPU占用、內(nèi)存使用、磁盤空間等信息。完善的資源監(jiān)控體系。數(shù)據(jù)集成平臺有完善的資源監(jiān)控功能,可以對管理服務(wù)器、調(diào)度服務(wù)器、代理服務(wù)器以及物理機器的CPU、內(nèi)存等資源進行全面的監(jiān)控和管理,另外也通過配置監(jiān)控服務(wù)器的連接狀態(tài)等,通過對這一系列資源的監(jiān)控,可以保證在第一時間發(fā)現(xiàn)系統(tǒng)存在的問題,并且及時排除,保證系統(tǒng)的正常運行。系統(tǒng)采取web的監(jiān)控界面,包括對作業(yè)和資源的監(jiān)控,監(jiān)控界面展現(xiàn)內(nèi)容直觀、信息豐富,最大程度的方便了產(chǎn)品的使用者。多種作業(yè)流處理體系。作業(yè)流分支實現(xiàn)對作業(yè)流更精準的控制。在構(gòu)成一個作業(yè)流的諸多作業(yè)中,可以對每一個作業(yè)
33、依據(jù)參數(shù)、作業(yè)執(zhí)行狀態(tài)、作業(yè)返回碼等要素進行控制,從而實現(xiàn)對作業(yè)流更精準和復(fù)雜的控制,滿足實際項目多種運用場景的需要。作業(yè)流嵌套。作業(yè)流可以引用作業(yè)流實現(xiàn)作業(yè)流的依賴要。作業(yè)/流優(yōu)先級選項/VIP通道。在事件、計劃調(diào)度和直接運行作業(yè)時可指定作業(yè)或作業(yè)流的優(yōu)先級,并按優(yōu)先級運行。Job自動化。支持Oracle、DB2、SQL Server等主流數(shù)據(jù)庫;能自動生成ETL Job、存儲過程以及DI數(shù)據(jù)處理模型,提高開發(fā)效率,規(guī)范開發(fā)過程。企業(yè)級性能和高擴展性。數(shù)據(jù)處理的性能往往是數(shù)據(jù)集成項目關(guān)注的重點,性能是保證數(shù)據(jù)中心數(shù)據(jù)實時性的關(guān)鍵。 DI具有強大的數(shù)據(jù)轉(zhuǎn)換效率,在大負荷的任務(wù)執(zhí)行中仍然有良好的
34、性能,并行執(zhí)行能力使其所能處理數(shù)據(jù)的速度可以得到趨近于線性的擴展,輕松處理大量數(shù)據(jù)。與此同時基于數(shù)據(jù)流的數(shù)據(jù)處理模型更能最大程度的發(fā)揮各個DI處理單元的處理能力。提供集群服務(wù),可以把負載分布到多個業(yè)務(wù)模型引擎和任務(wù)調(diào)度引擎上,大規(guī)模并行處理使其能夠適應(yīng)大規(guī)模企業(yè)級應(yīng)用,具有很高的擴展性。可配置的均衡負載機制。一個數(shù)據(jù)處理模型在一組引擎上運行的時候,可以通過配置實現(xiàn)模型的均衡負載運行,最大化的發(fā)揮DI引擎的處理能力,以及協(xié)調(diào)集群的處理能力,提高數(shù)據(jù)處理的吞吐率。開放的架構(gòu),易于使用的二次開發(fā)接口。提供了簡單易用的二次開發(fā)接口,用戶可以很容易的定制開發(fā)各種數(shù)據(jù)轉(zhuǎn)換和任務(wù)組件,并能在應(yīng)用中實現(xiàn)對 D
35、I的調(diào)用執(zhí)行。同時提供JavaScript的集成能力,通過JavaScript圖元方便用戶嵌入任意的JS數(shù)據(jù)處理腳本。可視化調(diào)試和性能監(jiān)控。 DI提供了圖形化的調(diào)試和監(jiān)控工具,可以直觀顯示任務(wù)的執(zhí)行,可以實時檢測系統(tǒng)在各環(huán)節(jié)的數(shù)據(jù)處理性能,并以曲線圖的方式顯示。全面的變化數(shù)據(jù)捕獲和數(shù)據(jù)抽取策略。如何捕獲增量數(shù)據(jù)往往是實施數(shù)據(jù)集成項目非常重要的問題, DI提供了基于時戳、基于觸發(fā)器、全文比對等各種方式的變化數(shù)據(jù)捕獲機制,提供批量抽取、實時抽取、定時抽取等各種數(shù)據(jù)抽取執(zhí)行策略??缙脚_和豐富的數(shù)據(jù)源支持。平臺采用Java開發(fā),可以運行在SUN Solaris、HP-UX、IBM AIX、AS/400
36、、OS/390、 Sco UNIX、Linux、Windows 等各種操作系統(tǒng);支持Oracle、 Sybase、SQL Server、DB2、Informix、OleDB、Text、Excel、XML、CSV、Access、Foxbase、FoxPro、Dbase、Interbase等各種數(shù)據(jù)源。 DI產(chǎn)品組成及功能概述 DI由以下五部分產(chǎn)品組件組成:DI Server(數(shù)據(jù)集成引擎)、DI Component Library(數(shù)據(jù)集成組件庫)、DI Studio(數(shù)據(jù)集成建模工具)、DI Governor(數(shù)據(jù)集成模型治理)、DI Metadata Warehouse(元數(shù)據(jù)倉庫)。DI
37、ServerDI Server(數(shù)據(jù)集成引擎)基于JAVA構(gòu)建,是 DI的核心,負責(zé)解析數(shù)據(jù)集成模型定義、處理Governor請求、處理引擎自身的模型調(diào)度等。數(shù)據(jù)集成引擎可以滿足大規(guī)模數(shù)據(jù)的并發(fā)處理,完成企業(yè)級的數(shù)據(jù)交換場景。數(shù)據(jù)集成引擎基于數(shù)據(jù)流的數(shù)據(jù)結(jié)構(gòu)處理,在大規(guī)模、復(fù)雜的數(shù)據(jù)處理場景中依然具有非常高的性能以及穩(wěn)定性,適用于電子政務(wù)、電信、銀行、制造等行業(yè)。DI Component LibraryDI Component Library(數(shù)據(jù)集成組件庫)包括了一組與數(shù)據(jù)集成相關(guān)的服務(wù)構(gòu)建,通過這些豐富的組件,開發(fā)人員可以在集成開發(fā)環(huán)境下基于可視化的組件圖元快速開發(fā)出高效的數(shù)據(jù)處理模型。D
38、I組件庫包含了數(shù)據(jù)抽取組件集、數(shù)據(jù)裝載組件集、數(shù)據(jù)轉(zhuǎn)換組件集以及用來傳輸二進制數(shù)據(jù)的數(shù)據(jù)傳輸組件集。數(shù)據(jù)抽取與裝載組件集包含了一組對不同數(shù)據(jù)源、關(guān)系型數(shù)據(jù)的數(shù)據(jù)抽取組件,支持XML、Excel等半結(jié)構(gòu)化數(shù)據(jù)、支持CSV、TXT等非結(jié)構(gòu)化數(shù)據(jù)、支持Oracle、MS SQL Server、MySQL、DB2、Sybase、Informix等關(guān)系型數(shù)據(jù)庫、支持ArcGIS空間數(shù)據(jù)庫、支持Cassandra、Hadoop、HBase等非關(guān)系型數(shù)據(jù)庫。數(shù)據(jù)轉(zhuǎn)換組件集包含了一組對數(shù)據(jù)進行轉(zhuǎn)換、過濾、清洗、合并的組件,以實現(xiàn)對復(fù)雜、凌亂數(shù)據(jù)的業(yè)務(wù)處理。借助DI數(shù)據(jù)轉(zhuǎn)換組件庫,可以實現(xiàn):對數(shù)據(jù)按照某一標識進
39、行拆分。根據(jù)字段值的不同進行數(shù)據(jù)映射。對一份數(shù)據(jù)按照不同類型進行分組。針對源數(shù)據(jù)庫與目標數(shù)據(jù)庫的字段名稱不同進行映射。將兩份數(shù)據(jù)合并成一份。將一份數(shù)據(jù)按照某一列的值進行排序。指定一個邏輯條件進行數(shù)據(jù)的過濾。對數(shù)據(jù)中牽扯到的數(shù)值信息進行數(shù)學(xué)計算。對兩份進行進行全文比對,找出其中的異同。對無法滿足的需求可借助JavaScript功能自定義處理方式。DI StudioDI Studio(數(shù)據(jù)集成建模工具)是基于SWT技術(shù)開發(fā)的可視化流程設(shè)計器,提供可視化數(shù)據(jù)模型定義與調(diào)試、可視化的模型性能監(jiān)控、元數(shù)據(jù)管理以及數(shù)據(jù)處理模型部署等功能。DI Studio的集成開發(fā)環(huán)境的功能特性包括:可視化數(shù)據(jù)模型定義用
40、拖拉方式畫出數(shù)據(jù)交換模型。支持多種處理處理模式(同步、異步)。支持多種增量數(shù)據(jù)抽取方式。無需編寫代碼即可調(diào)試數(shù)據(jù)處理模型。支持全局變量、本地變量配置。支持快速查看源數(shù)據(jù)。可視化的模型性能監(jiān)控根據(jù)數(shù)據(jù)交換模型配置,運行時通過Studio界面可實時監(jiān)控數(shù)據(jù)輸入、輸出IO性能,更可以監(jiān)控交換模型中每一個組件的數(shù)據(jù)處理性能,跟性能優(yōu)化工作提供必要的數(shù)據(jù)支撐。元數(shù)據(jù)管理開發(fā)人員可通過DI Studio可對DI底層元數(shù)據(jù)倉庫進行資源查看、檢索、更新等操作,通過元數(shù)據(jù)庫倉庫可實現(xiàn)團隊模型管理、版本控制等。數(shù)據(jù)處理模型部署通過DI Studio可將開發(fā)好的數(shù)據(jù)處理模型部署到DI Server,并通過DI Go
41、vernor對其進行管理調(diào)度、優(yōu)化治理。DI GovernorDI Governor(數(shù)據(jù)集成模型治理)是 DI提供的系統(tǒng)管理監(jiān)控與任務(wù)調(diào)度工具,系統(tǒng)管理員可以通過它對數(shù)據(jù)處理模型以及數(shù)據(jù)處理引擎進行配置和管理。DI Governor與 DI其他部件結(jié)合想結(jié)合是企業(yè)快速構(gòu)建數(shù)據(jù)中心、實現(xiàn)數(shù)據(jù)交換的理想平臺,在實施過程中可以對開發(fā)過程實現(xiàn)規(guī)范化、調(diào)度管理統(tǒng)一化、監(jiān)控可視化等。同時也可以與第三方處理處理引擎實現(xiàn)互補,增強其統(tǒng)一調(diào)度、全局監(jiān)控等功能。DI Governor的功能特性包括:數(shù)據(jù)集成模型全生命周期管理與任務(wù)調(diào)度、監(jiān)控。實現(xiàn)數(shù)據(jù)處理作業(yè)自動化。DI Server資源監(jiān)控與負載均衡。數(shù)據(jù)集成
42、平臺資源與權(quán)限管理。提供二次開發(fā)API,與第三方系統(tǒng)集成。DI Metadata WarehouseDI Server基于元數(shù)據(jù)驅(qū)動,DI Metadata Warehous(元數(shù)據(jù)倉庫)用于保存通過數(shù)據(jù)集成建模工具構(gòu)建的數(shù)據(jù)處理模型,支持Oracle、DB2、Syabase、MySQL、MS SQL Server等多種關(guān)系數(shù)據(jù)庫,同時可以基于文件形式進行模型存儲。DI Server通過解析元數(shù)據(jù)倉庫中對模型的定義數(shù)據(jù)實例化數(shù)據(jù)處理模型。 DI產(chǎn)品環(huán)境配置支持的操作系統(tǒng) DI Studio(數(shù)據(jù)集成建模工具)支持的操作系統(tǒng)Windows 2003/XP。 DI Server(數(shù)據(jù)集成引擎)支持
43、的操作系統(tǒng)Windows 2003/XP HYPERLINK /xdp55109.html t _blank RedHat Enterprise Linux Advanced Server 2.0及以上AIX 5.3 +HP UNIX 11 +Solaris 8 + DI Governor(數(shù)據(jù)集成治理環(huán)境)支持的操作系統(tǒng)Windows 2003/XP HYPERLINK /xdp55109.html t _blank RedHat Enterprise Linux Advanced Server 2.0及以上AIX 5.3 +HP UNIX 11 +Solaris 8 +支持的JavaEE服
44、務(wù)器Tomcat 5.5.20JBoss 4.0.5 GAWebLogic/WebLogic Cluster 9.2.3/10.0/10.3WebSphere/Websphere ND 5支持的數(shù)據(jù)庫Oracle 9i/10g +DB2 UDB_V8.2 +Informix 9.4 +Sybase 12.5 +SqlServer 2000 +MySQL 5.0 +支持的瀏覽器IE 6/7/8/9Firefox 2支持的JDK版本開發(fā)環(huán)境支持的JDKSUN JDK 1.5/1.6。運行環(huán)境支持的JDKSUN JDK 1.5/1.6。典型案例諸暨市智慧安居工程數(shù)據(jù)交換平臺建設(shè)客戶簡介諸暨市智慧安居
45、工程以科學(xué)發(fā)展觀為指導(dǎo),整合各方資源,廣泛應(yīng)用物聯(lián)網(wǎng)和云計算技術(shù),創(chuàng)新發(fā)展“楓橋經(jīng)驗”,創(chuàng)新公共安全防范和服務(wù)手段,建立和完善智慧型的工作體系,精準掌控公共安全狀態(tài),提高信息化應(yīng)用和公共安全管理、服務(wù)水平,實現(xiàn)安民、保民、便民、利民,為大城市建設(shè)和率先基本實現(xiàn)現(xiàn)代化營造和諧穩(wěn)定的社會環(huán)境。為了更好實現(xiàn)上述目的,需要建設(shè)一個統(tǒng)一的智慧安居系統(tǒng)平臺,實現(xiàn)安居統(tǒng)一服務(wù),并通過整合分系統(tǒng)建設(shè)中的信息以及接口以實現(xiàn)數(shù)據(jù)信息深層利用。特此提出軟件對接標準要求規(guī)范,所有一期建設(shè)所含分系統(tǒng)需要在此規(guī)范下開放數(shù)據(jù)以及調(diào)用接口,統(tǒng)一用戶使用接口。背景與問題智慧安居工程建設(shè)始于2011年,以信息化應(yīng)用為主要載體,包
46、括信息指揮服務(wù)中心、智慧防控體系、智慧服務(wù)體系、智慧應(yīng)急體系等16項內(nèi)容。本階段以建設(shè)國家級示范工程為目標,聯(lián)合開展“智慧安居”工程試點建設(shè),力爭在楓橋經(jīng)驗50周年到來之前完成“智慧安居”工程試點建設(shè),為進一步提升諸暨市城市管理水平和產(chǎn)業(yè)升級提供一個強有力的平臺?,F(xiàn)階段信息交換、資源共享和業(yè)務(wù)系統(tǒng)成為發(fā)展的關(guān)鍵。目前系統(tǒng)缺少統(tǒng)一規(guī)劃,各自為政、重復(fù)建設(shè),對用資源共享與交換缺少統(tǒng)一信息平臺作為依托。部門間的條塊分割管理體制造成了諸多信息孤島,數(shù)據(jù)割據(jù)造成了資源分散不利于今后其他系統(tǒng)的業(yè)務(wù)展開。各部門間的業(yè)務(wù)協(xié)作采用最原始的溝通方式,如:電話、Email、資源拷貝等方式,不能有效地保證數(shù)據(jù)的及時穩(wěn)
47、定傳遞,而且在實際工作中造成了許多人為的數(shù)據(jù)錯誤。產(chǎn)品與方案總體設(shè)計 DI在數(shù)據(jù)交換平臺中可做為一個統(tǒng)一的數(shù)據(jù)來源,主要提供了各業(yè)務(wù)系統(tǒng)之間的實時數(shù)據(jù)交換功能。將各個系統(tǒng)中的業(yè)務(wù)數(shù)據(jù)抽取,經(jīng)過過濾清洗轉(zhuǎn)換形成數(shù)據(jù)中心所需要的數(shù)據(jù)。前置交換節(jié)點前置交換節(jié)點是資源共享交換平臺的重要組成部分。多個前置交換節(jié)點一同構(gòu)成了分布式的資源交換與組件運行環(huán)境。前置交換節(jié)點由一個前置交換數(shù)據(jù)庫和節(jié)點軟件構(gòu)成,在節(jié)點軟件中的 DI負責(zé)將一個或多個業(yè)務(wù)系統(tǒng)中需要共享的數(shù)據(jù)通過標準的ETL方式裝載到前置交換數(shù)據(jù)庫中,通過節(jié)點軟件中提供的各種接口協(xié)議適配服務(wù)與資源交換中心進行對接。中心交換節(jié)點中心交換節(jié)點由數(shù)據(jù)存儲中心
48、和數(shù)據(jù)交換中心構(gòu)成。DI Server實現(xiàn)了前置交換節(jié)點與中心交換節(jié)點的基于JMS的可靠消息傳遞交換。 ESB eq oac(,R)暴露HTTP、JMS、SOAP接口供外部調(diào)用, ESB Governor提供了中央管理功能,通過心跳服務(wù)實時監(jiān)控各服務(wù)節(jié)點的運行狀態(tài)、負載、傳輸量等一系列交換信息。資源目錄提供了實體資源的注冊、發(fā)布、更新、尋址等功能。數(shù)據(jù)中心存儲了經(jīng)過統(tǒng)一標準化的可供共享的各業(yè)務(wù)系統(tǒng)實體數(shù)據(jù)。前置交換節(jié)點與平臺對接在資源共享交換平臺中,中心平臺的作用主要是對實體業(yè)務(wù)數(shù)據(jù)的存儲,目錄資源的存儲以及資源交換的管理與調(diào)度。前置交換節(jié)點實現(xiàn)了業(yè)務(wù)數(shù)據(jù)的捕獲,目錄元數(shù)據(jù)的編目,與其他交換節(jié)點進行點到點的數(shù)據(jù)交換等功能。前置交換節(jié)點與平臺的對接是系統(tǒng)實施的核心,如何根據(jù)自身應(yīng)用系統(tǒng)發(fā)展的現(xiàn)狀以及網(wǎng)絡(luò)部署情況選擇合適的接入方式尤其重要。交換平臺的監(jiān)控資源共享交換平臺的核心功能除進行資源交換之外還有交換過程的監(jiān)控。分為兩種監(jiān)控形式:數(shù)據(jù)管理系統(tǒng)監(jiān)控。數(shù)據(jù)管理系統(tǒng)通過數(shù)據(jù)交換系統(tǒng)采集交換至中心的各類參建
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 2021貴陽市高考英語閱讀、閱讀表達一輪自練題(2)-及答案
- 【全程復(fù)習(xí)方略】2020年高考政治一輪課時提升作業(yè)(30)-必修3-第4單元-第10課(江蘇專供)
- 【Ks5u名?!繌V東省中山市2021屆高三下學(xué)期第二次模擬考試文科綜合試題-
- 《敢拼能賺愛玩》課件
- 供貨合同一(合同版本)
- 2021高一物理-1.4-斜拋運動-每課一練(教科版必修2)
- 【2022教學(xué)參考】歷史材料與解析:人教版歷史必修3-第11課物理學(xué)的重大進展-
- 2025年0196北京華創(chuàng)嘉信服裝有限公司
- 我的心兒怦怦跳作文350字四年級
- 《不規(guī)則選擇工具》課件
- 采購部門總結(jié)及規(guī)劃
- 統(tǒng)編版語文2024-2025學(xué)年六年級上冊語文期末專題訓(xùn)練:字音字形(有答案)
- 機器人課件模板下載
- 江蘇省蘇州市2023-2024學(xué)年高二上學(xué)期期末學(xué)業(yè)質(zhì)量陽光指標調(diào)研試題 物理 含答案
- 2024年安防監(jiān)控系統(tǒng)技術(shù)標準與規(guī)范
- 軟件正版化概念培訓(xùn)
- GB/T 8574-2024復(fù)合肥料中鉀含量的測定
- 工程結(jié)算業(yè)務(wù)咨詢服務(wù)協(xié)議書
- 運輸公司安全生產(chǎn)隱患排查制度
- 譯林新版(2024)七年級英語上冊Unit 5 Reading課件
- 爆破設(shè)計說明書(修改)
評論
0/150
提交評論