企業(yè)數據中心建設方案

企業(yè)數據中心建設方案企業(yè)數據中心建設方案全文共15頁，當前為第1頁。數據中心，讓企業(yè)變的智能、智慧企業(yè)數據中心建設方案全文共15頁，當前為第1頁。-------------企業(yè)數據中心建設方案需求背景隨著電子商務的蓬勃發(fā)展，公用云、行業(yè)云的快速推廣，以及社交軟件、移動支付的普及，一方面是企業(yè)數據量成倍增加，另一方面是企業(yè)數據更加碎片化，造成企業(yè)經營決策越來越復雜，因此企業(yè)的數據管理水平，將直接決定公司的管理水平，數據中心將成為企業(yè)經營大腦，讓企業(yè)變的智能、智慧。同時，多年來我們一直在踐行大型企業(yè)的信息化建設，參于、知悉有的大型企業(yè)采用統(tǒng)一規(guī)劃推動建設的，也有單一業(yè)務部門推動建設的，但不管哪種模式，在戰(zhàn)略調整、管理變革、領導變動等因素的推動下，應用系統(tǒng)被不斷的迭代，而軟件廠商不斷的扮演著“換”與“被換”的角色。深入分析，業(yè)務系統(tǒng)是業(yè)務管理的工具，隨著管理思想、管控要求、業(yè)務流程、業(yè)務規(guī)則的變化而變化屬于正常迭代，而且不可避免，但業(yè)務系統(tǒng)的背后財務數據、人事數據、業(yè)務數據等數據一直不變，而這些數據是公司非常有價值的資產，因此必須通過數據中心的建設，將不同領域、不同單位、不同軟件的數據進行集中統(tǒng)一管理，才能實現(xiàn)數據綜合分析、決策支持應用。如何采集、積累并利用數據資源？如何消除企業(yè)各業(yè)務之間的信息孤島？如何主動適應各種應用系統(tǒng)迭代與升級？這個三個問題是企業(yè)數據中心建設必須面對的問題。解決方案方案簡介我們認為數據中心建設是建立企業(yè)級數據標準、數據模型為基礎，按數據倉庫、數據集市數據存儲設計理念管理數據，通過主數據系統(tǒng)管理基礎數據，數據模型裝載業(yè)務數據，自動數據采集系統(tǒng)打通業(yè)務系統(tǒng)與數據中心的信息通道，企業(yè)服務總線系統(tǒng)打通應用系統(tǒng)與應用系統(tǒng)之間信息通道，在線填報系統(tǒng)補充缺少系統(tǒng)領域的數據，決策支持系統(tǒng)進行數據挖掘與展示。即2套體系7個系統(tǒng)，2個體系為數據標準體系、數據模型體系，7個系統(tǒng)為主數企業(yè)數據中心建設方案全文共15頁，當前為第2頁。據管理系統(tǒng)、元數據管理系統(tǒng)、數據倉庫、企業(yè)服務總線系統(tǒng)、自動采集系統(tǒng)、在線采集系統(tǒng)、決策支持系統(tǒng)。企業(yè)數據中心建設方案全文共15頁，當前為第2頁。系統(tǒng)架構核心價值建立數據標準，為業(yè)務系統(tǒng)在規(guī)劃、選型、建設、改造方面提供低偶合技術方案支持，為信息化有序、高效、全面進行信息系統(tǒng)建設提供支撐，降低系統(tǒng)建設成本，提高系統(tǒng)使用壽命，消除信息孤島。建立數據中心，將企業(yè)不同領域、不同單位、不同軟件的數據進行集中統(tǒng)一管理，建立各種主題數據倉庫，挖掘數據潛在價值，建立決策分析模型，應用數據指導企業(yè)的經營決策，讓企業(yè)變的智能、智慧。方案特色全面統(tǒng)一企業(yè)級元數據，實現(xiàn)數據全生命周期管理跨應用的主數據管理，保障數據一致性和有效性企業(yè)數據中心建設方案全文共15頁，當前為第3頁。低耦合服務集成應用框架，降低數據集成綜合成本企業(yè)數據中心建設方案全文共15頁，當前為第3頁?！白詣硬杉?在線填報”相結合，保證數據完整性和及時性PB級大規(guī)模數據管理能力，支撐大數據存儲與應用開放式的算法庫和模型庫，最大化發(fā)揮數據應用價值咨詢服務方案數據標準化咨詢通過推進企業(yè)信息化數據標準化建設，務實企業(yè)信息化在數據管理方面基礎水平，為企業(yè)有序、高效、全面進行信息系統(tǒng)建設提供支撐，以及為業(yè)務系統(tǒng)在規(guī)劃、選型、建設、改造方面提供低偶合技術方案支持，降低系統(tǒng)建設成本，提高系統(tǒng)使用壽命。數據標準化建設在充分調研領導決策支持應用、業(yè)務管理應用的信息化需求，結合現(xiàn)有信息化系統(tǒng)、規(guī)劃建設信息系統(tǒng)的內容，以按“管控集中、業(yè)務協(xié)同、數據驅動”為重點，進行企業(yè)信息化的數據標準化建設。主數據規(guī)劃：1）主數據整體規(guī)劃，主數據管理范圍、主數據關系描述、主數據管理機構、主數據管理策略、具體主數據溯主系統(tǒng)定義、具體主數據責任部門定義、具體主數據接口描述；2）具體主數據管理規(guī)范包括主數據描述、主數據應用范圍、主數據編碼方案、主數據管理流程、主數據管理規(guī)范、主數據集成規(guī)范；3）具體主數據技術規(guī)范包括技術標準、服務列表、方法描述。集成服務規(guī)劃：1）集成服務整體規(guī)劃，集成服務范圍、集成服務管理機構、集成服務技術標準、集成服務開發(fā)規(guī)范、集成服務開發(fā)流程、具體集成服務溯主系統(tǒng)定義。2）具體集成服務規(guī)范，集成服務功能簡介、集成服務技術信息、集成服務數據描述、集成服務方法企業(yè)數據中心建設方案全文共15頁，當前為第4頁。描述、集成服務實例樣例。企業(yè)數據中心建設方案全文共15頁，當前為第4頁。數據模型咨詢考慮到業(yè)務系統(tǒng)隨著管控要求、管控范圍、業(yè)務流程的變化而變化，因此不同階段、不同企業(yè)的業(yè)務系統(tǒng)不盡相同，而業(yè)務系統(tǒng)背后的業(yè)務數據是相對固定，因此通過對業(yè)務數據進行分析、抽象形成業(yè)務的數據模型，然后通過數據模型對不同階段、不同企業(yè)的業(yè)務數據進行匯聚處理、治理管控、集中存儲、應用分析、發(fā)布服務等，將業(yè)務數據從各個業(yè)務系統(tǒng)分離出來進行以一種科學的方式單獨管理，達到激活集團數據資產價值，實現(xiàn)數據資源的共建共享、資源復用、互聯(lián)互通、綜合應用、決策分析的效果。發(fā)揮企業(yè)數據資產的業(yè)務價值、商業(yè)價值和服務價值，最重要是對業(yè)務的數據模型規(guī)劃的適用性、科學性。業(yè)務的數據模型的規(guī)劃主要包括：1）數據模型整體規(guī)劃，數據模型管理范圍、數據模型關系描述、數據模型管理機構、數據模型管理策略、具體業(yè)務數據溯主系統(tǒng)定義、具體業(yè)務數據責任部門定義、具體業(yè)務數據接口描述。2）具體業(yè)務數據模型定義包括數據模型描述、數據模型指標解釋、數據模型內部計算公式定義、數據模型內部審核公式定義、數據模型外部審核公式定義、數據模型與主數據關系定義、數據模型應用范圍、業(yè)務數據管理規(guī)范、業(yè)務數據集成規(guī)范。企業(yè)數據中心建設方案全文共15頁，當前為第5頁。軟件產品方案企業(yè)數據中心建設方案全文共15頁，當前為第5頁。主數據管理系統(tǒng)簡介在主數據規(guī)劃的基礎上，通過建設主數據系統(tǒng)，實現(xiàn)對主數據加載、映射、分發(fā)、申請、審批、發(fā)布等管理，并實現(xiàn)系統(tǒng)間的基礎數據同步，為系統(tǒng)集成應用、決策支持分析奠定基礎。主數據系統(tǒng)包括基礎數據、主數據建模、主數據裝載、主數據分發(fā)、主數據維護、主數據日志五個功能。系統(tǒng)框架主要功能基礎數據主要包括主數據分類管理、遠程系統(tǒng)注冊、分發(fā)范圍設置，以及針對主數據的數據檔案。提供根據主數據管理項目設置主數據分類，包括分類編碼、分類名稱，主數據分類是主數據分發(fā)范圍設置的基礎。提供根據主數據系統(tǒng)的加載、分發(fā)范圍進行遠程系統(tǒng)注冊功能，主要包括遠程系統(tǒng)編碼、遠程系統(tǒng)名稱、遠程系統(tǒng)服務描述、遠程系統(tǒng)URL及端口等。企業(yè)數據中心建設方案全文共15頁，當前為第6頁。提供自定義數據檔案功能，方便主數據建模使用，數據檔案形式支持單表、樹型等。企業(yè)數據中心建設方案全文共15頁，當前為第6頁。提供從業(yè)務、物理、展示等角度進行主數據建模功能，支持為主數據制定編碼規(guī)則，支持對主數據進行版本控制。主數據建模支持字符、數值、布爾、日期、日期時間、對象、圖片、文件、大文本、下拉等多種實體屬性類型。提供主數據的新增加載和更新加載兩種加載方式，新增加載提供批量加載和單個裝載兩種功能。更新裝載只能更系統(tǒng)裝載字段，不更新維護字段。主數據加載成功后，自動生產來源系統(tǒng)內部ID與主數據系統(tǒng)內部ID映射關系。提供針對加載成功的主數據進行維護功能，完善主數據檔案內容，加載維護功能僅允許對非加載字段進行維護，加載字段必須由來源系統(tǒng)中修改后，進行更新加載。提供手工新增、刪除、修改主數據檔案功能，以及對加載主數據的維護功能，支持對主數據檔案進行審批等功能。提供針對主數據系統(tǒng)上線初始階段手工維護映射功能，手工維護映射支持批量導入映射，以及根據名稱、編碼等自動匹配映射功能等提供在主數據系統(tǒng)中進行的新增分發(fā)，系統(tǒng)自動進行主數據系統(tǒng)內部ID與分發(fā)目標系統(tǒng)內部ID映射。主數據分布提供新增分發(fā)和更新分發(fā)兩種模式，新增分發(fā)提供批量分發(fā)和單個發(fā)分兩種功能。新增發(fā)分對于有層級關系的主數據嚴格控制逐級分發(fā)，更新發(fā)布支持除主除外的所有信息的更新。主數據系統(tǒng)提供日志管理功能，可以通過日志查詢主數據的加載、分發(fā)、修改等相關的操作人員、操作時間、操作結果等。元數據管理系統(tǒng)簡介元數據（Metadata），又稱中介數據、中繼數據，為描述數據的數據（dataaboutdata），主要是描述數據屬性（property）的信息，用來支持如指示存儲位置、歷史數據、資源查找、文件記錄等功能。元數據算是一種電子式目錄，為了達到編制目錄的目的，必須在描述并收藏數據的內容或特色，進而達成協(xié)助數據檢索的目的。從應用開發(fā)、業(yè)務系統(tǒng)、應用集成到商業(yè)分析的全程元數據服務支持，以領域模型語言聯(lián)通各個系統(tǒng)。企業(yè)數據中心建設方案全文共15頁，當前為第7頁。系統(tǒng)框架企業(yè)數據中心建設方案全文共15頁，當前為第7頁。主要功能支持業(yè)務元數據管理，主要包括進行業(yè)務描述、業(yè)務規(guī)則、業(yè)務術語、業(yè)務指標口徑等描述；支持技術元數據管理，主要包括接口規(guī)范、執(zhí)行順序、依賴關系、ETL轉換、數據建模和工具等描述；支持從表名、用途描述、數據來源、庫表類型、版本、字段、語義、字段類型等進行元數據定義；支持根據元數據定義生成物理表、生成VO，以及導入導出元數據等數據倉庫系統(tǒng)簡介數據倉庫是將組織的業(yè)務系統(tǒng)之聯(lián)機事務處理的日積月累的大量數據，通過數據倉庫理論所特有的數據儲存架構，進行系統(tǒng)的分析整理，以利聯(lián)機分析處理、數據挖掘等各種分析企業(yè)數據中心建設方案全文共15頁，當前為第8頁。方法應用，從而創(chuàng)建決策支持系統(tǒng)、綜合展示系統(tǒng)，幫助決策者快速有效的自大量數據中，分析出有價值的信息，以利決策擬定及快速回應外在環(huán)境變動，幫助建構商業(yè)智能。企業(yè)數據中心建設方案全文共15頁，當前為第8頁。系統(tǒng)框架主要功能事務事實表（TransactionFactTable）記錄的事務層面的事實，保存的是最原子的數據，也稱“原子事實表”.事務事實表中的數據在事務事件發(fā)生后產生，數據的粒度通常是每個事務一條記錄。一旦事務被提交，事實表數據被插入，數據就不再進度更改，其更新方式為增量更新。周期快照事實表（PeriodicSnapshotFactTable）以具有規(guī)律性的、可預見的時間間融來記錄事務，時間間隔如每天、每月、每年等等。典型的例子如銷售日快照表、庫存日快照表等。累積快照事實表（Accumulationgsnapshotfacttable）代表的完全覆蓋一個事務或產品的生命周期的時間跨度，它通常具有多個日期字段，用來記錄整個生命周期中的關鍵時間點。原子事實表（AtomFactTable）是保存最細粒度數據的事實表，也是數據倉庫中保存原子信息的場所。企業(yè)數據中心建設方案全文共15頁，當前為第9頁。聚信事實表（AggregatedFactTable）是原子事實表上的匯總數據，也稱為匯總事實表。企業(yè)數據中心建設方案全文共15頁，當前為第9頁。合并事實表（ConsolidatedFactTable）是指將位于不同事實表中處于相同粒度的事實進行組合建模而成的一種事實表。旋轉事實表（pivotedfacttable）是將一條記錄中的多個事實字段轉化為多條記錄，其中每條記錄保存一個事實字段的一種建模方法。預連接聚集表（pre-joinedaggregagtetable）是通過事實表和維度表的聯(lián)合查詢而生成的一類匯總表。在預連接聚集表中，保存有維度表中的描述信息和事實表的事實值。在非事實型事實表（factlessfacttable）,通常會保存十個左右的維度外鍵和多個度量事實，度量事實時事實表的關鍵所在。在非事實型事實表中沒有這些度量事實，只有多個維度外鍵。切片事實表（slicedfacttable）中的字段結構和相應的基礎表完全相同，差別在于存儲的記錄的范圍。切片事實表中保存記錄的相應基礎表中記錄的子集，記錄數通常與某個維度記錄數相同。蜈蚣事實表（Centipedefacttable）是指那些一張事實表中有太多維度的事實表。連接在事實表兩邊的維度過多，看起來就像蜈蚣一樣，所有稱為“蜈蚣事實表”企業(yè)服務總線系統(tǒng)簡介在服務集成規(guī)劃的基礎上，通過部署架構開放、產品穩(wěn)定、擴展性強的企業(yè)服務總線系統(tǒng)，采用基于服務的數據交換方式，實現(xiàn)由企業(yè)服務總線系統(tǒng)統(tǒng)一管理各系統(tǒng)之間的數據交換服務，降低應用系統(tǒng)、各種組件及相關技術的耦合度，消除應用系統(tǒng)點對點集成瓶頸，提高復用，增進系統(tǒng)開發(fā)和運行較率，快速適應未來業(yè)務及流程變化的需要。企業(yè)數據中心建設方案全文共15頁，當前為第10頁。系統(tǒng)框架企業(yè)數據中心建設方案全文共15頁，當前為第10頁。主要功能提供進行全生命周期管理的集成開發(fā)環(huán)境，實現(xiàn)對各個系統(tǒng)提供的各種數據交換服務進行統(tǒng)一命名標準、統(tǒng)一地址發(fā)布、統(tǒng)一數據標準，以及對數據交換服務的合并、拆分和協(xié)議轉換等開發(fā)。提供可視化服務、實體、組件等建模環(huán)境,提供大量可復用服務，提供測試案例及測試客戶端生成功能。提供單機及分布式部署管理工具，提供可跟蹤和調試流程、組件交互監(jiān)控等快捷診斷工具。提供高度模塊化及可擴展的微內核架構，提供模塊化部署環(huán)境，支持有狀態(tài)組件熱部署和分布式聯(lián)動部署，實現(xiàn)高度可擴展。提供高度可重用的服務組件架構，提供支持SCA服務組件編程模型，提供復雜組件組裝及組件交互方式，提供松耦合、高度可重用的編程框架。提供構建面向服務的集成，提供服務倉庫，支持多格式服務注冊、服務發(fā)布、服務綁定、服務查找、服務策略/SLA管理等，全面構建面向服務的集成。提供靈活的數據轉換功能，提供內置基本的數據轉換器，支持用戶擴展數據類型轉換器。提供豐富的傳輸協(xié)議支持，包括不僅限于WebService、TCP、MAIL\SMTP、HTTP、FILE、DBMonitor等協(xié)議，用戶可以在產品中直接添加協(xié)議的綁定。企業(yè)數據中心建設方案全文共15頁，當前為第11頁。提供集群和負載均衡功能，提供業(yè)務組件可按需進行分布式部署，支持服務器節(jié)點及用戶請求兩個層面的Failover機制，內置基于消息中間件的可靠傳輸，提供大并發(fā)處理能力、高可靠性及高可用性。企業(yè)數據中心建設方案全文共15頁，當前為第11頁。提供可靈活編排的消息流及工作流，內置基于流程虛擬機的消息流和工作流引擎，提供了常見流程模式的支持,提供流程持久化、人工任務、異步、事件、控制模式、定時機制、狀態(tài)管理等基礎功能。提供運行態(tài)集成管理和監(jiān)控中心，主要包括：服務管理、實體管理、組件管理、實例監(jiān)控、服務器節(jié)點監(jiān)控和參數配置、消息監(jiān)控、流程監(jiān)控等。自動采集系統(tǒng)系統(tǒng)簡介由于企業(yè)的運營監(jiān)管、決策支持和數據分析需要數據支持，而企業(yè)的部分業(yè)務和部分單位已經應用的應用系統(tǒng)，為了減少業(yè)務人員的工作量和提高數據質量，通過在企業(yè)應用系統(tǒng)前端部署前置機和前置機系統(tǒng)，采用由應用軟件供應商主動寫入數據和項目建設方采用專業(yè)數據采集工具抽取數據相結合的方式，從企業(yè)應用系統(tǒng)取數到前置機系統(tǒng)，然后通過部署的企業(yè)服務總線系統(tǒng)統(tǒng)一管理數據中心與企業(yè)應用系統(tǒng)的數據交換服務，實現(xiàn)前置機系統(tǒng)與數據中心系統(tǒng)的數據交換。企業(yè)數據中心建設方案全文共15頁，當前為第12頁。系統(tǒng)框架企業(yè)數據中心建設方案全文共15頁，當前為第12頁。主要功能采集數據配置：根據用戶環(huán)境配置數據源，根據采集要求配置定時任務、設置采集過慮參數等?；A數據管理：地區(qū)檔案、行業(yè)類型、組織檔案、客戶檔案、銀行檔案、人員檔案等。采集數據表管理：支持進行數據表定義，根據數據表定義生成物理表、生成VO，數據表定義含表名、表描述、庫表類型、建表日期、建表用戶，以及字段名、語義、字段類型、是否主鍵、長度、精度等。定義數據交換服務：根據與國資監(jiān)管平臺數據交換要求開發(fā)Webservice服務，使用XML標準來描述、發(fā)布、發(fā)現(xiàn)、協(xié)調和配置。在線采集系統(tǒng)系統(tǒng)簡介由于集團的運營監(jiān)管、決策支持和數據分析需要數據支持，而集團及體系部分業(yè)務沒有應用系統(tǒng)支持，為了保證數據的完整性和全面性，集團提供業(yè)務的數據模型設計要求搭建在線填報平臺，在線填報平臺提供組織體系定義、表樣定義、任務定義、權限分配、匯總規(guī)則定義企業(yè)數據中心建設方案全文共15頁，當前為第13頁。等功能。集團及體系業(yè)務人員通過互聯(lián)網登錄進行快報填報、審核、匯總、導入、導出和打印等工作，實現(xiàn)全級次、全范圍的數據采集。企業(yè)數據中心建設方案全文共15頁，當前為第13頁。系統(tǒng)框架主要功能不同年度、不同表樣、不同組織體系業(yè)務數據模型在同一平臺內統(tǒng)一采集管理，并實現(xiàn)數據之間的共享。提供數據采集業(yè)務類型設置功能，同時設置多個采集任務，獨立對資源、數據、權限進行管理，以達到分開管理使用的目的?；跀祿杉瘶I(yè)務類型設置關鍵字，如：采集單位（如：單位、部門等）、采集期間（如：會計年、會計月等）、采集計量單位（如：元、萬元、億元）等。基于數據采集業(yè)務類型定義采集樣式，如：封面定義、通用樣式定義、行業(yè)樣式定義等。提供類似EXCEL方式進行采集樣式定義的功能，所見即所得，即樣式定義界面與數據采集界面基本相同，保證系統(tǒng)易用性。在采集樣式定義界面定義計算公式，計算公式提供EXCEL基本公式，以及數據采集需要的特殊公式，如：跨表取數公式、數據庫取數公式等。在采集樣式定義界面定義審核公式，提供合理性審核公式定義和邏輯性審核公式定義。企業(yè)數據中心建設方案全文共15頁，當前為第14頁?；跀祿杉瘶I(yè)務類型定義數據采集任務，內容包括具體采集樣式、采集開始時間、采集結束時間等。企業(yè)數據中心建設方案全文共15頁，當前為第14頁。根據數據采集范圍及層級的要求，靈活自由的分配數據采集任務，以滿足不斷調整的國資監(jiān)管應用需要。提供基于用戶角色的報表權限分配功能，特定用戶只能看到特定報表的數據。采集報送系統(tǒng)使用在線填報模式，提供直接復制粘貼EXCEL數據進報表、EXECL單表導入、EXCEL套表導入等多種填報功能。提供附報文檔的上傳、下載、刪除、查看等功能，對已經上報后的報表，附報文檔不允許再進行上傳、刪除等操作。基于計算公式對填報數據進行計算，提供單表計算、多表計算和批量計