用友主數(shù)據(jù)規(guī)劃與方法論

精選優(yōu)質文檔-----傾情為你奉上精選優(yōu)質文檔-----傾情為你奉上專心---專注---專業(yè)專心---專注---專業(yè)精選優(yōu)質文檔-----傾情為你奉上專心---專注---專業(yè)用友主數(shù)據(jù)規(guī)劃與方法論用友軟件中央大客戶2013年9月目錄

用友主數(shù)據(jù)規(guī)劃與方法論主數(shù)據(jù)建設首先是標準化的規(guī)劃，規(guī)劃就需要有方法論支撐。用友公司主數(shù)據(jù)方法論一般按照下圖步驟：1．方案制定：需求調研與分析主數(shù)據(jù)范圍與標準制定主數(shù)據(jù)服務規(guī)范制定主數(shù)據(jù)集成方案制定2．平臺建設搭建主數(shù)據(jù)平臺數(shù)據(jù)清洗初始化主數(shù)據(jù)服務發(fā)布3．集成改造系統(tǒng)改造方案系統(tǒng)對接系統(tǒng)調試4．系統(tǒng)擴展主數(shù)據(jù)范圍擴大新系統(tǒng)加入主數(shù)據(jù)信息資源規(guī)劃強調將需求分析與系統(tǒng)建模緊密結合，需求分析是系統(tǒng)建模的基礎，而業(yè)務調研又是需求分析的前提。在進行規(guī)劃的時候，首先要根據(jù)業(yè)務工作內容（而不是按照現(xiàn)行的機構部門）劃分出一些“職能域”；然后由業(yè)務人員和分析人員組成的一些小組，分別對各個職能域進行業(yè)務個數(shù)據(jù)的調研分析，進而建立主數(shù)據(jù)信息標準和管理流程，作為整個系統(tǒng)建設的基礎。在做業(yè)務分析時，要注意識別主要的業(yè)務過程和核心數(shù)據(jù)，研究新的管理模式，即與管理創(chuàng)新相結合。在做數(shù)據(jù)分析時，要調研分析職能域之間、職能域內部間的數(shù)據(jù)流向，只有這樣細致的調研分析，才能進行科學的綜合，獲取相應的模型。模型驅動的主數(shù)據(jù)規(guī)劃方法，可以概括為：兩條主線、三種模型、一套標準、三個階段。兩條主線：以業(yè)務和數(shù)據(jù)為主線，分別進行業(yè)務梳理、優(yōu)化、數(shù)據(jù)分析、建模工作。業(yè)務主線強調的是職能域和業(yè)務域的劃分，并以此對數(shù)據(jù)主線的分析工作進行分類。三種模型：在系統(tǒng)建模階段完成功能模型、信息模型和關聯(lián)模型的建模，模型是用戶需求的綜合反映和規(guī)范化表達。一套標準：即主數(shù)據(jù)信息資源標準，包括主數(shù)據(jù)的元數(shù)據(jù)定義標準、分類標準、編碼規(guī)范、管理流程、共享服務標準等。三個階段：即基于業(yè)務主線的應用調研和業(yè)務分析階段、基于數(shù)據(jù)主線的標準制定階段、基于三種模型基礎上的系統(tǒng)實施規(guī)劃階段。主數(shù)據(jù)標準化確定工作目標：信息資源分類編碼作為一類重要的數(shù)據(jù)資源，在信息化建設中具有重要的地位和作用，是保證現(xiàn)有信息系統(tǒng)和未來新系統(tǒng)建設成功的關鍵因素，決定著系統(tǒng)中的信息一致性。分類編碼原則：分類采用信息用途與業(yè)務主題相結合的分類方法，使分類體系具有業(yè)務主題的直接性和信息用途的系統(tǒng)性。主數(shù)據(jù)類別的選取標準為，需要多個系統(tǒng)使用的，并對于系統(tǒng)展現(xiàn)效果或BI經(jīng)營分析的準確度產生影響的數(shù)據(jù)列表。主數(shù)據(jù)屬性的選擇標準為，根據(jù)類別實體的使用特征，選擇能夠確定唯一一個數(shù)據(jù)實體的屬性作為唯一性屬性；選擇唯一性屬性之外的，對實體特征進行擴展性描述的屬性作為共享分類屬性。系統(tǒng)通過唯一性屬性定位數(shù)據(jù)記錄，并完成編碼的分配。本項目的信息分類將遵循下面的原則：實用性原則：從建筑業(yè)務特點出發(fā)，在保證分類系統(tǒng)的科學性、邏輯性的同時，將一些建筑施工業(yè)務涉及的公共信息跨越業(yè)務邏輯層次，作為公用基礎信息大類列出，以期達到重點突出、降低分類難度和分類設置相對平衡的目的。穩(wěn)定性原則：在進行信息分類過程中，充分考慮到未來信息變化可能影響到信息分類結構以及編碼結構的可變因素，建立的分類體系和編碼結構不受新增信息的分類編碼影響，以保證分類及編碼具有穩(wěn)定性?？蓴U展性原則：考慮到航天科技龐大的業(yè)務體系，各個單位在信息分類粗細等方面存在一定的差異，本項目中分類標準在信息分類類目擴展上預留充足的空間，以保證出現(xiàn)新增信息時，不打亂已經(jīng)建立的分類體系。分類編碼方法：在對航天科技主數(shù)據(jù)規(guī)劃過程中，要依據(jù)上述原則建立企業(yè)的信息分類編碼標準。可以按照A、B、C三類編碼對象來建立企業(yè)信息分類編碼標準。A類編碼對象：這類編碼對象具有一定的分類方法和編碼規(guī)則，其碼表內容一般隨信息的增加而逐步擴充，很難一次編完。這類編碼對象一般在具體的應用系統(tǒng)中有較多的使用，如省份證號碼、客戶編碼、員工編碼、物資編碼等。B類編碼對象：這類編碼碼表內容具有相對的穩(wěn)定性，可以組織力量一次編完。這類碼表數(shù)量一般都較大，往往被多個應用系統(tǒng)共享，作為單獨的庫表管理是方便的，如國家行政區(qū)劃、職稱編碼、生產統(tǒng)計項目編碼等。C類編碼對象：在應用系統(tǒng)中有一些碼表短而使用頻率很大的編碼對象，如人性別代碼、文化程度代碼、婚姻狀況代碼等，把這類對象統(tǒng)一設在一個編碼庫管理就可以了。工作內容：本項目中將重點規(guī)劃A類編碼對象，因其貫穿于航天科技主要業(yè)務價值鏈中，隨著業(yè)務變化而擴展，同時具有很強的流程特性，未來的主要數(shù)據(jù)分析將依據(jù)此類對象。示例及模板：采用層次分類法，來描述具體的編碼結構，如下圖所示：主數(shù)據(jù)流程梳理工作目標：結合現(xiàn)有的組織架構和業(yè)務職能分工，分析現(xiàn)有主數(shù)據(jù)管理流程的不足之處，提出優(yōu)化改進方案。流程優(yōu)化原則：在本項目中，將遵循以下的流程優(yōu)化原則：要從主數(shù)據(jù)管理的目標而非工作的過程出發(fā)，定義崗位職責；讓使用流程輸出結果的人來執(zhí)行流程；將地理上分散的資源視為集中的資源來處理；對并行活動進行連接，而不是僅僅集成其結果；將決策點下放到基層單位活動中，并對執(zhí)行過程進行控制；盡量在信息產生的源頭，一次性獲取信息，并保持信息的一致性。管理流程梳理優(yōu)化方法與步驟：的主數(shù)據(jù)管理流程優(yōu)化的最終目的應該是為了提升客戶在價值鏈上的價值分配，是為了以一種新的方式為客戶提供價值增加，并提升這種價值增加的程度，反映到具體的流程設計上，就是利用ESIA的原則來盡可能減少流程中非增值活動以及調整流程的核心增值活動，解決流程問題。ESIA的具體含義如下：E-Eliminate，清除，即清除流程中非增值部分；S-Simplify，簡化，即簡化流程，使流程得到改進；I-Integrate，整合，即對企業(yè)流程進行整合，提升效率；A-Automate，自動化，即通過自動化手段執(zhí)行流程，提升效率。主數(shù)據(jù)服務規(guī)范工作目標：為了實現(xiàn)航天科技各級單位間的人員信息、組織信息、物資信息、項目信息等主要數(shù)據(jù)的共享使用，制定一套數(shù)據(jù)的交換標準。工作內容：結合上述的分類編碼規(guī)范以及流程規(guī)范，遵循業(yè)界標準的XML、WebService標準，定義各類主數(shù)據(jù)的數(shù)據(jù)傳輸格式、服務接口命名、接口參數(shù)、接口描述等。WebService的主要目標是跨平臺的可互操作性，完全基于XML（可擴展標記語言）、XSD（XMLSchema）等獨立于平臺、獨立于軟件供應商的標準，是創(chuàng)建可互操作的、分布式應用程序的新平臺。擴展標記語言XML是一種簡單的數(shù)據(jù)存儲語言，使用一系列簡單的標記描述數(shù)據(jù)，而這些標記可以用方便的方式建立，雖然XML占用的空間比二進制數(shù)據(jù)要占用更多的空間，但XML極其簡單易于掌握和使用。主數(shù)據(jù)服務，大多情況下，需具備下面幾點：主數(shù)據(jù)同步服務：用于接收主數(shù)據(jù)來源系統(tǒng)發(fā)來的創(chuàng)建主數(shù)據(jù)的請求。主數(shù)據(jù)查詢服務：用于根據(jù)主數(shù)據(jù)編碼查詢主數(shù)據(jù)信息。主數(shù)據(jù)推送服務：用于接收主數(shù)據(jù)來源系統(tǒng)發(fā)來的主數(shù)據(jù)推送信息，將其放到每個接收系統(tǒng)對應的消息隊列中，等待各接收系統(tǒng)來取。主數(shù)據(jù)通知服務：主數(shù)據(jù)接收通知方法，企業(yè)服務總線調用該方法來通知接收系統(tǒng)。示例及模板：可以參考下面的圖表來描述服務標準。服務列表：序號服務名稱服務描述1MdSyncService主數(shù)據(jù)同步服務2MdSearchService主數(shù)據(jù)查詢服務3MdPushService主數(shù)據(jù)推送服務4MdNotifyService主數(shù)據(jù)通知服務主數(shù)據(jù)同步服務方法列表序號方法名稱功能描述發(fā)布系統(tǒng)1AddMdmInfo增加主數(shù)據(jù)信息主數(shù)據(jù)系統(tǒng)2ModMdmInfo修改主數(shù)據(jù)信息主數(shù)據(jù)系統(tǒng)3SealMdmInfo封存主數(shù)據(jù)信息主數(shù)據(jù)系統(tǒng)主數(shù)據(jù)查詢服務方法列表序號方法名稱功能描述發(fā)布系統(tǒng)1SearchMdInfoByMasterCode根據(jù)主數(shù)據(jù)編碼查詢主數(shù)據(jù)信息主數(shù)據(jù)系統(tǒng)2SearchMdInfoBySourceCode根據(jù)來源系統(tǒng)編碼查詢主數(shù)據(jù)信息主數(shù)據(jù)系統(tǒng)3SearchMdInfoCountByCondition根據(jù)查詢條件查詢主數(shù)據(jù)數(shù)量主數(shù)據(jù)系統(tǒng)4SearchMdInfoByCondition根據(jù)查詢條件查詢主數(shù)據(jù)信息主數(shù)據(jù)系統(tǒng)主數(shù)據(jù)推送服務方法列表序號方法名稱功能描述發(fā)布系統(tǒng)1RecvPushMdInfo接收主數(shù)據(jù)推送信息主數(shù)據(jù)2GetPushMdInfo獲取主數(shù)據(jù)推送信息主數(shù)據(jù)主數(shù)據(jù)通知服務方法列表序號方法名稱功能描述發(fā)布系統(tǒng)1NotifyMdInfo主數(shù)據(jù)接收通知需實時推送主數(shù)據(jù)的接受系統(tǒng)增加主數(shù)據(jù)方法服務名稱：MdSyncService方法名稱：增加主數(shù)據(jù)信息（AddMdmInfo）方法描述：增加主數(shù)據(jù)信息。該方法用于接收主數(shù)據(jù)來源系統(tǒng)發(fā)來的創(chuàng)建主數(shù)據(jù)的請求。如：項目系統(tǒng)在增加新項目時，需要調用該服務來創(chuàng)建項目主數(shù)據(jù)信息。該方法會處理多種類型的主數(shù)據(jù)，所有非主數(shù)據(jù)系統(tǒng)直接維護的主數(shù)據(jù)，都需要調用該方法來創(chuàng)建主數(shù)據(jù)。發(fā)布方：主數(shù)據(jù)系統(tǒng)調用方：主數(shù)據(jù)來源系統(tǒng)輸入：序號數(shù)據(jù)項名稱數(shù)據(jù)項類型備注1sysid系統(tǒng)標識字符參見“系統(tǒng)標識”2mdtype主數(shù)據(jù)類型字符參見“主數(shù)據(jù)類型標識”3data新增主數(shù)據(jù)復雜類型注：新增主數(shù)據(jù)的格式描述詳見“主數(shù)據(jù)標準格式”部分。輸出：序號數(shù)據(jù)項名稱數(shù)據(jù)項類型備注1success成功標志位數(shù)字1：成功；0：失敗2errcode錯誤代碼字符成功時為空3message錯誤信息字符成功時為空4mastercode主數(shù)據(jù)編碼字符企業(yè)服務總線服務規(guī)范錯誤代碼表錯誤代碼說明-1001主數(shù)據(jù)重復-1002主數(shù)據(jù)不存在-1003非法屬性值-1000未知錯誤交易合同主數(shù)據(jù)報文樣例<?xmlversion='1.0'encoding='GBK'?><root><datatype=”MD_CONTRACT”>--主數(shù)據(jù)類型<ContractCode>C</ContractCodeLaw><ProjectCode></ProjectCode><ContractName>測試合同</ContractName><CustomerCode>EP</CustomerCode><ContractMoney>30000</ContractMoney><SignDate>2012-03-15</SignDate><StartDate>2012-03-18</StartDate><EndDate>2013-03-18</EndDate><ContractCodeLaw>LAW</ContractCodeLaw></data></root>主數(shù)據(jù)數(shù)據(jù)清洗規(guī)范工作目標：制定一套針對航天科技相關系統(tǒng)的基礎數(shù)據(jù)的匯總整理排重糾錯的方案，保證主數(shù)據(jù)平臺的初始化數(shù)據(jù)的準確性和權威性。工作方法：數(shù)據(jù)清理是將數(shù)據(jù)庫精簡以除去重復記錄，并使剩余部分轉換成標準可接收格式的過程，從數(shù)據(jù)的準確性、完整性、一致性、惟一性、適時性、有效性幾個方面來處理數(shù)據(jù)的丟失值、越界值、不一致代碼、重復數(shù)據(jù)等問題。數(shù)據(jù)清理一般針對具體應用，因而難以歸納統(tǒng)一的方法和步驟，但是根據(jù)數(shù)據(jù)不同可以給出相應的數(shù)據(jù)清理方法。1：解決不完整數(shù)據(jù)（即值缺失）的方法大多數(shù)情況下，缺失的值必須手工填入（即手工清理）。當然，某些缺失值可以從本數(shù)據(jù)源或其它數(shù)據(jù)源推導出來，這就可以用平均值、最大值、最小值或更為復雜的概率估計代替缺失的值，從而達到清理的目的。2：錯誤值的檢測及解決方法用的方法識別可能的錯誤值或異常值，如、識別不遵守分布或回歸方程的值，也可以用簡單規(guī)則庫（常識性規(guī)則、業(yè)務特定規(guī)則等）檢查數(shù)據(jù)值，或使用不同屬性間的約束、外部的數(shù)據(jù)來檢測和清理數(shù)據(jù)。3：重復記錄的檢測及消除方法數(shù)據(jù)庫中屬性值相同的記錄被認為是重復記錄，通過判斷記錄間的屬性值是否相等來檢測記錄是否相等，相等的記錄合并為一條記錄（即合并/清除)。合并/清除是消重的基本方法。4：不一致性（數(shù)據(jù)源內部及數(shù)據(jù)源之間）的檢測及解決方法從多數(shù)據(jù)源集成的數(shù)據(jù)可能有語義沖突，可定義完整性約束用于檢測不一致性，也可通過分析數(shù)據(jù)發(fā)現(xiàn)聯(lián)系，從而使得數(shù)據(jù)保持一致。常用的數(shù)據(jù)清理規(guī)則如下：數(shù)據(jù)查重規(guī)則：選定查重字段、選定字段匹配度定義、字段權重；定義閥值（重復閥值、疑似閥值）。數(shù)據(jù)校驗規(guī)則定義：選定校驗字段、校驗準則（非空、正確性）。本項目的歷史數(shù)據(jù)清洗規(guī)則主要確定數(shù)據(jù)清洗對應的查重規(guī)則、校驗規(guī)則以及方案執(zhí)行時間、清洗數(shù)據(jù)的范圍、制定結果的處理人等信息。如下圖：數(shù)據(jù)清理規(guī)則數(shù)據(jù)清理規(guī)則數(shù)據(jù)查重數(shù)據(jù)校驗選定查重字段、選定字段匹配度定義、字段權重；定義閥值（重復閥值、疑似閥值）選定校驗字段、校驗準則（非空、正確性）示例及模板：數(shù)據(jù)清洗工作流程圖： 圖清流流程示例數(shù)據(jù)清洗步驟描述：組織XX公司討論數(shù)據(jù)清理方案；XX公司根據(jù)討論的結果結合主數(shù)據(jù)系統(tǒng)填報規(guī)范進行數(shù)據(jù)清理；XX公司提交清理的結果；主數(shù)據(jù)項目組根據(jù)XX公司提交的數(shù)據(jù)進行匹配。匹配原則如下：1、生產商、經(jīng)銷商數(shù)據(jù)按照名稱與主數(shù)據(jù)系統(tǒng)數(shù)據(jù)進行匹配，能匹配上導出主數(shù)據(jù)數(shù)據(jù)，格式按照XX公司的格式，匹配不上的在原表中標注；2、儀器設備按照通用名與廠家進行匹配，能匹配上導出主數(shù)據(jù)數(shù)據(jù)，格式按照XX公司的格式，匹配不上的在原表中標注；3、工程機械類數(shù)據(jù)暫不處理；4、其他類數(shù)據(jù)按照唯一性進行匹配，能匹配上導出主數(shù)據(jù)數(shù)據(jù)，格式按照XX公司的格式，匹配不上的在原表中標注；5、匹配后的結果反饋XX公司進行核對；6、數(shù)據(jù)排重導入。數(shù)據(jù)清洗工具及效果描述：對于數(shù)據(jù)校驗規(guī)則的服務形式調用結果，提交一組數(shù)據(jù)后，將不符合數(shù)據(jù)校驗規(guī)則的數(shù)據(jù)單獨列出，可供前臺系統(tǒng)進行提示及后續(xù)處理。對于數(shù)據(jù)查重規(guī)則的服務形式調用結果，提交單條或多條記錄后，將提交的記錄與背景數(shù)據(jù)基于查重規(guī)則進行模糊比對，返回疑似記錄，供前臺系統(tǒng)進行提示及后續(xù)處理.以任務形式提供的對于數(shù)據(jù)排重的檢驗結果。對于指定的數(shù)據(jù)集進行篩選，將其中疑似相近的記錄以任務的形式進行提交。供前臺系統(tǒng)進行提示以及后續(xù)處理。主數(shù)據(jù)應用考核辦法為了進一步保障主數(shù)據(jù)管理平臺成功實施和有效運行，必須做到組織、職能、責任、人員的四落實。制定涉及到主數(shù)據(jù)管理的各個環(huán)節(jié)、組織、人員的一套績效考核辦法，明確各組織部門的職責與分工。主要從三個方面來進行績效考核：1：申報數(shù)據(jù)的及時性、準確性和完整性考核對象：申報單位和相關人員考核辦法：根據(jù)各類編碼申報所需要填寫的信息項以及錄入規(guī)則，按照規(guī)則進行申報操作，各主數(shù)據(jù)唯一性的分類屬性，必須錄入完整和準確。系統(tǒng)將會自動記錄因數(shù)據(jù)錄入不完整、不準確而導致修改的過程，可以定期列出申報人員操作質量報表。2：新增及變更的審批及時性考核對象：主數(shù)據(jù)審批人員考核辦法：主數(shù)據(jù)編碼按不同大類劃分，分別由相關主管部門負責審核，系統(tǒng)將會自動記錄每個主數(shù)據(jù)審核的全部過程，包括總體時間，每個環(huán)節(jié)的時間，處理人等信息。相關部門定期抽查這些審批過程，包括申報編碼的數(shù)量及時性以及數(shù)據(jù)準確性、完整性，定期從信息系統(tǒng)中取得審批時效分析表，可以對審批時效進行分析排名。3：下載使用及時性考核對象：各下屬相關部門考核辦法：要求各信息系統(tǒng)嵌入主數(shù)據(jù)編碼，為單位間協(xié)調業(yè)務應用以及BI分析做好基礎準備。要求各信息系統(tǒng)提供數(shù)據(jù)檢查的查詢服務，總部信息部門可以定期通過BI系統(tǒng)從信息系統(tǒng)數(shù)據(jù)中抽取項目、人員等基礎數(shù)據(jù)與主數(shù)據(jù)編碼的數(shù)據(jù)集，并形成下載使用及時性分析報表。示例及模板：可以參考下面的圖例來表達主數(shù)據(jù)管理的考核方法。申報數(shù)據(jù)的及時性列表：單位人員時間范圍申報主數(shù)據(jù)類型被駁回次數(shù)審批及時性列表：單位申請單據(jù)提交人審批人提交時間審批時間耗時下載及時性列表：單位信息系統(tǒng)編碼信息發(fā)布時間接收時間耗時是否匹配主數(shù)據(jù)系統(tǒng)接入規(guī)范工作目標：制定一套針對航天科技相關業(yè)務系統(tǒng)與主數(shù)據(jù)平臺的對接方案，以便在后續(xù)的系統(tǒng)建設、系統(tǒng)集成過程中有章可循。工作方法：首先確定系統(tǒng)間接口方式。主數(shù)據(jù)平臺采用主數(shù)據(jù)（企業(yè)服務總線）方式對外發(fā)布服務組件，因此與各業(yè)務系統(tǒng)的數(shù)據(jù)交互也遵循這一方式。航天科技企業(yè)服務總線針對當前服務列表的所有服務，提供Webservice調用方式。服務的指定實現(xiàn)廠商原則上也需要使用Webservice技術開發(fā)服務實現(xiàn)。在構建和使用WebService時,主要用到以下幾個關鍵的技術和規(guī)則：1.XML:描述數(shù)據(jù)的標準方法；2.SOAP:表示信息交換的協(xié)議；3.WSDL:Web服務描述語言；WebServicesDescriptionLanguage的縮寫，是一個用來描述Web服務和說明如何與Web服務通信的XML語言。4.UDDI(UniversalDescription,DiscoveryandIntegration):通用描述、發(fā)現(xiàn)與集成，它是一種獨立于平臺的，基于XML語言的用于在互聯(lián)網(wǎng)上描述商務的協(xié)議。確定接口方式后，再明確對接的系統(tǒng)交