數(shù)據(jù)倉庫整體過程

DataWarehouse&BusinessIntelligence數(shù)據(jù)倉庫實施方法論項目具體實施步驟BI(BusinessIntelligence)數(shù)據(jù)倉庫實施方法論?規(guī)劃解決方案支持?jǐn)?shù)據(jù)倉庫管理(處理流程與操作)物理數(shù)據(jù)庫設(shè)計數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)設(shè)計與實現(xiàn)支持與增強解決方案體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理數(shù)據(jù)倉庫評估應(yīng)用增強邏輯數(shù)據(jù)模型回顧物理數(shù)據(jù)庫回顧性能調(diào)整容量規(guī)劃解決方案集成定制解決方案規(guī)劃詳細(xì)數(shù)據(jù)分析解決方案準(zhǔn)備就緒解決方案實施建議現(xiàn)成解決方案規(guī)劃數(shù)據(jù)倉庫策略開發(fā)業(yè)務(wù)探索業(yè)務(wù)探索解決方案定義邏輯數(shù)據(jù)模型設(shè)計修改邏輯數(shù)據(jù)模型驗證解決方案數(shù)據(jù)倉庫的循環(huán)過程數(shù)據(jù)倉庫實施方法論項目具體實施步驟BI(BusinessIntelligence)項目具體實施步驟數(shù)據(jù)倉庫管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成項目具體實施步驟項目前期準(zhǔn)備業(yè)務(wù)探索信息探索邏輯數(shù)據(jù)模型01.項目前期準(zhǔn)備02.業(yè)務(wù)探索（BusinessDiscovery)03.信息探索（InformationDiscovery)04.邏輯數(shù)據(jù)模型設(shè)計05.系統(tǒng)體系結(jié)構(gòu)設(shè)計06.物理數(shù)據(jù)庫設(shè)計07.數(shù)據(jù)轉(zhuǎn)換加載ETL08.前端應(yīng)用開發(fā)09.數(shù)據(jù)挖掘服務(wù)10.元數(shù)據(jù)管理11.數(shù)據(jù)倉庫管理（處理流程與操作）12.解決方案集成（測試驗收與試運行）步驟01：項目前期準(zhǔn)備主要任務(wù)：–項目啟動會議(Kick-offMeeting)–確認(rèn)項目范圍和主要目標(biāo)–確認(rèn)項目階段性驗收及總體驗收標(biāo)準(zhǔn)–確認(rèn)項目實施計劃–成立項目組–確定各項目小組的成員及各自的工作職責(zé)–確定各項目小組的階段性工作目標(biāo)–確定教育訓(xùn)練計劃–確定服務(wù)流程及方式

交付項目：《項目組織機構(gòu)》《項目人員組成》

項目前期準(zhǔn)備業(yè)務(wù)探索信息探索邏輯數(shù)據(jù)模型步驟02：業(yè)務(wù)探索（BusinessDiscovery)主要任務(wù)：–確定重點用戶與數(shù)據(jù)源–用戶需求調(diào)研與確認(rèn)–數(shù)據(jù)源確認(rèn)–用戶需求和數(shù)據(jù)源的篩選和分析交付項目：《業(yè)務(wù)需求說明書BRL(BusinessRequirementList)》《概念數(shù)據(jù)模型CDM（ConceptualDataModel)》《數(shù)據(jù)接口規(guī)范》

項目前期準(zhǔn)備業(yè)務(wù)探索信息探索邏輯數(shù)據(jù)模型步驟03：信息探索（InformationDiscovery)主要任務(wù)：–分析用戶需求–數(shù)據(jù)源分析–進(jìn)行工具評估–系統(tǒng)安全性設(shè)計–系統(tǒng)命名規(guī)范設(shè)計交付項目：《功能需求列表FRL(FunctionRequirementList)》《系統(tǒng)安全性設(shè)計說明書》

《系統(tǒng)命名規(guī)范說明書》《數(shù)據(jù)質(zhì)量分析報告》項目前期準(zhǔn)備業(yè)務(wù)探索信息探索邏輯數(shù)據(jù)模型步驟04：邏輯數(shù)據(jù)模型設(shè)計主要任務(wù)：–進(jìn)行原始數(shù)據(jù)分析–建立實體模型–建立實體間依賴關(guān)系–完善并填入所有屬性–建立數(shù)據(jù)庫邏輯模型利用工具：Erwin交付項目：數(shù)據(jù)倉庫邏輯數(shù)據(jù)模型LDM《邏輯數(shù)據(jù)模型說明書》項目前期準(zhǔn)備業(yè)務(wù)探索信息探索邏輯數(shù)據(jù)模型步驟04：邏輯數(shù)據(jù)模型(LDM)示例步驟05：系統(tǒng)體系結(jié)構(gòu)設(shè)計主要任務(wù)：對業(yè)務(wù)、技術(shù)環(huán)境及企業(yè)文化的充分了解，從技術(shù)、組織、教育和支持等方面對系統(tǒng)進(jìn)行全面評估定義業(yè)務(wù)驅(qū)動力定義數(shù)據(jù)倉庫成功的關(guān)鍵因素定義數(shù)據(jù)倉庫的實施原則對系統(tǒng)體系結(jié)構(gòu)各個組件進(jìn)行詳細(xì)設(shè)計交付項目：《系統(tǒng)體系結(jié)構(gòu)設(shè)計說明書》數(shù)據(jù)倉庫管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成步驟05：體系結(jié)構(gòu)設(shè)計組件用戶類型拓?fù)浣Y(jié)構(gòu)網(wǎng)絡(luò)存取與互連組織機構(gòu)安全性數(shù)據(jù)體系結(jié)構(gòu)邏輯數(shù)據(jù)模型元數(shù)據(jù)數(shù)據(jù)質(zhì)量命名規(guī)范數(shù)據(jù)采集與轉(zhuǎn)換用戶存取及工具備份系統(tǒng)操作管理步驟06：物理數(shù)據(jù)庫設(shè)計主要任務(wù)：轉(zhuǎn)換邏輯數(shù)據(jù)模型（LDM）為物理數(shù)據(jù)模型定義索引、分區(qū)等非正規(guī)化處理（denormalizations）數(shù)據(jù)庫建立設(shè)計優(yōu)化數(shù)據(jù)庫功能測試使用工具：ERWwin交付項目：物理數(shù)據(jù)模型（PDM）《物理數(shù)據(jù)模型說明書》《數(shù)據(jù)庫描述語言DDL》數(shù)據(jù)倉庫管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成步驟06：物理數(shù)據(jù)模型（PDM）步驟07：數(shù)據(jù)轉(zhuǎn)換與加載（ETL）主要任務(wù)：數(shù)據(jù)源及其特性定義數(shù)據(jù)析取、轉(zhuǎn)換和加載策略設(shè)計構(gòu)建和測試初始加載的程序和處理流程構(gòu)建和測試日常加載的程序和處理流程40%-60%的工作量在數(shù)據(jù)轉(zhuǎn)換與加載上使用工具：DataIntegrator、C、Perl交付項目：《數(shù)據(jù)轉(zhuǎn)換加載設(shè)計說明書》《數(shù)據(jù)映射（DataMapping）說明書》

數(shù)據(jù)轉(zhuǎn)換加載腳本（ETLScripts)

加載流程控制（ETLProcessControl)數(shù)據(jù)倉庫管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成步驟07：數(shù)據(jù)清洗方法在源系統(tǒng)上進(jìn)行清洗（數(shù)據(jù)析取前）在加載服務(wù)器上進(jìn)行清洗（數(shù)據(jù)析取后、加載前）在數(shù)據(jù)倉庫里進(jìn)行清洗（數(shù)據(jù)加載后）源系統(tǒng)ETL服務(wù)器數(shù)據(jù)倉庫SQL,C,ShC,ShSQL步驟08：前端應(yīng)用開發(fā)主要任務(wù)：前端應(yīng)用體系結(jié)構(gòu)設(shè)計OLAP應(yīng)用設(shè)計(Summary/Fact表及Cub的產(chǎn)生）前端應(yīng)用開發(fā)（隨機查詢、預(yù)定義報表、OLAP應(yīng)用）撰寫用戶使用手冊用戶測試驗收使用工具：查詢報表工具OLAP工具（BusinessObjects,Cognos…)基于Web的開發(fā)工具(WebIntelligence,InterDev…)其他開發(fā)工具交付項目：《前端應(yīng)用體系結(jié)構(gòu)設(shè)計說明書》《應(yīng)用模塊設(shè)計說明書》《用戶使用手冊》數(shù)據(jù)倉庫管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成步驟09：數(shù)據(jù)挖掘服務(wù)2.知識應(yīng)用(KnowledgeDeployment):將發(fā)現(xiàn)的知識應(yīng)用于某種目標(biāo)，例如進(jìn)行預(yù)測1.知識發(fā)現(xiàn)(KnowledgeDiscovery):

發(fā)現(xiàn)將數(shù)據(jù)轉(zhuǎn)變成信息的潛在模式數(shù)據(jù)知識信息決策與行動步驟10：元數(shù)據(jù)開發(fā)元數(shù)據(jù)的開發(fā)應(yīng)該包含在數(shù)據(jù)倉庫實施過程的每一步驟中，下圖是元數(shù)據(jù)各部分內(nèi)容與數(shù)據(jù)倉庫開發(fā)過程的對應(yīng)關(guān)系：

步驟10：元數(shù)據(jù)管理元數(shù)據(jù)管理Metadata建模工具專家知識Metadata其他元數(shù)據(jù)源MetadataWord文檔,Excel,圖表,等等.MetadataDBMS目錄存儲過程,觸發(fā)器,文件和記錄MetadataBI工具M(jìn)etadataETL/數(shù)據(jù)集成工具?步驟11：數(shù)據(jù)倉庫管理主要任務(wù)：設(shè)計和開發(fā)數(shù)據(jù)倉庫支持體系結(jié)構(gòu)開發(fā)和測試數(shù)據(jù)倉庫日常運作流程開發(fā)和測試性能監(jiān)視程序開發(fā)和測試數(shù)據(jù)備份與恢復(fù)程序開發(fā)和測試安全系統(tǒng)設(shè)計和開發(fā)操作人員/最終用戶培訓(xùn)計劃建立用戶支持和培訓(xùn)材料使用工具：系統(tǒng)監(jiān)控工具和管理工具交付項目：《數(shù)據(jù)倉庫管理過程說明書》《數(shù)據(jù)備份過程設(shè)計說明書》《安全管理模塊設(shè)計說明書》《用戶培訓(xùn)計劃》及《用戶使用手冊》數(shù)據(jù)倉庫管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成步驟12：解決方案集成(系統(tǒng)驗收與試運行)主要任務(wù)：建立并執(zhí)行集成測試計劃建立并執(zhí)行數(shù)據(jù)倉庫平臺測試計劃建立并執(zhí)行系統(tǒng)驗收測試計劃移植開發(fā)系統(tǒng)到生產(chǎn)系統(tǒng)執(zhí)行用戶培訓(xùn)計劃實施數(shù)據(jù)倉庫管理基礎(chǔ)設(shè)施項目實施完成回顧項目狀態(tài)交付項目：《數(shù)據(jù)轉(zhuǎn)換管理系統(tǒng)測試報告》《數(shù)據(jù)訪問和信息發(fā)布系統(tǒng)測試報告》《數(shù)據(jù)倉庫平臺測試報告》《數(shù)據(jù)倉庫管理過程測試報告》《系統(tǒng)回顧報告》數(shù)據(jù)倉庫管理物理數(shù)據(jù)模型數(shù)據(jù)轉(zhuǎn)換應(yīng)用開發(fā)數(shù)據(jù)挖掘服務(wù)系統(tǒng)體系結(jié)構(gòu)設(shè)計元數(shù)據(jù)管理解決方案集成數(shù)據(jù)倉庫實施方法論項目具體實施步驟BI(BusinessIntelligence)BI的任務(wù)

業(yè)務(wù)應(yīng)用和數(shù)據(jù)結(jié)論體現(xiàn)業(yè)務(wù)價值讀取、分析企業(yè)信息，得出分析結(jié)論。為企業(yè)決策提供科學(xué)可靠的數(shù)據(jù)依據(jù)。改良的計劃和定位優(yōu)化性能增強的客戶聯(lián)系BusinessIntelligenceBI的三大支柱

BusinessIntelligenceApplicationsCorporatePerformanceManagementCRMAnalyticsRegulatoryCompliancePredictiveAnalyticsProfitabilityAnalysisInfrastructureorToolsETLorDataQualityDatabaseManagementMetadataReportingAdHocAnalysisDataMining

BestPracticesMethodologiesOrganisationManagementCultureSkills++BI：集中的技能

BusinessSkillsITSkillsAnalyticSkillsBI

Competency

CentreImplementchangesStore,maintainandintegratedataIdentifydataDiscoverandexploreSummariseandanalyseDevelopdecisionalternativesLinkt