第二章 數(shù)據(jù)倉(cāng)庫(kù)的概念與體系結(jié)構(gòu)課件

第2章數(shù)據(jù)倉(cāng)庫(kù)的概念與體系結(jié)構(gòu)歷史數(shù)據(jù)的幾種處理方式:1)簡(jiǎn)單刪除2）備份后刪除3）建立數(shù)據(jù)倉(cāng)庫(kù)12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘第2章數(shù)據(jù)倉(cāng)庫(kù)的概念與體系結(jié)構(gòu)歷史數(shù)據(jù)的幾種處理方式:2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的概念數(shù)據(jù)倉(cāng)庫(kù)就是一個(gè)面向主題的（SubjectOriented）、集成的（Integrate）、相對(duì)穩(wěn)定的（Non-Volatile）、反映歷史變化（TimeVariant）的數(shù)據(jù)集合，通常用于輔助決策支持（DDS）12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的概念12/8/22.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)：面向主題；集成的；相對(duì)穩(wěn)定的；反映歷史變化。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)：12/8/2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的組成：數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)庫(kù)（核心部分）（特點(diǎn)：支持海量數(shù)據(jù)和快速檢索）；數(shù)據(jù)抽取工具（提取、轉(zhuǎn)換、整理），數(shù)據(jù)轉(zhuǎn)換的內(nèi)容通常有：1)刪除沒(méi)意義的數(shù)據(jù)；2）轉(zhuǎn)換到統(tǒng)一的數(shù)據(jù)名稱(chēng)和定義；3）計(jì)算統(tǒng)計(jì)和衍生數(shù)據(jù)；4）填補(bǔ)缺失數(shù)據(jù)等；元數(shù)據(jù)：技術(shù)元數(shù)據(jù)與業(yè)務(wù)元數(shù)據(jù)；技術(shù)元數(shù)據(jù)：數(shù)據(jù)倉(cāng)庫(kù)的涉及和管理人員用于開(kāi)發(fā)和管理數(shù)據(jù)倉(cāng)庫(kù)時(shí)使用的元數(shù)據(jù)，包括：數(shù)據(jù)轉(zhuǎn)換的描述、數(shù)據(jù)清洗和數(shù)據(jù)更新時(shí)用的規(guī)則等等。

業(yè)務(wù)元數(shù)據(jù):從單位業(yè)務(wù)的角度描述數(shù)據(jù)倉(cāng)庫(kù)，如業(yè)務(wù)主題的描述，即業(yè)務(wù)主體包含的數(shù)據(jù)、查詢(xún)及報(bào)表等。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的組成：12/8/2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的組成：-訪問(wèn)工具：如分析、報(bào)表、數(shù)據(jù)挖掘工具數(shù)據(jù)集市（DataMarts）：為特定的應(yīng)用目的，從數(shù)據(jù)倉(cāng)庫(kù)中獨(dú)立出來(lái)的一部分?jǐn)?shù)據(jù)，也稱(chēng)部門(mén)數(shù)據(jù)或主題數(shù)據(jù)。數(shù)據(jù)倉(cāng)庫(kù)管理：包括安全與權(quán)限的管理、數(shù)據(jù)更新的跟蹤、元數(shù)據(jù)的管理與更新、數(shù)據(jù)的復(fù)制于刪除等等。信息發(fā)布系統(tǒng)：將數(shù)據(jù)發(fā)送給不同的地點(diǎn)或用戶(hù)。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的組成：12/8/2.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)挖掘的概念數(shù)據(jù)挖掘(DataMining)，就是從大量數(shù)據(jù)中獲取有效的、新穎的、潛在有用的、最終可理解的模式的非平凡過(guò)程，簡(jiǎn)單的說(shuō)，數(shù)據(jù)挖掘就是從大量數(shù)據(jù)中提取或“挖掘”知識(shí)，又被稱(chēng)為數(shù)據(jù)庫(kù)中的知識(shí)發(fā)現(xiàn)(KnowledgeDiscoveryinDatabase,KDD)12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)挖掘的概念12/8/20222.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)挖掘的方法：直接數(shù)據(jù)挖掘間接數(shù)據(jù)挖掘。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)挖掘的方法：12/8/2022.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘的關(guān)系若將數(shù)據(jù)倉(cāng)庫(kù)（DataWarehouse）比作礦井，那么數(shù)據(jù)挖掘（DataMining）就是深入礦井采礦的工作數(shù)據(jù)挖掘是從數(shù)據(jù)倉(cāng)庫(kù)中找出有用信息的一種過(guò)程與技術(shù)

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘的關(guān)系12/82.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品聯(lián)機(jī)事務(wù)處理（OLTP）與聯(lián)機(jī)分析處理（OLAP）的比較；見(jiàn)表1.1OLAP技術(shù)的有關(guān)概念：多維數(shù)據(jù)集、維度、度量值和多維分析（切片、切塊、鉆取、旋轉(zhuǎn)等）；OLAP根據(jù)其存儲(chǔ)數(shù)據(jù)的方式可分為三類(lèi)：ROLAP、MOLAP、HOLAP（混合，低層關(guān)系型，高層多維型）OLAP工具：對(duì)特定問(wèn)題的聯(lián)機(jī)數(shù)據(jù)訪問(wèn)與分析，一般是前端工具。

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品聯(lián)機(jī)事務(wù)處理（OLTP）與2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品數(shù)據(jù)倉(cāng)庫(kù)實(shí)施中的三個(gè)關(guān)鍵環(huán)節(jié)數(shù)據(jù)抽??；數(shù)據(jù)存儲(chǔ)與管理：大量數(shù)據(jù)管理，并行處理，支持查詢(xún)的優(yōu)化，支持多維分析的查詢(xún)模式數(shù)據(jù)表現(xiàn):工具主要集中在多維分析、數(shù)據(jù)挖掘、統(tǒng)計(jì)分析。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品數(shù)據(jù)倉(cāng)庫(kù)實(shí)施中的三個(gè)關(guān)鍵環(huán)2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品數(shù)據(jù)倉(cāng)庫(kù)實(shí)施方法論數(shù)據(jù)倉(cāng)庫(kù)不是簡(jiǎn)單的數(shù)據(jù)或產(chǎn)品堆砌，它是一個(gè)綜合集成解決方案和系統(tǒng)工程。在數(shù)據(jù)倉(cāng)庫(kù)的實(shí)施過(guò)程中，技術(shù)決策至關(guān)重要，技術(shù)選擇或決策錯(cuò)誤很可能導(dǎo)致項(xiàng)目實(shí)施失敗12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品數(shù)據(jù)倉(cāng)庫(kù)實(shí)施方法論12/82.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品常用數(shù)據(jù)倉(cāng)庫(kù)產(chǎn)品比較常用OLAP工具介紹；各數(shù)據(jù)倉(cāng)庫(kù)廠商提供的解決方案IBM、Oracle、NCR、Microsoft、SAS等12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品常用數(shù)據(jù)倉(cāng)庫(kù)產(chǎn)品比較12/2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)的分類(lèi)（1）兩層架構(gòu)（GenericTwo-LevelArchitecture）。（2）獨(dú)立型數(shù)據(jù)集市（IndependentDataMart）。（3）依賴(lài)型數(shù)據(jù)集市和操作型數(shù)據(jù)存儲(chǔ)（DependentDataMartandOperationalDataStore）。（4）邏輯型數(shù)據(jù)集市和實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)（LogicalDataMartandReal-TimeDataWarehouse）。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)的分類(lèi)12.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)兩層數(shù)據(jù)倉(cāng)庫(kù)體系結(jié)構(gòu)

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)兩層數(shù)據(jù)倉(cāng)庫(kù)體系結(jié)構(gòu)12/82.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)基于獨(dú)立數(shù)據(jù)集市的數(shù)據(jù)倉(cāng)庫(kù)體系結(jié)構(gòu)

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)基于獨(dú)立數(shù)據(jù)集市的數(shù)據(jù)倉(cāng)庫(kù)體系2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)基于依賴(lài)型數(shù)據(jù)集市和操作型數(shù)據(jù)存儲(chǔ)(ODS)的數(shù)據(jù)倉(cāng)庫(kù)體系結(jié)構(gòu)

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)基于依賴(lài)型數(shù)據(jù)集市和操作型數(shù)據(jù)2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)邏輯型數(shù)據(jù)集市和實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)的體系結(jié)構(gòu)

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)邏輯型數(shù)據(jù)集市和實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)的2.5數(shù)據(jù)倉(cāng)庫(kù)的產(chǎn)生、發(fā)展與未來(lái)數(shù)據(jù)倉(cāng)庫(kù)的產(chǎn)生聯(lián)機(jī)事務(wù)處理系統(tǒng)（業(yè)務(wù)系統(tǒng)）剛上線時(shí)，查詢(xún)不到數(shù)據(jù)是因?yàn)閿?shù)據(jù)太少了，而幾十年后查詢(xún)不到有關(guān)數(shù)據(jù)是因?yàn)閿?shù)據(jù)太多了。針對(duì)這一問(wèn)題，人們?cè)O(shè)想專(zhuān)門(mén)為業(yè)務(wù)數(shù)據(jù)的統(tǒng)計(jì)分析建立一個(gè)數(shù)據(jù)中心，它的數(shù)據(jù)從聯(lián)機(jī)事務(wù)處理系統(tǒng)中來(lái)、從異構(gòu)的外部數(shù)據(jù)源來(lái)、或從脫機(jī)的歷史業(yè)務(wù)數(shù)據(jù)中來(lái)，這個(gè)數(shù)據(jù)中心也是一個(gè)聯(lián)機(jī)系統(tǒng)，它專(zhuān)門(mén)為分析統(tǒng)計(jì)和決策支持應(yīng)用服務(wù)，通過(guò)它可獲取決策支持和聯(lián)機(jī)分析應(yīng)用所需要的一切數(shù)據(jù)。這個(gè)數(shù)據(jù)中心就叫做數(shù)據(jù)倉(cāng)庫(kù)。簡(jiǎn)單地說(shuō)，數(shù)據(jù)倉(cāng)庫(kù)就是一個(gè)作為決策支持和聯(lián)機(jī)分析應(yīng)用系統(tǒng)數(shù)據(jù)源的結(jié)構(gòu)化數(shù)據(jù)環(huán)境，數(shù)據(jù)倉(cāng)庫(kù)要研究和解決的問(wèn)題就是從數(shù)據(jù)庫(kù)中獲取信息的問(wèn)題。

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.5數(shù)據(jù)倉(cāng)庫(kù)的產(chǎn)生、發(fā)展與未來(lái)數(shù)據(jù)倉(cāng)庫(kù)的產(chǎn)生12/8/22.5數(shù)據(jù)倉(cāng)庫(kù)的產(chǎn)生、發(fā)展與未來(lái)數(shù)據(jù)倉(cāng)庫(kù)的發(fā)展以報(bào)表為主以分析為主以預(yù)測(cè)模型為主以營(yíng)運(yùn)導(dǎo)向?yàn)橹饕詫?shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)、自動(dòng)決策應(yīng)用為主

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.5數(shù)據(jù)倉(cāng)庫(kù)的產(chǎn)生、發(fā)展與未來(lái)數(shù)據(jù)倉(cāng)庫(kù)的發(fā)展12/8/22.5數(shù)據(jù)倉(cāng)庫(kù)的產(chǎn)生、發(fā)展與未來(lái)數(shù)據(jù)倉(cāng)庫(kù)的未來(lái)在數(shù)據(jù)抽取方面，未來(lái)的技術(shù)發(fā)展將集中在系統(tǒng)集成化方面。它將互連、轉(zhuǎn)換、復(fù)制、調(diào)度、監(jiān)控納入標(biāo)準(zhǔn)化的統(tǒng)一管理，以適應(yīng)數(shù)據(jù)倉(cāng)庫(kù)本身或數(shù)據(jù)源可能的變化，使系統(tǒng)更便于管理和維護(hù)。在數(shù)據(jù)管理方面，未來(lái)的發(fā)展將使數(shù)據(jù)庫(kù)廠商明確推出數(shù)據(jù)倉(cāng)庫(kù)引擎，作為數(shù)據(jù)倉(cāng)庫(kù)服務(wù)器產(chǎn)品與數(shù)據(jù)庫(kù)服務(wù)器并駕齊驅(qū)。在這一方面，帶有決策支持?jǐn)U展的并行關(guān)系數(shù)據(jù)庫(kù)將最具發(fā)展?jié)摿?。在?shù)據(jù)表現(xiàn)方面，數(shù)理統(tǒng)計(jì)的算法和功能將普遍集成到聯(lián)機(jī)分析產(chǎn)品中，并與Internet/Web技術(shù)緊密結(jié)合。按行業(yè)應(yīng)用特征細(xì)化的數(shù)據(jù)倉(cāng)庫(kù)用戶(hù)前端軟件將成為產(chǎn)品作為數(shù)據(jù)倉(cāng)庫(kù)解決方案的一部分。數(shù)據(jù)倉(cāng)庫(kù)實(shí)現(xiàn)過(guò)程的方法論將更加普及，將成為數(shù)據(jù)庫(kù)設(shè)計(jì)的一個(gè)明確分支，成為管理信息系統(tǒng)設(shè)計(jì)的必備

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.5數(shù)據(jù)倉(cāng)庫(kù)的產(chǎn)生、發(fā)展與未來(lái)數(shù)據(jù)倉(cāng)庫(kù)的未來(lái)12/8/2第2章數(shù)據(jù)倉(cāng)庫(kù)的概念與體系結(jié)構(gòu)歷史數(shù)據(jù)的幾種處理方式:1)簡(jiǎn)單刪除2）備份后刪除3）建立數(shù)據(jù)倉(cāng)庫(kù)12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘第2章數(shù)據(jù)倉(cāng)庫(kù)的概念與體系結(jié)構(gòu)歷史數(shù)據(jù)的幾種處理方式:2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的概念數(shù)據(jù)倉(cāng)庫(kù)就是一個(gè)面向主題的（SubjectOriented）、集成的（Integrate）、相對(duì)穩(wěn)定的（Non-Volatile）、反映歷史變化（TimeVariant）的數(shù)據(jù)集合，通常用于輔助決策支持（DDS）12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的概念12/8/22.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)：面向主題；集成的；相對(duì)穩(wěn)定的；反映歷史變化。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的特點(diǎn)：12/8/2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的組成：數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)庫(kù)（核心部分）（特點(diǎn)：支持海量數(shù)據(jù)和快速檢索）；數(shù)據(jù)抽取工具（提取、轉(zhuǎn)換、整理），數(shù)據(jù)轉(zhuǎn)換的內(nèi)容通常有：1)刪除沒(méi)意義的數(shù)據(jù)；2）轉(zhuǎn)換到統(tǒng)一的數(shù)據(jù)名稱(chēng)和定義；3）計(jì)算統(tǒng)計(jì)和衍生數(shù)據(jù)；4）填補(bǔ)缺失數(shù)據(jù)等；元數(shù)據(jù)：技術(shù)元數(shù)據(jù)與業(yè)務(wù)元數(shù)據(jù)；技術(shù)元數(shù)據(jù)：數(shù)據(jù)倉(cāng)庫(kù)的涉及和管理人員用于開(kāi)發(fā)和管理數(shù)據(jù)倉(cāng)庫(kù)時(shí)使用的元數(shù)據(jù)，包括：數(shù)據(jù)轉(zhuǎn)換的描述、數(shù)據(jù)清洗和數(shù)據(jù)更新時(shí)用的規(guī)則等等。

業(yè)務(wù)元數(shù)據(jù):從單位業(yè)務(wù)的角度描述數(shù)據(jù)倉(cāng)庫(kù)，如業(yè)務(wù)主題的描述，即業(yè)務(wù)主體包含的數(shù)據(jù)、查詢(xún)及報(bào)表等。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的組成：12/8/2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的組成：-訪問(wèn)工具：如分析、報(bào)表、數(shù)據(jù)挖掘工具數(shù)據(jù)集市（DataMarts）：為特定的應(yīng)用目的，從數(shù)據(jù)倉(cāng)庫(kù)中獨(dú)立出來(lái)的一部分?jǐn)?shù)據(jù)，也稱(chēng)部門(mén)數(shù)據(jù)或主題數(shù)據(jù)。數(shù)據(jù)倉(cāng)庫(kù)管理：包括安全與權(quán)限的管理、數(shù)據(jù)更新的跟蹤、元數(shù)據(jù)的管理與更新、數(shù)據(jù)的復(fù)制于刪除等等。信息發(fā)布系統(tǒng)：將數(shù)據(jù)發(fā)送給不同的地點(diǎn)或用戶(hù)。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.1數(shù)據(jù)倉(cāng)庫(kù)的概念、特點(diǎn)與組成數(shù)據(jù)倉(cāng)庫(kù)的組成：12/8/2.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)挖掘的概念數(shù)據(jù)挖掘(DataMining)，就是從大量數(shù)據(jù)中獲取有效的、新穎的、潛在有用的、最終可理解的模式的非平凡過(guò)程，簡(jiǎn)單的說(shuō)，數(shù)據(jù)挖掘就是從大量數(shù)據(jù)中提取或“挖掘”知識(shí)，又被稱(chēng)為數(shù)據(jù)庫(kù)中的知識(shí)發(fā)現(xiàn)(KnowledgeDiscoveryinDatabase,KDD)12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)挖掘的概念12/8/20222.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)挖掘的方法：直接數(shù)據(jù)挖掘間接數(shù)據(jù)挖掘。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)挖掘的方法：12/8/2022.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘的關(guān)系若將數(shù)據(jù)倉(cāng)庫(kù)（DataWarehouse）比作礦井，那么數(shù)據(jù)挖掘（DataMining）就是深入礦井采礦的工作數(shù)據(jù)挖掘是從數(shù)據(jù)倉(cāng)庫(kù)中找出有用信息的一種過(guò)程與技術(shù)

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.2數(shù)據(jù)挖掘的概念與方法數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘的關(guān)系12/82.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品聯(lián)機(jī)事務(wù)處理（OLTP）與聯(lián)機(jī)分析處理（OLAP）的比較；見(jiàn)表1.1OLAP技術(shù)的有關(guān)概念：多維數(shù)據(jù)集、維度、度量值和多維分析（切片、切塊、鉆取、旋轉(zhuǎn)等）；OLAP根據(jù)其存儲(chǔ)數(shù)據(jù)的方式可分為三類(lèi)：ROLAP、MOLAP、HOLAP（混合，低層關(guān)系型，高層多維型）OLAP工具：對(duì)特定問(wèn)題的聯(lián)機(jī)數(shù)據(jù)訪問(wèn)與分析，一般是前端工具。

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品聯(lián)機(jī)事務(wù)處理（OLTP）與2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品數(shù)據(jù)倉(cāng)庫(kù)實(shí)施中的三個(gè)關(guān)鍵環(huán)節(jié)數(shù)據(jù)抽??；數(shù)據(jù)存儲(chǔ)與管理：大量數(shù)據(jù)管理，并行處理，支持查詢(xún)的優(yōu)化，支持多維分析的查詢(xún)模式數(shù)據(jù)表現(xiàn):工具主要集中在多維分析、數(shù)據(jù)挖掘、統(tǒng)計(jì)分析。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品數(shù)據(jù)倉(cāng)庫(kù)實(shí)施中的三個(gè)關(guān)鍵環(huán)2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品數(shù)據(jù)倉(cāng)庫(kù)實(shí)施方法論數(shù)據(jù)倉(cāng)庫(kù)不是簡(jiǎn)單的數(shù)據(jù)或產(chǎn)品堆砌，它是一個(gè)綜合集成解決方案和系統(tǒng)工程。在數(shù)據(jù)倉(cāng)庫(kù)的實(shí)施過(guò)程中，技術(shù)決策至關(guān)重要，技術(shù)選擇或決策錯(cuò)誤很可能導(dǎo)致項(xiàng)目實(shí)施失敗12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品數(shù)據(jù)倉(cāng)庫(kù)實(shí)施方法論12/82.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品常用數(shù)據(jù)倉(cāng)庫(kù)產(chǎn)品比較常用OLAP工具介紹；各數(shù)據(jù)倉(cāng)庫(kù)廠商提供的解決方案IBM、Oracle、NCR、Microsoft、SAS等12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.3數(shù)據(jù)倉(cāng)庫(kù)的技術(shù)、方法與產(chǎn)品常用數(shù)據(jù)倉(cāng)庫(kù)產(chǎn)品比較12/2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)的分類(lèi)（1）兩層架構(gòu)（GenericTwo-LevelArchitecture）。（2）獨(dú)立型數(shù)據(jù)集市（IndependentDataMart）。（3）依賴(lài)型數(shù)據(jù)集市和操作型數(shù)據(jù)存儲(chǔ)（DependentDataMartandOperationalDataStore）。（4）邏輯型數(shù)據(jù)集市和實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)（LogicalDataMartandReal-TimeDataWarehouse）。12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)的分類(lèi)12.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)兩層數(shù)據(jù)倉(cāng)庫(kù)體系結(jié)構(gòu)

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)兩層數(shù)據(jù)倉(cāng)庫(kù)體系結(jié)構(gòu)12/82.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)基于獨(dú)立數(shù)據(jù)集市的數(shù)據(jù)倉(cāng)庫(kù)體系結(jié)構(gòu)

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)基于獨(dú)立數(shù)據(jù)集市的數(shù)據(jù)倉(cāng)庫(kù)體系2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)基于依賴(lài)型數(shù)據(jù)集市和操作型數(shù)據(jù)存儲(chǔ)(ODS)的數(shù)據(jù)倉(cāng)庫(kù)體系結(jié)構(gòu)

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)基于依賴(lài)型數(shù)據(jù)集市和操作型數(shù)據(jù)2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)邏輯型數(shù)據(jù)集市和實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)的體系結(jié)構(gòu)

12/10/2022數(shù)據(jù)倉(cāng)庫(kù)與數(shù)據(jù)挖掘2.4數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的體系結(jié)構(gòu)邏輯型數(shù)據(jù)集市和實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)的2.5數(shù)據(jù)倉(cāng)庫(kù)的產(chǎn)生、發(fā)展與未來(lái)數(shù)據(jù)倉(cāng)庫(kù)的產(chǎn)生聯(lián)機(jī)事務(wù)處理系統(tǒng)（業(yè)務(wù)系統(tǒng)）剛上線時(shí)，查詢(xún)不到數(shù)據(jù)是因?yàn)閿?shù)據(jù)太少了，而幾十年后查詢(xún)不到有關(guān)數(shù)據(jù)是因?yàn)閿?shù)據(jù)太多了。針對(duì)這一問(wèn)題，人們?cè)O(shè)想專(zhuān)門(mén)為業(yè)務(wù)數(shù)據(jù)的統(tǒng)計(jì)分析建立一個(gè)數(shù)據(jù)中心，它的數(shù)據(jù)從聯(lián)機(jī)事務(wù)處理系統(tǒng)中來(lái)、從異構(gòu)的外部