第09章數(shù)據(jù)庫研究與發(fā)展ppt課件

1、第9章 數(shù)據(jù)庫系統(tǒng)的研究與發(fā)展9.1 分布式數(shù)據(jù)庫系統(tǒng)分布式數(shù)據(jù)庫系統(tǒng)Distributed Database SystemDDBS 分布式數(shù)據(jù)庫分布式數(shù)據(jù)庫 邏輯上是一個(gè)統(tǒng)一的數(shù)據(jù)庫系統(tǒng)邏輯上是一個(gè)統(tǒng)一的數(shù)據(jù)庫系統(tǒng) 物理上分散在不同的場(chǎng)地節(jié)點(diǎn)）物理上分散在不同的場(chǎng)地節(jié)點(diǎn)） 各場(chǎng)地通過計(jì)算機(jī)網(wǎng)絡(luò)連接在一起各場(chǎng)地通過計(jì)算機(jī)網(wǎng)絡(luò)連接在一起 統(tǒng)一由一個(gè)分布式數(shù)據(jù)庫管理系統(tǒng)統(tǒng)一由一個(gè)分布式數(shù)據(jù)庫管理系統(tǒng)( DDBMS )管管理理 特點(diǎn)特點(diǎn) 分布性：分布性： 數(shù)據(jù)的分布性數(shù)據(jù)的分布性 事務(wù)的分布性事務(wù)的分布性 協(xié)調(diào)性：邏輯上整體、具整體完整性約束協(xié)調(diào)性：邏輯上整體、具整體完整性約束 數(shù)據(jù)的分布性數(shù)據(jù)的分

2、布性 分布式數(shù)據(jù)存儲(chǔ)分布式數(shù)據(jù)存儲(chǔ) 復(fù)制復(fù)制 分片分片 復(fù)制復(fù)制 + 分片分片 數(shù)據(jù)的冗余數(shù)據(jù)的冗余 提高數(shù)據(jù)的可用性、并發(fā)性、減少網(wǎng)絡(luò)傳輸提高數(shù)據(jù)的可用性、并發(fā)性、減少網(wǎng)絡(luò)傳輸 增加了數(shù)據(jù)更新的開銷，副本一致性問題增加了數(shù)據(jù)更新的開銷，副本一致性問題 事務(wù)的分布性事務(wù)的分布性 局部事務(wù)局部事務(wù) 僅訪問當(dāng)?shù)財(cái)?shù)據(jù)庫的事務(wù)僅訪問當(dāng)?shù)財(cái)?shù)據(jù)庫的事務(wù) 全局事務(wù)全局事務(wù) 需訪問其他場(chǎng)地?cái)?shù)據(jù)庫的事務(wù)需訪問其他場(chǎng)地?cái)?shù)據(jù)庫的事務(wù) 分布式數(shù)據(jù)庫環(huán)境下的訪問代價(jià)分布式數(shù)據(jù)庫環(huán)境下的訪問代價(jià) 磁盤讀寫磁盤讀寫 網(wǎng)絡(luò)傳輸網(wǎng)絡(luò)傳輸 分布式數(shù)據(jù)庫的目標(biāo)分布式數(shù)據(jù)庫的目標(biāo) 部門組織分布，降低成本部門組織分布，降低成本 數(shù)據(jù)資

3、源共享，提高數(shù)據(jù)庫的利用率數(shù)據(jù)資源共享，提高數(shù)據(jù)庫的利用率 全局外模式全局外模式 全局應(yīng)用的用戶視圖，全局概念模式的子集全局應(yīng)用的用戶視圖，全局概念模式的子集 全局概念模式全局概念模式 是全局概念視圖是全局概念視圖 全局概念模式名、屬性名、域全局概念模式名、屬性名、域 分片模式分片模式 定義分片片段以及全局關(guān)系到片段的映象定義分片片段以及全局關(guān)系到片段的映象 是一對(duì)多的，一個(gè)全局關(guān)系可對(duì)應(yīng)多個(gè)片段，一個(gè)片段只來自是一對(duì)多的，一個(gè)全局關(guān)系可對(duì)應(yīng)多個(gè)片段，一個(gè)片段只來自全局關(guān)系全局關(guān)系 分布模式分布模式 分片的物理分配視圖分片的物理分配視圖 局部概念模式局部概念模式 局部數(shù)據(jù)庫中的概念模型，關(guān)于本

4、地?cái)?shù)據(jù)庫的描述局部數(shù)據(jù)庫中的概念模型，關(guān)于本地?cái)?shù)據(jù)庫的描述 如果局部數(shù)據(jù)庫中還有獨(dú)立應(yīng)用，則應(yīng)有局部外模式，提供給如果局部數(shù)據(jù)庫中還有獨(dú)立應(yīng)用，則應(yīng)有局部外模式，提供給本地應(yīng)用使用本地應(yīng)用使用 局部?jī)?nèi)模式局部?jī)?nèi)模式 局部數(shù)據(jù)庫的物理描述局部數(shù)據(jù)庫的物理描述 局部數(shù)據(jù)庫：本地的局部數(shù)據(jù)庫局部數(shù)據(jù)庫：本地的局部數(shù)據(jù)庫網(wǎng)絡(luò)網(wǎng)絡(luò)LDBLDBMSGDBMSCM全局?jǐn)?shù)據(jù)字典全局?jǐn)?shù)據(jù)字典LDBCMGDBMSLDBMS全局?jǐn)?shù)據(jù)字典全局?jǐn)?shù)據(jù)字典LDBCMGDBMSLDBMS全局?jǐn)?shù)據(jù)字典全局?jǐn)?shù)據(jù)字典DDBMS的結(jié)構(gòu)的結(jié)構(gòu) 全局?jǐn)?shù)據(jù)字典全局?jǐn)?shù)據(jù)字典 存放數(shù)據(jù)概念模式、分片模式、分布模式的定存放數(shù)據(jù)概念模式、分片模式

5、、分布模式的定義及各模式之間映象的定義義及各模式之間映象的定義 存放有關(guān)用戶存取權(quán)限的定義存放有關(guān)用戶存取權(quán)限的定義 存放數(shù)據(jù)完整性約束條件的定義存放數(shù)據(jù)完整性約束條件的定義 分布式數(shù)據(jù)庫的基本原則分布式數(shù)據(jù)庫的基本原則 對(duì)用戶最終用戶、程序員來說，一個(gè)分布對(duì)用戶最終用戶、程序員來說，一個(gè)分布式系統(tǒng)應(yīng)該看起來完全象一個(gè)非分布式系統(tǒng)式系統(tǒng)應(yīng)該看起來完全象一個(gè)非分布式系統(tǒng) Sybase Enterprise Connect 數(shù)據(jù)庫互聯(lián)與復(fù)制解決方案 提供在同 / 異構(gòu)數(shù)據(jù)源中進(jìn)行分布事務(wù)復(fù)制、位置透明、與應(yīng)用獨(dú)立的數(shù)據(jù)存取功能 集成 Repliaction Server / Replication

6、 Agent (復(fù)制服務(wù)器/代理) JconnectJ連接） Open Server/Open Client （開放式服務(wù)器/客戶機(jī)） Omni Connect / Direct Connect （總連接/直接連接）SQL RemoteASA 聯(lián)機(jī)用戶ASA 遠(yuǎn)程移動(dòng)用戶ASA/ASE企業(yè)數(shù)據(jù)ASA的遠(yuǎn)程工作組(辦事處 1)總部SQLRemoteSQLRemoteSQLRemote復(fù)制服務(wù)器ASA的遠(yuǎn)程工作組(辦事處 2)9.2 數(shù)據(jù)倉庫技術(shù)與聯(lián)機(jī)數(shù)據(jù)倉庫技術(shù)與聯(lián)機(jī)分析處理分析處理Data Warehouse & OLAP 數(shù)據(jù)庫處理的兩大應(yīng)用數(shù)據(jù)庫處理的兩大應(yīng)用 聯(lián)機(jī)事務(wù)處理聯(lián)機(jī)事務(wù)

7、處理OLTP） 操作型處理，為企業(yè)的特定應(yīng)用服務(wù)操作型處理，為企業(yè)的特定應(yīng)用服務(wù) 是對(duì)數(shù)據(jù)庫的聯(lián)機(jī)的日常操作，通常是對(duì)是對(duì)數(shù)據(jù)庫的聯(lián)機(jī)的日常操作，通常是對(duì)一個(gè)或一組記錄的查詢和修改一個(gè)或一組記錄的查詢和修改 人們關(guān)心的是響應(yīng)時(shí)間、數(shù)據(jù)的安全性和人們關(guān)心的是響應(yīng)時(shí)間、數(shù)據(jù)的安全性和完整性完整性 決策支持系統(tǒng)決策支持系統(tǒng)DSS） 分析型處理，用于管理人員的決策分析分析型處理，用于管理人員的決策分析 經(jīng)常需要訪問大量的歷史數(shù)據(jù)經(jīng)常需要訪問大量的歷史數(shù)據(jù) 數(shù)據(jù)倉庫數(shù)據(jù)倉庫 + 聯(lián)機(jī)分析處理聯(lián)機(jī)分析處理 + 數(shù)據(jù)挖掘數(shù)據(jù)挖掘 （ DW + OLAP + DM ） DSS 數(shù)據(jù)倉庫數(shù)據(jù)倉庫 是一個(gè)面向主題

8、的、集成的、非易失是一個(gè)面向主題的、集成的、非易失的不可修改且隨時(shí)間變化的數(shù)據(jù)的不可修改且隨時(shí)間變化的數(shù)據(jù)集合，用來支持管理人員的決策集合，用來支持管理人員的決策 數(shù)據(jù)倉庫的特點(diǎn)數(shù)據(jù)倉庫的特點(diǎn) 面向主題面向主題 主題是在較高層次上對(duì)數(shù)據(jù)抽象主題是在較高層次上對(duì)數(shù)據(jù)抽象 面向主題的數(shù)據(jù)組織分為兩步驟面向主題的數(shù)據(jù)組織分為兩步驟 抽取主題抽取主題 確定每個(gè)主題所包含的數(shù)據(jù)內(nèi)容確定每個(gè)主題所包含的數(shù)據(jù)內(nèi)容 每個(gè)主題在數(shù)據(jù)倉庫中都是由一組關(guān)系表每個(gè)主題在數(shù)據(jù)倉庫中都是由一組關(guān)系表實(shí)現(xiàn)的實(shí)現(xiàn)的 集成的集成的 數(shù)據(jù)不可更改數(shù)據(jù)不可更改 隨時(shí)間變化的隨時(shí)間變化的 數(shù)據(jù)倉庫的特點(diǎn)數(shù)據(jù)倉庫的特點(diǎn) 面向主題面向主

9、題 數(shù)據(jù)倉庫的特點(diǎn)數(shù)據(jù)倉庫的特點(diǎn) 面向主題面向主題 集成的集成的 數(shù)據(jù)倉庫的數(shù)據(jù)是從原有的分散數(shù)據(jù)庫數(shù)據(jù)中數(shù)據(jù)倉庫的數(shù)據(jù)是從原有的分散數(shù)據(jù)庫數(shù)據(jù)中抽取來的抽取來的 消除數(shù)據(jù)表述的不一致性數(shù)據(jù)的清洗）消除數(shù)據(jù)表述的不一致性數(shù)據(jù)的清洗） 數(shù)據(jù)的綜合數(shù)據(jù)的綜合 數(shù)據(jù)不可更改數(shù)據(jù)不可更改 隨時(shí)間變化的隨時(shí)間變化的 數(shù)據(jù)倉庫的特點(diǎn)數(shù)據(jù)倉庫的特點(diǎn) 集成集成 數(shù)據(jù)倉庫的特點(diǎn)數(shù)據(jù)倉庫的特點(diǎn) 面向主題面向主題 集成的集成的 數(shù)據(jù)不可更改數(shù)據(jù)不可更改 數(shù)據(jù)倉庫的主要數(shù)據(jù)操作是查詢、分析數(shù)據(jù)倉庫的主要數(shù)據(jù)操作是查詢、分析 不進(jìn)行一般意義上的數(shù)據(jù)更新過期數(shù)據(jù)可能不進(jìn)行一般意義上的數(shù)據(jù)更新過期數(shù)據(jù)可能被刪除）被刪除）

10、數(shù)據(jù)倉庫強(qiáng)化查詢、淡化并發(fā)控制和完整性保數(shù)據(jù)倉庫強(qiáng)化查詢、淡化并發(fā)控制和完整性保護(hù)等技術(shù)護(hù)等技術(shù) 隨時(shí)間變化的隨時(shí)間變化的 數(shù)據(jù)倉庫的特點(diǎn)數(shù)據(jù)倉庫的特點(diǎn)數(shù)據(jù)不可更改數(shù)據(jù)不可更改 數(shù)據(jù)倉庫的特點(diǎn)數(shù)據(jù)倉庫的特點(diǎn) 面向主題面向主題 集成的集成的 數(shù)據(jù)不可更改數(shù)據(jù)不可更改 隨時(shí)間變化的隨時(shí)間變化的 不斷增加新的數(shù)據(jù)內(nèi)容不斷增加新的數(shù)據(jù)內(nèi)容 不斷刪除舊的數(shù)據(jù)內(nèi)容不斷刪除舊的數(shù)據(jù)內(nèi)容 定時(shí)綜合定時(shí)綜合 數(shù)據(jù)倉庫中數(shù)據(jù)表的鍵碼都包含時(shí)間項(xiàng)，以標(biāo)數(shù)據(jù)倉庫中數(shù)據(jù)表的鍵碼都包含時(shí)間項(xiàng)，以標(biāo)明數(shù)據(jù)的歷史時(shí)期明數(shù)據(jù)的歷史時(shí)期 數(shù)據(jù)倉庫的特點(diǎn)數(shù)據(jù)倉庫的特點(diǎn) 隨時(shí)間變化隨時(shí)間變化 數(shù)據(jù)倉庫的結(jié)構(gòu)數(shù)據(jù)倉庫的結(jié)構(gòu)OLTP系統(tǒng)

11、系統(tǒng)RDBMSSybaseVSAMSAP/ERP5-10 年年過去過去詳細(xì)數(shù)據(jù)詳細(xì)數(shù)據(jù)當(dāng)前當(dāng)前詳細(xì)數(shù)據(jù)詳細(xì)數(shù)據(jù)輕度輕度匯總數(shù)據(jù)匯總數(shù)據(jù)高度高度匯總數(shù)據(jù)匯總數(shù)據(jù)數(shù)據(jù)集市數(shù)據(jù)集市分析型分析型CRM業(yè)務(wù)指標(biāo)分析業(yè)務(wù)指標(biāo)分析數(shù)據(jù)倉庫數(shù)據(jù)倉庫/決策分析系統(tǒng)決策分析系統(tǒng)EXCEL 數(shù)據(jù)倉庫的結(jié)構(gòu)數(shù)據(jù)倉庫的結(jié)構(gòu) 數(shù)據(jù)由操作型環(huán)境綜合導(dǎo)入數(shù)據(jù)倉庫數(shù)據(jù)由操作型環(huán)境綜合導(dǎo)入數(shù)據(jù)倉庫 數(shù)據(jù)具有不同的細(xì)節(jié)級(jí)數(shù)據(jù)具有不同的細(xì)節(jié)級(jí) 早期細(xì)節(jié)級(jí)過期數(shù)據(jù)）早期細(xì)節(jié)級(jí)過期數(shù)據(jù)） 當(dāng)前細(xì)節(jié)級(jí)當(dāng)前細(xì)節(jié)級(jí) 輕度綜合數(shù)據(jù)級(jí)數(shù)據(jù)集市）輕度綜合數(shù)據(jù)級(jí)數(shù)據(jù)集市） 高度綜合數(shù)據(jù)級(jí)高度綜合數(shù)據(jù)級(jí) 數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式

12、 簡(jiǎn)單堆積簡(jiǎn)單堆積 輪轉(zhuǎn)綜合輪轉(zhuǎn)綜合 數(shù)據(jù)按一定的格式進(jìn)行輪轉(zhuǎn)的累加數(shù)據(jù)按一定的格式進(jìn)行輪轉(zhuǎn)的累加 簡(jiǎn)化直接簡(jiǎn)化直接 按一定的時(shí)間間隔，對(duì)數(shù)據(jù)進(jìn)行提取，是操作按一定的時(shí)間間隔，對(duì)數(shù)據(jù)進(jìn)行提取，是操作型數(shù)據(jù)的一個(gè)快照型數(shù)據(jù)的一個(gè)快照 延續(xù)延續(xù) 把新的快照追加到以前的連續(xù)數(shù)據(jù)上去把新的快照追加到以前的連續(xù)數(shù)據(jù)上去 數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式 簡(jiǎn)單堆積簡(jiǎn)單堆積 每日由數(shù)據(jù)庫中提取并加工的數(shù)據(jù)逐天積累堆每日由數(shù)據(jù)庫中提取并加工的數(shù)據(jù)逐天積累堆積積 數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式 輪轉(zhuǎn)綜合輪轉(zhuǎn)綜合 數(shù)據(jù)按一定的格式進(jìn)行輪轉(zhuǎn)的累加數(shù)據(jù)按一定的格式進(jìn)行輪轉(zhuǎn)的累加 數(shù)據(jù)

13、倉庫中的數(shù)據(jù)組織形式數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式 簡(jiǎn)單堆積與輪轉(zhuǎn)綜合的比較簡(jiǎn)單堆積與輪轉(zhuǎn)綜合的比較 數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式 簡(jiǎn)化直接簡(jiǎn)化直接 按一定的時(shí)間間隔，對(duì)數(shù)據(jù)進(jìn)行提取，是操作按一定的時(shí)間間隔，對(duì)數(shù)據(jù)進(jìn)行提取，是操作型數(shù)據(jù)的一個(gè)快照型數(shù)據(jù)的一個(gè)快照 數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式數(shù)據(jù)倉庫中的數(shù)據(jù)組織形式 延續(xù)延續(xù) 把新的快照追加到以前的連續(xù)數(shù)據(jù)上去把新的快照追加到以前的連續(xù)數(shù)據(jù)上去 數(shù)據(jù)倉庫的數(shù)據(jù)追加數(shù)據(jù)倉庫的數(shù)據(jù)追加 數(shù)據(jù)追加數(shù)據(jù)追加 數(shù)據(jù)倉庫的數(shù)據(jù)初裝完成以后，再向數(shù)據(jù)倉庫數(shù)據(jù)倉庫的數(shù)據(jù)初裝完成以后，再向數(shù)據(jù)倉庫輸入數(shù)據(jù)的過程稱為數(shù)據(jù)追加輸入數(shù)據(jù)的過程稱為數(shù)據(jù)追加 變

14、化數(shù)據(jù)的捕獲變化數(shù)據(jù)的捕獲 時(shí)標(biāo)法：加標(biāo)識(shí)時(shí)標(biāo)法：加標(biāo)識(shí) DELTA法：對(duì)更新作記錄法：對(duì)更新作記錄 前后映象法：兩次快照的對(duì)比前后映象法：兩次快照的對(duì)比 日志法：利用日志法：利用DBMS的日志，需改進(jìn)的日志，需改進(jìn) 數(shù)據(jù)庫的體系化環(huán)境數(shù)據(jù)庫的體系化環(huán)境 是在一個(gè)企業(yè)或組織內(nèi)部，由各面向應(yīng)用的是在一個(gè)企業(yè)或組織內(nèi)部，由各面向應(yīng)用的OLTP數(shù)據(jù)庫及各級(jí)面向主題的數(shù)據(jù)倉庫所組數(shù)據(jù)庫及各級(jí)面向主題的數(shù)據(jù)倉庫所組成的完整的數(shù)據(jù)環(huán)境成的完整的數(shù)據(jù)環(huán)境 操作型環(huán)境、分析型環(huán)境操作型環(huán)境、分析型環(huán)境 四層體系化環(huán)境四層體系化環(huán)境 操作型環(huán)境操作型環(huán)境OLTP 全局級(jí)全局級(jí)數(shù)據(jù)倉庫數(shù)據(jù)倉庫 部門級(jí)部門級(jí)局部倉

15、庫局部倉庫 個(gè)人級(jí)個(gè)人級(jí)個(gè)人倉庫，用于啟發(fā)式的分析個(gè)人倉庫，用于啟發(fā)式的分析 數(shù)據(jù)集市數(shù)據(jù)集市Data Mart） 特定的、面向部門的小型數(shù)據(jù)倉庫特定的、面向部門的小型數(shù)據(jù)倉庫 是為滿足用戶特定需求而創(chuàng)建的數(shù)據(jù)倉庫是為滿足用戶特定需求而創(chuàng)建的數(shù)據(jù)倉庫 是數(shù)據(jù)倉庫的子集是數(shù)據(jù)倉庫的子集 數(shù)據(jù)庫的體系化環(huán)境數(shù)據(jù)庫的體系化環(huán)境 數(shù)據(jù)庫的體系化環(huán)境數(shù)據(jù)庫的體系化環(huán)境 數(shù)據(jù)倉庫的開發(fā)生命周期數(shù)據(jù)倉庫的開發(fā)生命周期 數(shù)據(jù)倉庫的基本數(shù)據(jù)模式數(shù)據(jù)倉庫的基本數(shù)據(jù)模式 星型模式星型模式(Star Schema) 事實(shí)表事實(shí)表(fact table)，存放基本數(shù)據(jù)，相關(guān)主，存放基本數(shù)據(jù)，相關(guān)主題的數(shù)據(jù)主體題的數(shù)據(jù)主

16、體BCNF） 維維(dimension)，影響、分析主體數(shù)據(jù)的因，影響、分析主體數(shù)據(jù)的因素素 量量(measure)，事實(shí)表中的數(shù)據(jù)屬性，事實(shí)表中的數(shù)據(jù)屬性 維表維表(dimension table)，表示維的各種表，表示維的各種表 維是量的取值條件，維用外鍵表示維是量的取值條件，維用外鍵表示 以事實(shí)表為中心，加上若干維表，組成星以事實(shí)表為中心，加上若干維表，組成星型數(shù)據(jù)模式型數(shù)據(jù)模式 例：產(chǎn)品例：產(chǎn)品-商店商店-銷售額銷售額 數(shù)據(jù)倉庫的基本數(shù)據(jù)模式數(shù)據(jù)倉庫的基本數(shù)據(jù)模式CustSalesLocationSalesProdSalesTimeSalesSalestime idproduct id

17、location idcustomer idsales revenueunits soldProductproduct idmakemodelTimetime iddateyearquartermonthweekLocationlocation idregiondistrictstoreCustomercustomer idcategorygroupSales factSales measuresTime dimensionAttributes of the time dimension 數(shù)據(jù)倉庫的基本數(shù)據(jù)模式數(shù)據(jù)倉庫的基本數(shù)據(jù)模式 雪花模式雪花模式(Snowflake Schema) 維一般

18、是由若干層次組成維一般是由若干層次組成 把維按其層次結(jié)構(gòu)表示成若干個(gè)表把維按其層次結(jié)構(gòu)表示成若干個(gè)表 規(guī)范化、節(jié)省存儲(chǔ)空間規(guī)范化、節(jié)省存儲(chǔ)空間 但需多做連接操作但需多做連接操作 數(shù)據(jù)倉庫的解決方案數(shù)據(jù)倉庫的解決方案 通用的關(guān)系數(shù)據(jù)庫系統(tǒng)通用的關(guān)系數(shù)據(jù)庫系統(tǒng) 專門的數(shù)據(jù)倉庫服務(wù)器專門的數(shù)據(jù)倉庫服務(wù)器 數(shù)據(jù)倉庫系統(tǒng)的體系結(jié)構(gòu)數(shù)據(jù)倉庫系統(tǒng)的體系結(jié)構(gòu) 數(shù)據(jù)倉庫層數(shù)據(jù)倉庫層 數(shù)據(jù)倉庫工具層數(shù)據(jù)倉庫工具層 最終用戶最終用戶 數(shù)據(jù)倉庫系統(tǒng)數(shù)據(jù)倉庫系統(tǒng) 數(shù)據(jù)倉庫數(shù)據(jù)倉庫 居系統(tǒng)的核心地位居系統(tǒng)的核心地位 是信息挖掘的基礎(chǔ)是信息挖掘的基礎(chǔ) 數(shù)據(jù)倉庫管理系統(tǒng)數(shù)據(jù)倉庫管理系統(tǒng) 是整個(gè)系統(tǒng)的引擎是整個(gè)系統(tǒng)的引擎 負(fù)責(zé)

19、管理整個(gè)系統(tǒng)的運(yùn)轉(zhuǎn)負(fù)責(zé)管理整個(gè)系統(tǒng)的運(yùn)轉(zhuǎn) 數(shù)據(jù)倉庫工具數(shù)據(jù)倉庫工具 一般的查詢工具、功能強(qiáng)大的分析工具一般的查詢工具、功能強(qiáng)大的分析工具 是整個(gè)系統(tǒng)發(fā)揮作用的關(guān)鍵是整個(gè)系統(tǒng)發(fā)揮作用的關(guān)鍵 數(shù)據(jù)分析模型數(shù)據(jù)分析模型 早期早期 靜態(tài)數(shù)據(jù)值的相互比較靜態(tài)數(shù)據(jù)值的相互比較 需求需求 從多個(gè)不同的數(shù)據(jù)源中綜合數(shù)據(jù)從多個(gè)不同的數(shù)據(jù)源中綜合數(shù)據(jù) 從不同的角度觀察數(shù)據(jù)從不同的角度觀察數(shù)據(jù) 多變的主題、多維數(shù)據(jù)多變的主題、多維數(shù)據(jù) E-RE-R不能完全支持不能完全支持 四種分析模型四種分析模型CoddCodd） 絕對(duì)模型絕對(duì)模型 解釋模型解釋模型 思考模型思考模型 公式模型公式模型 四種分析模型四種分析模型Co

20、ddCodd） 絕對(duì)模型絕對(duì)模型 靜態(tài)數(shù)據(jù)分析靜態(tài)數(shù)據(jù)分析 只能對(duì)歷史數(shù)據(jù)進(jìn)行值的比較，描述基本事實(shí)只能對(duì)歷史數(shù)據(jù)進(jìn)行值的比較，描述基本事實(shí) 用戶交互少用戶交互少 解釋模型解釋模型 靜態(tài)數(shù)據(jù)分析靜態(tài)數(shù)據(jù)分析 在當(dāng)前多維視圖的基礎(chǔ)上找出事件發(fā)生的原因在當(dāng)前多維視圖的基礎(chǔ)上找出事件發(fā)生的原因 思考模型思考模型 動(dòng)態(tài)數(shù)據(jù)分析動(dòng)態(tài)數(shù)據(jù)分析 多維分析多維分析 在決策者的參與下，找出關(guān)鍵變量在決策者的參與下，找出關(guān)鍵變量 需要高級(jí)數(shù)據(jù)分析人員的介入需要高級(jí)數(shù)據(jù)分析人員的介入 公式模型公式模型 動(dòng)態(tài)性最高的一類動(dòng)態(tài)性最高的一類 自動(dòng)完成變量的引入工作自動(dòng)完成變量的引入工作 數(shù)據(jù)倉庫系統(tǒng)的工具層數(shù)據(jù)倉庫系統(tǒng)的

21、工具層 查詢工具查詢工具 主要是對(duì)分析結(jié)果的查詢主要是對(duì)分析結(jié)果的查詢 很少有對(duì)記錄級(jí)數(shù)據(jù)的查詢很少有對(duì)記錄級(jí)數(shù)據(jù)的查詢 驗(yàn)證型工具驗(yàn)證型工具 多維分析工具多維分析工具 用戶首先提出假設(shè)，然后利用各種工具通過反復(fù)、用戶首先提出假設(shè)，然后利用各種工具通過反復(fù)、遞歸的檢索查詢以驗(yàn)證或否定假設(shè)遞歸的檢索查詢以驗(yàn)證或否定假設(shè) 發(fā)掘型工具發(fā)掘型工具 從大量數(shù)據(jù)中發(fā)現(xiàn)數(shù)據(jù)模式從大量數(shù)據(jù)中發(fā)現(xiàn)數(shù)據(jù)模式 預(yù)測(cè)趨勢(shì)和行為預(yù)測(cè)趨勢(shì)和行為 聯(lián)機(jī)分析處理聯(lián)機(jī)分析處理OLAP 是針對(duì)特定問題的聯(lián)機(jī)訪問和分析。是針對(duì)特定問題的聯(lián)機(jī)訪問和分析。 通過對(duì)信息的很多種可能的觀察形式進(jìn)行快速、通過對(duì)信息的很多種可能的觀察形式進(jìn)行

22、快速、穩(wěn)定一致和交互性的存取，允許分析人員對(duì)數(shù)據(jù)穩(wěn)定一致和交互性的存取，允許分析人員對(duì)數(shù)據(jù)進(jìn)行深入觀察進(jìn)行深入觀察 一些概念一些概念 變量是數(shù)據(jù)的實(shí)際意義，描述數(shù)據(jù)是什么變量是數(shù)據(jù)的實(shí)際意義，描述數(shù)據(jù)是什么 維是人們觀察數(shù)據(jù)的特定角度維是人們觀察數(shù)據(jù)的特定角度 維的層次是維在不同細(xì)節(jié)程度的描述維的層次是維在不同細(xì)節(jié)程度的描述 維成員是維的一個(gè)取值維成員是維的一個(gè)取值 多層次維的維成員是各層次取值的組合多層次維的維成員是各層次取值的組合 對(duì)應(yīng)一個(gè)數(shù)據(jù)項(xiàng)，維成員是該數(shù)據(jù)項(xiàng)在該維中位對(duì)應(yīng)一個(gè)數(shù)據(jù)項(xiàng)，維成員是該數(shù)據(jù)項(xiàng)在該維中位置的描述置的描述 多維數(shù)組可以表示為維多維數(shù)組可以表示為維1,維維2,變量）

23、，如變量），如地域地域,時(shí)間時(shí)間,銷售渠道銷售渠道,銷售額）銷售額） 多維數(shù)組的取值稱為數(shù)據(jù)單元單元格）多維數(shù)組的取值稱為數(shù)據(jù)單元單元格） 可以理解為交叉表的數(shù)據(jù)格可以理解為交叉表的數(shù)據(jù)格 一些基本操作一些基本操作 在多維數(shù)組的某一維選定一個(gè)維成員的動(dòng)在多維數(shù)組的某一維選定一個(gè)維成員的動(dòng)作稱為切片。作稱為切片。 舍棄一些觀察角度舍棄一些觀察角度 在多維數(shù)組的某一維上選定某一區(qū)間的維在多維數(shù)組的某一維上選定某一區(qū)間的維成員切塊成員切塊 多個(gè)切片的疊加多個(gè)切片的疊加 旋轉(zhuǎn)是改變一個(gè)報(bào)告或頁面顯示的維方向旋轉(zhuǎn)是改變一個(gè)報(bào)告或頁面顯示的維方向 以用戶容易理解的角度來觀察數(shù)據(jù)以用戶容易理解的角度來觀察數(shù)

24、據(jù) 基于多維數(shù)據(jù)庫的基于多維數(shù)據(jù)庫的OLAPMOLAP 以多維方式組織數(shù)據(jù)綜合數(shù)據(jù)）以多維方式組織數(shù)據(jù)綜合數(shù)據(jù)） 以多維方式顯示察看數(shù)據(jù)以多維方式顯示察看數(shù)據(jù) 多維數(shù)據(jù)庫的形式類似于交叉表，可直觀多維數(shù)據(jù)庫的形式類似于交叉表，可直觀地表述一對(duì)多、多對(duì)多的關(guān)系地表述一對(duì)多、多對(duì)多的關(guān)系 如：產(chǎn)品、地域、銷售額如：產(chǎn)品、地域、銷售額 關(guān)系關(guān)系 多維多維 多維數(shù)據(jù)庫由許多經(jīng)壓縮的、類似于數(shù)組多維數(shù)據(jù)庫由許多經(jīng)壓縮的、類似于數(shù)組的對(duì)象構(gòu)成，帶有高度壓縮的索引及指針的對(duì)象構(gòu)成，帶有高度壓縮的索引及指針結(jié)構(gòu)結(jié)構(gòu) 以關(guān)系數(shù)據(jù)庫存放細(xì)節(jié)數(shù)據(jù)、以多維數(shù)據(jù)以關(guān)系數(shù)據(jù)庫存放細(xì)節(jié)數(shù)據(jù)、以多維數(shù)據(jù)庫存放綜合數(shù)據(jù)庫存放綜

25、合數(shù)據(jù) 基于關(guān)系數(shù)據(jù)庫的基于關(guān)系數(shù)據(jù)庫的OLAPROLAP 以二維表與多維聯(lián)系來表達(dá)多維數(shù)據(jù)綜以二維表與多維聯(lián)系來表達(dá)多維數(shù)據(jù)綜合數(shù)據(jù)）合數(shù)據(jù)） 星型結(jié)構(gòu)星型結(jié)構(gòu) 事實(shí)表，存儲(chǔ)事實(shí)的量及各維的碼值事實(shí)表，存儲(chǔ)事實(shí)的量及各維的碼值BCNF） 維表，對(duì)每一個(gè)維，至少有一個(gè)表用來保維表，對(duì)每一個(gè)維，至少有一個(gè)表用來保存該維的元數(shù)據(jù)多層次、冗余）存該維的元數(shù)據(jù)多層次、冗余） 事實(shí)表通過外鍵與每個(gè)維表相聯(lián)系事實(shí)表通過外鍵與每個(gè)維表相聯(lián)系 雪花、星座、雪暴雪花、星座、雪暴 模擬多維方式顯示察看數(shù)據(jù)模擬多維方式顯示察看數(shù)據(jù) MOLAP與與ROLAP MOLAP 計(jì)算速度較快計(jì)算速度較快 支持的數(shù)據(jù)容量較小支持的數(shù)據(jù)容量較小 缺乏細(xì)節(jié)數(shù)據(jù)的缺乏細(xì)節(jié)數(shù)據(jù)的OLAP ROLAP 結(jié)構(gòu)較復(fù)雜結(jié)構(gòu)較復(fù)雜 以關(guān)系模擬多維以關(guān)系模擬多維 支持適當(dāng)細(xì)節(jié)的支持適當(dāng)細(xì)節(jié)的OLAP 較成熟較成熟 HOLAP是以上兩種的綜合是以上兩種的綜合 數(shù)據(jù)挖掘數(shù)據(jù)挖掘Data Mining） 探測(cè)型的數(shù)據(jù)分析探測(cè)型的數(shù)據(jù)分析 發(fā)現(xiàn)信息、發(fā)現(xiàn)知識(shí)發(fā)現(xiàn)信息、發(fā)現(xiàn)知識(shí) 基于人工智能、機(jī)器學(xué)習(xí)、統(tǒng)計(jì)學(xué)基于人工智能、機(jī)器學(xué)習(xí)、統(tǒng)計(jì)學(xué) 由計(jì)算機(jī)自動(dòng)智能地分析數(shù)據(jù)，獲取信息，由計(jì)算機(jī)自動(dòng)智能地分析數(shù)據(jù)，獲取