《大數(shù)據(jù)存儲(chǔ)技術(shù)與應(yīng)用》 課件 項(xiàng)目四-任務(wù)一 走進(jìn)結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)

《大數(shù)據(jù)存儲(chǔ)技術(shù)與應(yīng)用》實(shí)戰(zhàn)篇大數(shù)據(jù)存儲(chǔ)技術(shù)與應(yīng)用1970年，IBM的研究員（“關(guān)系數(shù)據(jù)庫(kù)之父”埃德加·弗蘭克·科德（E.F.Codd））發(fā)表了題為“ARelationalModelofDataforLargeSharedDataBanks（大型共享數(shù)據(jù)庫(kù)的關(guān)系模型）”的論文，首次提出了數(shù)據(jù)庫(kù)的關(guān)系模型。篇章引入章節(jié)任務(wù)大數(shù)據(jù)存儲(chǔ)技術(shù)與應(yīng)用項(xiàng)目四深入結(jié)構(gòu)化存儲(chǔ)任務(wù)一走進(jìn)結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)Swift的特性？Swift的應(yīng)用工作場(chǎng)景？CAP定義？CAP理論？回顧任務(wù)引入-MPP技術(shù)Greenplum。該公司成立于2003年，2006年推出了首款產(chǎn)品，其主營(yíng)業(yè)務(wù)關(guān)注在數(shù)據(jù)倉(cāng)庫(kù)和商業(yè)智能方面，GreenplumDW/BI軟件可以在虛擬化x86服務(wù)器上運(yùn)行無(wú)分享（shared-nothing）的大規(guī)模并行處理（MPP）架構(gòu)。任務(wù)描述:本節(jié)任務(wù)從認(rèn)識(shí)結(jié)構(gòu)化數(shù)據(jù)、關(guān)系數(shù)據(jù)庫(kù)和結(jié)構(gòu)化查詢語(yǔ)言SQL開始。任務(wù)教學(xué)目標(biāo)：領(lǐng)會(huì)關(guān)系數(shù)據(jù)庫(kù)理論基礎(chǔ)。掌握關(guān)系數(shù)據(jù)庫(kù)模型設(shè)計(jì)。應(yīng)用結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)。任務(wù)概要教學(xué)內(nèi)容結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)介紹結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)技術(shù)路線一二結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)介紹知識(shí)點(diǎn)一

安裝依賴（53&54）結(jié)構(gòu)化數(shù)據(jù)是指可以使用關(guān)系型數(shù)據(jù)庫(kù)表示和存儲(chǔ)，表現(xiàn)為二維形式的數(shù)據(jù)。通常，采用關(guān)系數(shù)據(jù)庫(kù)查詢語(yǔ)言SQL來(lái)操作結(jié)構(gòu)化數(shù)據(jù)。（一）結(jié)構(gòu)化數(shù)據(jù)典型的結(jié)構(gòu)化數(shù)據(jù)包括：身份證號(hào)碼、日期、數(shù)量、金額、地址、電話等。主要應(yīng)用領(lǐng)域：教務(wù)系統(tǒng)、學(xué)工系統(tǒng)、CRM系統(tǒng)、一卡通系統(tǒng)等。結(jié)構(gòu)化數(shù)據(jù)通常以行為單位，一行數(shù)據(jù)表示一個(gè)實(shí)體的信息，每一行數(shù)據(jù)的屬性是相同的。

安裝依賴（53&54）建立在E-R（Entity-Relationship，實(shí)體-關(guān)系模型）基礎(chǔ)上的數(shù)據(jù)庫(kù)，典型的關(guān)系數(shù)據(jù)庫(kù)如：PostgreSQL、MySQL等。（二）關(guān)系數(shù)據(jù)庫(kù)

安裝依賴（53&54）結(jié)構(gòu)化查詢語(yǔ)言(StructuredQueryLanguage)簡(jiǎn)稱SQL，SQL從功能上可以分為3部分：DDL（DataDefinitionLanguage，數(shù)據(jù)定義語(yǔ)言）、DML（datamanipulationlanguage，數(shù)據(jù)操縱語(yǔ)言）DCL（DataControlLanguage，數(shù)據(jù)控制語(yǔ)言）。（三）結(jié)構(gòu)化查詢語(yǔ)言結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)技術(shù)路線知識(shí)點(diǎn)一

安裝依賴（53&54）大數(shù)據(jù)結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)技術(shù)路線有三種：采用關(guān)系數(shù)據(jù)庫(kù)存儲(chǔ)架構(gòu)；采用MPP并行數(shù)據(jù)存儲(chǔ)架構(gòu)；基于Hadoop的技術(shù)擴(kuò)展和封裝。國(guó)內(nèi)已經(jīng)廣泛應(yīng)用于行業(yè)各種數(shù)據(jù)庫(kù)，鎖定行業(yè)應(yīng)用特性，提供數(shù)據(jù)存儲(chǔ)整體解決方案，如華為GaussDB數(shù)據(jù)庫(kù)、中興GoldenDB分布式數(shù)據(jù)庫(kù)、南大通用GBase數(shù)據(jù)庫(kù)、TiDB數(shù)據(jù)庫(kù)、武漢達(dá)夢(mèng)數(shù)據(jù)庫(kù)、人大金倉(cāng)KingbaseES數(shù)據(jù)庫(kù)等。結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)技術(shù)路線

安裝依賴（53&54）1.關(guān)系數(shù)據(jù)庫(kù)存儲(chǔ)架構(gòu)采用關(guān)系數(shù)據(jù)庫(kù)存儲(chǔ)架構(gòu)技術(shù)來(lái)存儲(chǔ)結(jié)構(gòu)化數(shù)據(jù)，通過(guò)對(duì)關(guān)系數(shù)據(jù)庫(kù)系統(tǒng)的優(yōu)化來(lái)解決大數(shù)據(jù)工程項(xiàng)目中的海量數(shù)據(jù)的存儲(chǔ)和大量用戶的并行訪問(wèn)問(wèn)題。如：對(duì)開源關(guān)系數(shù)據(jù)庫(kù)MySQL進(jìn)行優(yōu)化，構(gòu)建MySQL數(shù)據(jù)庫(kù)集群來(lái)存儲(chǔ)海量結(jié)構(gòu)化數(shù)據(jù)；部署開源關(guān)系對(duì)象數(shù)據(jù)庫(kù)PostgreSQL系統(tǒng)，構(gòu)建海量結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)系統(tǒng)；結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)技術(shù)路線賴（53&54）2.MPP并行數(shù)據(jù)存儲(chǔ)架構(gòu)MPP（也被稱為SharedNothing架構(gòu)），指有兩個(gè)或者多個(gè)處理器協(xié)同執(zhí)行一個(gè)操作的并行系統(tǒng)，每一個(gè)處理器都有其自己的內(nèi)存、操作系統(tǒng)和磁盤。結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)技術(shù)路線

安裝依賴（53&54）Hadoop開源大數(shù)據(jù)技術(shù)，擴(kuò)展、封裝，衍生出適合特定應(yīng)用場(chǎng)景的存儲(chǔ)系統(tǒng)和存儲(chǔ)產(chǎn)品。Hadoop技術(shù)擴(kuò)展和封裝任務(wù)小結(jié)通過(guò)本節(jié)任務(wù)的學(xué)習(xí)，我們認(rèn)識(shí)了什么是結(jié)構(gòu)化數(shù)據(jù)、關(guān)系數(shù)據(jù)庫(kù)和結(jié)構(gòu)化查詢語(yǔ)言。對(duì)結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)技術(shù)路線進(jìn)行了系統(tǒng)的探討和學(xué)習(xí)。拓展訓(xùn)練PostgreSQL獨(dú)立學(xué)習(xí)起源于加利福尼亞大學(xué)伯克利分校的PostgreSQL作為世界上最先進(jìn)的開源數(shù)據(jù)庫(kù)，已經(jīng)有30多年的歷史，并且以無(wú)與倫比的開發(fā)速度繼續(xù)發(fā)展。PostgreSQL的成熟功能不僅與頂級(jí)商業(yè)數(shù)據(jù)庫(kù)系統(tǒng)匹配，而且在高級(jí)數(shù)據(jù)庫(kù)功能、可擴(kuò)展