2023學(xué)年完整公開(kāi)課版Hive的執(zhí)行過(guò)程_第1頁(yè)
2023學(xué)年完整公開(kāi)課版Hive的執(zhí)行過(guò)程_第2頁(yè)
2023學(xué)年完整公開(kāi)課版Hive的執(zhí)行過(guò)程_第3頁(yè)
2023學(xué)年完整公開(kāi)課版Hive的執(zhí)行過(guò)程_第4頁(yè)
2023學(xué)年完整公開(kāi)課版Hive的執(zhí)行過(guò)程_第5頁(yè)
已閱讀5頁(yè)，還剩9頁(yè)未讀， 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說(shuō)明：本文檔由用戶提供并上傳，收益歸屬內(nèi)容提供方，若內(nèi)容存在侵權(quán)，請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡(jiǎn)介

Hive的執(zhí)行過(guò)程目錄CONTENTS1Hive的執(zhí)行過(guò)程概述2Hive的執(zhí)行過(guò)程詳解Hive的執(zhí)行過(guò)程概述PART0101Hive的執(zhí)行過(guò)程概述Hive的執(zhí)行過(guò)程如下圖：Hive的執(zhí)行過(guò)程概述（1）Hive將HQL轉(zhuǎn)換成一組操作符（Operator）。

比如GroupByOperator,JoinOperator等。（2）操作符Operator是Hive的最小處理單元。（3）每個(gè)操作符代表一個(gè)HDFS操作或者M(jìn)apReduce作業(yè)。（4）Hive通過(guò)ExecMapper和ExecReducer執(zhí)行MapReduce程序。

執(zhí)行模式有本地模式和分布式兩種模式。Hive的執(zhí)行過(guò)程概述Hive操作符列表，如下圖：Hive的執(zhí)行過(guò)程概述Hive編譯器的工作職責(zé)：（1）Parser：將HQL語(yǔ)句轉(zhuǎn)換成抽象語(yǔ)法樹(shù)（AST：AbstractSyntaxTree）；（2）SemanticAnalyzer：將抽象語(yǔ)法樹(shù)轉(zhuǎn)換成查詢塊；（3）LogicPlanGenerator：將查詢塊轉(zhuǎn)換成邏輯查詢計(jì)劃；（4）LogicOptimizer：重寫(xiě)邏輯查詢計(jì)劃，優(yōu)化邏輯執(zhí)行計(jì)劃；（5）PhysicalPlanGernerator：將邏輯計(jì)劃轉(zhuǎn)化成物理計(jì)劃（MapReduceJobs）；（6）PhysicalOptimizer：選擇最佳的Join策略，優(yōu)化物理執(zhí)行計(jì)劃；Hive的執(zhí)行過(guò)程概述優(yōu)化器類型：Hive的執(zhí)行過(guò)程詳解PART0202Hive的執(zhí)行過(guò)程詳解

Hive實(shí)現(xiàn)過(guò)程描述：Hive的執(zhí)行過(guò)程詳解

Hive具體實(shí)現(xiàn)過(guò)程：Hive的執(zhí)行過(guò)程詳解

H

溫馨提示

  • 1. 本站所有資源如無(wú)特殊說(shuō)明，都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等，如果需要附件，請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙，網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽，若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間，僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理，對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯，并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容，請(qǐng)與我們聯(lián)系，我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

最新文檔

評(píng)論

0/150

提交評(píng)論