版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)
文檔簡介
Hive架構(gòu)介紹1.掌握Hive組件介紹
2.掌握Hive架構(gòu)介紹
1.
Hive組件介紹
2.
Hive架構(gòu)介紹
Hive的體系結(jié)構(gòu)可以分為以下幾部分:(1)用戶接口主要有三個(2)Hive將元數(shù)據(jù)存儲在數(shù)據(jù)庫中(3)解釋器、編譯器、優(yōu)化器完成HQL查詢語句從詞法分析、語法分析、編譯、優(yōu)化以及查詢計劃的生成(4)Hive的數(shù)據(jù)存儲在HDFS中,大部分的查詢、計算由MapReduce完成Hive基本架構(gòu)Hive組件介紹(一)服務(wù)端組件:Driver組件:包括編譯器、優(yōu)化器、執(zhí)行器,作用是將我們寫的HQL進行解析、編譯優(yōu)化、生成執(zhí)行計劃,然后調(diào)用底層的計算框架metastore組件:元數(shù)據(jù)服務(wù)組件,負責(zé)存儲hive的元數(shù)據(jù),hive的元數(shù)據(jù)存儲在關(guān)系型數(shù)據(jù)庫中thrift服務(wù):用來進行可擴展且跨語言服務(wù)的開發(fā),hive集成該服務(wù),能讓不同的開發(fā)語言調(diào)用hive接口讀Hive組件介紹(二)客戶端組件:CLI:命令行接口thrift客戶端:hive的許多客戶端接口是建立在thrift客戶端的基礎(chǔ)之上,包括JDBC、ODBCWEBGUI:可以通過瀏覽器的方式訪問hive提供的服務(wù)接口,該接口對應(yīng)hive的hwi(hivewebinterface)Hive架構(gòu)介紹tb01:name,sex,moneylocation
…Select
name,
sum(money)
as
moneyFrom
tb01
group
by
name張三,男,10李四,男,5翠花,女,20張三,男,100李四,男,20...Hive架構(gòu)優(yōu)點操作接口采用類SQL語法避免了去寫MapReduce統(tǒng)一的元數(shù)據(jù)管理易擴展數(shù)據(jù)的離線處理Hive的執(zhí)行延遲比較高
Hive優(yōu)勢在于處理大數(shù)據(jù)1.
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 如何寫車輛抵押借款合同
- 白酒購銷合同模板
- 企業(yè)單位安全合同
- 短期借款協(xié)議書樣本
- 模具訂購合同范本
- 厚棉被購銷合同
- 簡單易懂的合同補充協(xié)議模板
- 軟件功能增強合同
- 人行道鋪設(shè)勞務(wù)分包合同范本
- 勞動合同補充及變更
- 第一章 機械運動單元檢測試題 2024-2025學(xué)年人教版八年級物理上冊
- 新冠試劑過期處置合同
- 2024-2030年中國耳機和耳機行業(yè)市場發(fā)展趨勢與前景展望戰(zhàn)略分析報告
- 2023年四川省綿陽市游仙區(qū)東辰國際學(xué)校小升初數(shù)學(xué)試卷
- 2024年中國誠通控股集團限公司總部公開招聘(高頻重點提升專題訓(xùn)練)共500題附帶答案詳解
- QCT513-2023商用車輛前軸總成
- 2023年貴州劍河富民村鎮(zhèn)銀行夏季招聘考試真題
- (“感術(shù)”行動)實施方案
- 滬教版牛津英語-9A-U1(Ancient-Greece)-測驗卷
- 小學(xué)數(shù)學(xué)跨學(xué)科整合課件與其他學(xué)科知識相結(jié)合
- 2024國家公務(wù)員考試時事政治必考題庫(滿分必刷)
評論
0/150
提交評論