數(shù)據(jù)庫原理與應用第4章-03-HBase集群管理課件

1、HBase原理實現(xiàn)NoSQL數(shù)據(jù)庫原理與應用第四章0 3HBase集群管理3.1 運維管理-移除RegionServer節(jié)點大數(shù)據(jù)存儲與管理當集群由于升級或更換硬件等原因需要在單臺機器上停止守護進程時，需要確保集群的其他部分正常工作，并且確保從客戶端應用來看停用時間最短。滿足此條件必須把這臺RegionServer服務的Region主動轉(zhuǎn)移到其他RegionServer上，而不是讓HBase被動地對此RegionServer的下線進行反應。3.1 運維管理-增加RegionServer節(jié)點大數(shù)據(jù)存儲與管理隨著應用系統(tǒng)需求的增長，整個HBase集群需要進行擴展，這時就需要往HBase集群中增加一

2、個節(jié)點。添加一個新的RegionServer是運行集群的常用操作，首先需要修改conf目錄下的regionserver文件，然后將此文件復制到集群中所有機器上，這樣可以使用啟動腳本就能夠添加新的服務器。3.1 運維管理-增加Master備份節(jié)點大數(shù)據(jù)存儲與管理為了增加HBase集群的可用性，可以為HBase增加多個備份Master。當Master掛掉后，備份Master可以自動接管整個HBase的集群。3.2 數(shù)據(jù)管理數(shù)據(jù)導出大數(shù)據(jù)存儲與管理在HBase安裝目錄的bin目錄下執(zhí)行hbase org.apache.hadoop.hbase.mapreduce.Export命令，具體參數(shù)如下：ro

3、otlocalhost bin# ./hbase org.apache.hadoop.hbase.mapreduce.ExportERROR: Wrong number of arguments: 0Usage: Export -D * regex pattern or Prefix to filter3.2 數(shù)據(jù)管理數(shù)據(jù)導出大數(shù)據(jù)存儲與管理名字描述tablename準備導出的表名。outputdir導出數(shù)據(jù)存放在HDFS中的路徑version每列備份的版本數(shù)量，默認值為1starttime開始時間entime掃描所使用的時間范圍的結(jié)束時間，regexp/prefix以開始表示該選項被當作表達

4、式類匹配行鍵，否則被當作行鍵的前綴表4 Export參數(shù) 3.2 數(shù)據(jù)管理數(shù)據(jù)導入大數(shù)據(jù)存儲與管理在bin目錄下執(zhí)行hbase org.apache.hadoop.hbase.mapreduce.Import命令，具體參數(shù)如下：rootlocalhost bin# ./hbase org.apache.hadoop.hbase.mapreduce.ImportERROR: Wrong number of arguments: 0Usage: Import options 3.2 數(shù)據(jù)管理數(shù)據(jù)遷移大數(shù)據(jù)存儲與管理同樣在bin目錄下運行以下命令：具體參數(shù)如下：rootlocalhost#./hba

5、se org.apache.hadoop.hbase.mapreduce.CopyTable Usage: CopyTable general options -starttime=X -endtime=Y -=NEW -peer.adr=ADR 3.3 故障管理大數(shù)據(jù)存儲與管理HBase自帶的工具除了上一節(jié)的提到的數(shù)據(jù)移動外還有很多調(diào)試、分析等工具，在HBase的bin目錄下執(zhí)行HBase命令，會列出它所包含的工具。rootlocalhost bin# ./hbaseUsage: hbase 3.3 故障管理-文件檢測修復工具hbck大數(shù)據(jù)存儲與管理hbck工具用于HBase

6、底層文件系統(tǒng)的檢測和修復，它可以檢測Master、RegionServer內(nèi)存中的狀態(tài)以及HDFS上面數(shù)據(jù)的狀態(tài)之間的一致性，完整性等。執(zhí)行hbck命令使用-h參數(shù)來看下hbck能提供那些功能。rootlocalhost bin# ./hbase hbck hUsage: fsck opts only tables3.3 故障管理-文件查看工具hfile大數(shù)據(jù)存儲與管理HBase提供了查看文件格式HFile的內(nèi)容，它所使用的命令是hfile，具體參數(shù)如下：rootlocalhost bin# ./hbase hfileusage: HFile -a -b -e -f | -r -h -k -m -p -s -v -w 比如像查看文件的內(nèi)容，可以使用