版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
運(yùn)維手冊(cè)PAGE\*romaniii運(yùn)維手冊(cè)PAGE\*romaniii大數(shù)據(jù)平臺(tái)運(yùn)維手冊(cè)目錄簡(jiǎn)介 1大數(shù)據(jù)平臺(tái)介紹 1大數(shù)據(jù)平臺(tái)Manager介紹 2使用前的準(zhǔn)備 3客戶端硬件配置 3軟件環(huán)境要求 3支持的瀏覽器 3系統(tǒng)檢查 4管理員服務(wù)器IP,端口及賬號(hào)權(quán)限檢查 4管理員服務(wù)器空間檢查 4開始集群管理 5TDHManager的基本操作 5啟動(dòng)和停止TDHManager 5終止TDHManager進(jìn)程 6重啟大數(shù)據(jù)平臺(tái)-manager和agent 6TDHManager登入和登出 6TDHManager語言選擇 7TDHManager用戶信息登記和更新 8創(chuàng)建集群服務(wù) 10創(chuàng)建集群 10集群服務(wù)的添加、刪除 13管理菜單 17節(jié)點(diǎn)管理 17添加節(jié)點(diǎn) 18用戶管理 22管理用戶 23管理用戶組 33管理用戶角色 35日志查詢 43審計(jì)查詢 44NTP管理 45許可證管理 46Guardian服務(wù)監(jiān)控 48Guardian服務(wù)的角色 49Guardian服務(wù)的配置 50Guardian服務(wù)操作的監(jiān)控 51備份與恢復(fù) 51Zookeeper的運(yùn)維 53ZooKeeper服務(wù)的管理 53啟動(dòng)、停止、刪除Zookeeper服務(wù) 53配置服務(wù) 54ZooKeeper服務(wù)的監(jiān)控 54CPU使用監(jiān)控 54ZooKeeper概要信息監(jiān)控 55ZooKeeper服務(wù)歷史監(jiān)控 56ZooKeeper節(jié)點(diǎn)監(jiān)控 56ZooKeeper統(tǒng)計(jì)信息監(jiān)控 56ZooKeeper服務(wù)的配置 58配置ZooKeeper的角色 58修改ZooKeeper的配置 62Zookeeper的安全配置 64查看ZooKeeper操作 64HDFS的運(yùn)維 66HDFS服務(wù)的管理 66啟動(dòng)、停止、刪除HDFS服務(wù) 66配置服務(wù) 67HDFS服務(wù)的監(jiān)控 67CPU使用監(jiān)控 67HDFS概要信息監(jiān)控 68HDFS服務(wù)歷史監(jiān)控 69HDFS節(jié)點(diǎn)監(jiān)控 69HDFS統(tǒng)計(jì)信息監(jiān)控 70HDFS服務(wù)的配置 71配置HDFS的角色 71修改HDFS的配置 73HDFS的安全配置 75查看HDFS操作 76HDFS的維護(hù) 77YARN的運(yùn)維 79YARN服務(wù)的管理 79啟動(dòng)、停止、刪除YARN服務(wù) 79配置服務(wù) 80YARN服務(wù)的監(jiān)控 80CPU使用監(jiān)控 80YARN概要信息監(jiān)控 81YARN服務(wù)歷史監(jiān)控 81YARN節(jié)點(diǎn)監(jiān)控 82YARN統(tǒng)計(jì)信息監(jiān)控 82YARN服務(wù)的配置 83配置YARN的角色 83修改YARN的配置 87YARN的資源管理 88YARN的安全配置 89查看YARN操作 90Hyperbase的運(yùn)維 92Hyperbase服務(wù)的管理 92啟動(dòng)、停止、刪除Hyperbase服務(wù) 92配置服務(wù) 93Hyperbase服務(wù)的監(jiān)控 93CPU使用監(jiān)控 93Hyperbase概要信息監(jiān)控 94Hyperbase服務(wù)歷史監(jiān)控 94Hyperbase節(jié)點(diǎn)監(jiān)控 94Hyperbase統(tǒng)計(jì)信息監(jiān)控 95Hyperbase服務(wù)的配置 95配置Hyperbase的角色 95修改Hyperbase的配置 98Hyperbase的安全配置 100查看Hyperbase操作 101Discover的運(yùn)維 102Discover服務(wù)的管理 102啟動(dòng)、停止、刪除Discover服務(wù) 102配置服務(wù) 103Discover服務(wù)的監(jiān)控 103CPU使用監(jiān)控 103Discover概要信息監(jiān)控 104Discover服務(wù)歷史監(jiān)控 105Discover節(jié)點(diǎn)監(jiān)控 105Discover統(tǒng)計(jì)信息監(jiān)控 105Discover服務(wù)的配置 106配置Discover的角色 106修改Discover的配置 107Discover的資源分配 109Discover的安全配置 110查看Discover操作 111InceptorSQL的運(yùn)維 112InceptorSQL服務(wù)的管理 112啟動(dòng)、停止、刪除InceptorSQL服務(wù) 112配置服務(wù) 113InceptorSQL服務(wù)的監(jiān)控 113CPU使用監(jiān)控 113InceptorSQL概要信息監(jiān)控 114InceptorSQL服務(wù)歷史監(jiān)控 114InceptorSQL節(jié)點(diǎn)監(jiān)控 114InceptorSQL統(tǒng)計(jì)信息監(jiān)控 115InceptorSQL服務(wù)的配置 115配置InceptorSQL的角色 115修改InceptorSQL的配置 117InceptorSQL的資源分配 118InceptorSQL的安全配置 119查看InceptorSQL操作 119查看Holodesk 120InceptorSQL客戶端的下載 120Stream的運(yùn)維 122Stream服務(wù)的管理 122啟動(dòng)、停止、刪除Stream服務(wù) 122配置服務(wù) 123Stream服務(wù)的監(jiān)控 123CPU使用監(jiān)控 123Stream概要信息監(jiān)控 124Stream服務(wù)歷史監(jiān)控 124Stream節(jié)點(diǎn)監(jiān)控 125Stream統(tǒng)計(jì)信息監(jiān)控 125Stream服務(wù)的配置 126配置Stream的角色 126修改Stream的配置 127Stream的資源分配 129查看Stream操作 129Kafka的運(yùn)維 130Kafka服務(wù)的管理 130啟動(dòng)、停止、刪除Kafka服務(wù) 130配置服務(wù) 131Kafka服務(wù)的監(jiān)控 131CPU使用監(jiān)控 131Kafka概要信息監(jiān)控 132Kafka服務(wù)歷史監(jiān)控 132Kafka節(jié)點(diǎn)監(jiān)控 132Kafka統(tǒng)計(jì)信息監(jiān)控 133Kafka服務(wù)的配置 134配置Kafka的角色 134修改Kafka的配置 135Kafka的安全配置 136查看Kafka操作 137Oozie的運(yùn)維 138Oozie服務(wù)的管理 138啟動(dòng)、停止、刪除Oozie服務(wù) 138配置服務(wù) 139Oozie服務(wù)的配置 139配置Oozie的角色 139修改Oozie的配置 140查看Oozie操作 141Sqoop的運(yùn)維 142Sqoop服務(wù)的管理 142啟動(dòng)、停止、刪除Sqoop服務(wù) 142配置服務(wù) 143Sqoop服務(wù)的配置 143配置Sqoop的角色 143修改Sqoop的配置 144查看Sqoop操作 145HUE的運(yùn)維 146HUE服務(wù)的管理 146啟動(dòng)、停止、刪除HUE服務(wù) 146配置服務(wù) 147HUE服務(wù)的配置 147配置HUE的角色 147修改HUE的配置 148查看HUE操作 150Elasticsearch的運(yùn)維 151Elasticsearch服務(wù)的管理 151啟動(dòng)、停止、刪除Elasticsearch服務(wù) 151配置服務(wù) 152Elasticsearch服務(wù)的配置 152配置Elasticsearch的角色 152修改Elasticsearch的配置 153查看Elasticsearch操作 154系統(tǒng)監(jiān)控 156TDHManager狀態(tài)監(jiān)控 156TDHManager熱點(diǎn)圖監(jiān)控 156TDHManager警報(bào) 158TDHManager操作 159升級(jí)工具的使用 160升級(jí)前的準(zhǔn)備 160開始升級(jí) 165升級(jí)失敗的回滾 167升級(jí)常見錯(cuò)誤 167運(yùn)維基本說明 168Zookeeper 16821.1.1.日志 16821.1.2.啟動(dòng)停止 168HDFS 16821.2.1.日志 16821.2.2.啟動(dòng)停止 168YARN 16921.3.1.日志 16921.3.2.啟動(dòng)停止 169Hyperbase 17021.4.1.日志 17021.4.2.啟動(dòng)停止 170Inceptor 17021.5.1.日志 17021.5.2.啟動(dòng)停止 170術(shù)語表 173范例清單創(chuàng)建用戶 24授予用戶Alice在InceptorSQL1中創(chuàng)建數(shù)據(jù)庫的權(quán)限 28授予用戶Alice在InceptorSQL1中對(duì)某個(gè)數(shù)據(jù)庫的權(quán)限 29授予用戶Alice在InceptorSQL1中對(duì)某張表的權(quán)限 31添加用戶組 34創(chuàng)建角色 36授予角色sales在InceptorSQL1中創(chuàng)建數(shù)據(jù)庫的權(quán)限 40授予角色sales在InceptorSQL1中對(duì)某個(gè)數(shù)據(jù)庫的權(quán)限 40授予角色sales在InceptorSQL1中對(duì)某張表的權(quán)限 421.簡(jiǎn)1.簡(jiǎn)介運(yùn)維手冊(cè)PAGE174運(yùn)維手冊(cè)PAGE174簡(jiǎn)介大數(shù)據(jù)平臺(tái)介紹大數(shù)據(jù)平臺(tái)(簡(jiǎn)稱TDH)是國內(nèi)首個(gè)全面支持Spark和SQL2003語言解析的Hadoop商業(yè)發(fā)行版,也是國內(nèi)落地案例最多的商業(yè)版本,是國內(nèi)外領(lǐng)先的高性能平臺(tái),比開源基于MapReduce計(jì)算框架的版本快10x~100x倍。TDH過內(nèi)存計(jì)算、高效索引、執(zhí)行優(yōu)化和高度容錯(cuò)的技術(shù),使得一個(gè)平臺(tái)能夠處理GB到PB并且在每個(gè)數(shù)量級(jí)上,都能比現(xiàn)有技術(shù)提供更快的性能;企業(yè)客戶不再需要混合架構(gòu),TDH可以伴隨企業(yè)客戶的數(shù)據(jù)增長(zhǎng),動(dòng)態(tài)不停機(jī)擴(kuò)容,避免MPP或混合架構(gòu)數(shù)據(jù)遷移的棘手問題。星環(huán)的大數(shù)據(jù)平臺(tái)TDH包含五個(gè)組成部分:大數(shù)據(jù)平臺(tái)Hadoop企業(yè)版,大數(shù)據(jù)平臺(tái)Inceptor布式內(nèi)存分析引擎,大數(shù)據(jù)平臺(tái)Hyperbase分布式實(shí)時(shí)在線數(shù)據(jù)處理引擎,大數(shù)據(jù)平臺(tái)流處理引擎和大數(shù)據(jù)平臺(tái)Discover機(jī)器學(xué)習(xí)引擎,五個(gè)產(chǎn)品組件構(gòu)成了完整的大數(shù)據(jù)平臺(tái)。在統(tǒng)一的分布式存儲(chǔ)之上數(shù)據(jù)平臺(tái)上通過大數(shù)據(jù)平臺(tái)YARN提供統(tǒng)一的資源管理調(diào)度,結(jié)合LDAP與Kerberos提供完備的權(quán)限管理控制,不同的部門以及使用租戶可以按需創(chuàng)建計(jì)算集群訪問其授權(quán)數(shù)據(jù),包括基于Spark計(jì)算框架的SQL類統(tǒng)計(jì)分析應(yīng)用與數(shù)據(jù)挖掘類應(yīng)用,或者基于MapReduce計(jì)算框架的應(yīng)用。同時(shí),平臺(tái)通過使用Hyperbase結(jié)合Inceptor,為用戶提供基于SQL的高并發(fā)的查詢以及分析能力。在數(shù)據(jù)導(dǎo)入與交換方面,數(shù)據(jù)平臺(tái)提供多樣的數(shù)據(jù)導(dǎo)入與交換形式,包括Flume提供海量數(shù)據(jù)文件的聚合匯總到HDFS的功能,F(xiàn)TPOverHDFS提供文件通過FTP傳入HDFS的通道,Sqoop提供與關(guān)系型數(shù)據(jù)庫的數(shù)據(jù)交換以及Kafka消息隊(duì)列集群接收實(shí)時(shí)流數(shù)據(jù)。此外,TDH數(shù)據(jù)平臺(tái)提供實(shí)時(shí)的流處理能力,通過消息隊(duì)列Kafka接收實(shí)時(shí)數(shù)據(jù)流,做到數(shù)據(jù)不丟不重,通過大數(shù)據(jù)平臺(tái)Stream基于SparkStreaming提供類似與批處理系統(tǒng)的計(jì)算能力、健壯性、擴(kuò)展性的同時(shí),將數(shù)據(jù)時(shí)延降低至秒級(jí)甚至毫秒級(jí)。大數(shù)據(jù)平臺(tái)Manager介紹大數(shù)據(jù)平臺(tái)Manager是星環(huán)信息技術(shù)有限公司為TDH開發(fā)的平臺(tái)管理軟件。通過大數(shù)據(jù)平臺(tái)Manager,您可以通過瀏覽器來安裝、部署、監(jiān)控和管理整個(gè)TDH集群。大數(shù)據(jù)平臺(tái)Manager賦予大數(shù)據(jù)平臺(tái)運(yùn)維人員經(jīng)營者企業(yè)級(jí)標(biāo)準(zhǔn)的平臺(tái)管理能力,經(jīng)營者可以藉此提高平臺(tái)運(yùn)維性能,提高服務(wù)質(zhì)量并降低運(yùn)營成本。運(yùn)維人員可以輕松地部署和集中操作整個(gè)的TDH集群。應(yīng)用程序自動(dòng)執(zhí)行安裝過程中,部署時(shí)間從幾周減少到幾分鐘,大數(shù)據(jù)平臺(tái)Manager可以為您提供群集范圍內(nèi)的實(shí)時(shí)視圖的節(jié)點(diǎn)運(yùn)行和服務(wù);提供了一個(gè)單一節(jié)點(diǎn)的中央控制臺(tái);制定配置的更改和全范圍的報(bào)告和診斷工具來幫助您優(yōu)化性能和利用率;可以實(shí)時(shí)報(bào)警異常情況。新一代的大數(shù)據(jù)平臺(tái)Manager采用了扁平化風(fēng)格和可視化界面來展示TDH集群服務(wù)狀態(tài)個(gè)指標(biāo)等。2.使用前的準(zhǔn)備2.使用前的準(zhǔn)備使用前的準(zhǔn)備大數(shù)據(jù)平臺(tái)Manager軟件采用瀏覽器的方式管理整個(gè)集群??蛻舳塑浻布枰韵屡渲谩?蛻舳擞布渲每蛻舳薖C必須具備以下最低配置硬件1顆2核心x86指令集CPU的PC臺(tái)式機(jī)或筆記本2GB以上內(nèi)存1個(gè)300G以上的硬盤1個(gè)千兆網(wǎng)卡或無線網(wǎng)卡軟件環(huán)境要求客戶端支持以下操作系統(tǒng)。操作系統(tǒng)版本W(wǎng)indowsWindowsXP,Windows7,Windows8oraboveLinuxRedhatorSuseLinuxDesktopversionAppleMacOS10.8.1或以上GoogleChromeOS36.0.x支持的瀏覽器您需要通過網(wǎng)頁瀏覽器使用大數(shù)據(jù)平臺(tái)Manager,管理平臺(tái)支持以下瀏覽器瀏覽器版本GoogleChrome(推薦)36.0.1985.143及以上FireFox36.0及以上AppleSafari7.0.2及以上InternetExplorer(不推薦)不支持3.系統(tǒng)檢查3.系統(tǒng)檢查系統(tǒng)檢查在開始使用TDH集群前,您需要對(duì)您的系統(tǒng)進(jìn)行以下檢查。管理員服務(wù)器IP,端口及賬號(hào)權(quán)限檢查在使用大數(shù)據(jù)平臺(tái)Manager前你需要知道您在安裝TDH過程中所預(yù)設(shè)的大數(shù)據(jù)平臺(tái)ManagerIP地址及端口號(hào),大數(shù)據(jù)平臺(tái)Manager管理員的用戶名及密碼,這些值如下:大數(shù)據(jù)平臺(tái)Manager的IP是您集群管理節(jié)點(diǎn)的IP,默認(rèn)端口是8180。大數(shù)據(jù)平臺(tái)Manager初始的管理員用戶名是admin,密碼是admin。管理員服務(wù)器空間檢查大數(shù)據(jù)平臺(tái)Manager在運(yùn)行過程中會(huì)產(chǎn)生日志和數(shù)據(jù)庫數(shù)據(jù),因此在安裝大數(shù)據(jù)平臺(tái)Manager服務(wù)器需要預(yù)留100GB空間給日志和數(shù)據(jù)庫。4.開始集群管理4.開始集群管理開始集群管理TDHManager是TDH集群圖形化管理應(yīng)用程序。通過TDHManager可視性來控制Hadoop集群。你可以輕松地部署、安裝、監(jiān)控和集中操作整個(gè)的TDH集群。如下所示,TDHManager承載管理控制臺(tái)、Web服務(wù)器和應(yīng)用程序邏輯。它是負(fù)責(zé)安裝軟件、配置、啟動(dòng)和停止服務(wù)以及管理的群集服務(wù)在其運(yùn)行。TDHManager由以下幾部分組成:配置、報(bào)警以及監(jiān)視主機(jī)。(TDH安裝時(shí)候會(huì)自動(dòng)安裝)庫服務(wù)器。例如,TDH可以監(jiān)控守護(hù)進(jìn)程使用不同的邏輯數(shù)據(jù)庫??蛻舳耍篢DHManager會(huì)提供一個(gè)接口,用于客戶端與服務(wù)器進(jìn)行交互。管理控制臺(tái)是基于Web的用戶界面,管理員通過用戶界面管理群集。TDHManager的心跳機(jī)制:TDHManager采用心跳通信機(jī)制同所管理的集群保持通訊。默認(rèn)情況下代理每10秒發(fā)送心跳信號(hào)到管理服務(wù)器。為減少用戶等待時(shí)間,可以在改變狀態(tài)增加頻率。心跳通訊機(jī)制可以定期把集群服務(wù)器的現(xiàn)有狀態(tài)匯報(bào)給TDHManager服務(wù)器。TDH管理服務(wù)器會(huì)匯總哥哥代理的信息整體展現(xiàn)給用戶。如果TDHManager不能收到代理的通訊或某項(xiàng)服務(wù)啟動(dòng)失敗。比如一個(gè)進(jìn)程無法啟動(dòng),服務(wù)器就將標(biāo)記為失敗后的啟動(dòng)命令并在管理界面上報(bào)警。TDHManager的基本操作啟動(dòng)和停止TDHManager登陸大數(shù)據(jù)平臺(tái)-master所在機(jī)器,使用以下命令啟動(dòng)TDHManager。service大數(shù)據(jù)平臺(tái)-managerstart登陸大數(shù)據(jù)平臺(tái)-master所在機(jī)器,使用以下命令停止TDHManager。service大數(shù)據(jù)平臺(tái)-managerstop終止TDHManager進(jìn)程1.查找進(jìn)程號(hào)jps|grep大數(shù)據(jù)平臺(tái)Manager使用kill命令終止TDHManager進(jìn)程重啟大數(shù)據(jù)平臺(tái)-manager和agent重啟大數(shù)據(jù)平臺(tái)-managerservice大數(shù)據(jù)平臺(tái)-managerrestart重啟agentservice大數(shù)據(jù)平臺(tái)-manager-agentrestartTDHManager登入和登出系統(tǒng)的登入(login)打開客戶端瀏覽器(推薦使用googlechrome),輸入安裝好的管理節(jié)點(diǎn)IP或DNS地址,比如0:8180/(0是manager_IP地址,端口號(hào)是8180),輸入用戶名和密碼。初次登入時(shí)候必須以admin的身份登錄,admin的默認(rèn)密碼是admin。首次登陸后,您需要接受大數(shù)據(jù)平臺(tái)最終用戶協(xié)議:系統(tǒng)的登出(logout)點(diǎn)擊用戶界面右上角的登入用戶名顯示下拉式菜單,點(diǎn)擊“登出”菜單登出系統(tǒng)。其操作如下圖。TDHManager語言選擇點(diǎn)擊用戶界面右上角的用戶名顯示下拉菜單,點(diǎn)擊“首選項(xiàng)”進(jìn)入語言選擇界面,如下圖。利用“用戶首選項(xiàng)”界面中的“語言”菜單欄選擇適合的語言,如下圖所示。TDHManager目前支持中文、英文兩種語言。TDHManager用戶信息登記和更新點(diǎn)擊用戶界面右上角的用戶名顯示下拉菜單,點(diǎn)擊“用戶信息”。在“用戶簡(jiǎn)介”頁面中,可以查看當(dāng)前用戶的全名、電子郵件、部門、所屬組、角色等信息,如下圖所示。在用戶簡(jiǎn)介下面有兩個(gè)選項(xiàng):編輯信息、更改密碼。點(diǎn)擊編輯信息,彈出“編輯信息”界面,用戶可在上面編輯用戶名、全名、電子郵件、部門、描述等信息;點(diǎn)擊“更改密碼”,彈出“編輯信息”頁面,用戶可在上面編輯新密碼。如下圖所示。5.創(chuàng)建集群服務(wù)5.創(chuàng)建集群服務(wù)創(chuàng)建集群服務(wù)創(chuàng)建集群在主界面的右邊有一系列隱藏菜單,從上往下分別為“NEW”、集群一、集群二等,點(diǎn)擊“NEW”,進(jìn)入創(chuàng)建集群向?qū)В_始創(chuàng)建集群。您需要給您的集群設(shè)置一個(gè)名字。輸入集群名字后點(diǎn)擊“下一步”。您在這個(gè)頁面添加/刪除/修改機(jī)柜。將鼠標(biāo)移到機(jī)柜的名字和描述上可以對(duì)機(jī)柜的名字和描述進(jìn)行修改。完成后點(diǎn)擊“下一步”。在這一步向您的集群添加節(jié)點(diǎn)。點(diǎn)擊“添加節(jié)點(diǎn)”會(huì)彈出下面窗口:您可以按照提示在窗口中搜索節(jié)點(diǎn):點(diǎn)擊“搜索”,大數(shù)據(jù)平臺(tái)Manager會(huì)搜索您輸入的節(jié)點(diǎn):點(diǎn)擊“繼續(xù)”。并提供SSH訪問權(quán)限并輸入您管理節(jié)點(diǎn)的密碼:輸入密碼后,點(diǎn)擊“完成”。節(jié)點(diǎn)便添加完成。如果我們只有一個(gè)機(jī)柜,大數(shù)據(jù)平臺(tái)Manager自動(dòng)將所有的節(jié)點(diǎn)分配給了默認(rèn)機(jī)柜。如果您有多個(gè)機(jī)柜,您可以點(diǎn)擊“分配機(jī)柜”來分配機(jī)柜。(如果您的集群中有6個(gè)以上的節(jié)點(diǎn),那么您必須配置機(jī)架信息,方便以后的運(yùn)維和服務(wù)配置)集群服務(wù)的添加、刪除將鼠標(biāo)移至主頁面任意集群左側(cè)的“+”號(hào)上,點(diǎn)擊彈出的“+服務(wù)”,進(jìn)入服務(wù)添加向?qū)ы撁妗|c(diǎn)擊“下一步”,選擇想要添加的服務(wù),再點(diǎn)擊“下一步”。為選擇的服務(wù)指定其依賴的服務(wù),點(diǎn)擊“下一步”。為選擇的服務(wù)分配角色,默認(rèn)已按推薦方法配置,修改時(shí)先選左側(cè)菜單的一個(gè)角色,再在中間面板上為該角色分配節(jié)點(diǎn)。結(jié)束后點(diǎn)擊“下一步”。配置選中的服務(wù),包括屬性、基礎(chǔ)參數(shù)、自定義參數(shù),資源分配。結(jié)束后點(diǎn)擊“下一步”。出現(xiàn)“基礎(chǔ)參數(shù)”頁面,核對(duì)無誤后點(diǎn)擊“下一步”,彈出“安裝確認(rèn)”窗口,點(diǎn)擊“確認(rèn)”開始安裝服務(wù)。6.管理菜單6.管理菜單管理菜單將鼠標(biāo)移到大數(shù)據(jù)平臺(tái)Manager頁面上方的上會(huì)出現(xiàn)管理菜單:通過管理菜單您可以對(duì)集群整體進(jìn)行各項(xiàng)管理。本章對(duì)這些管理進(jìn)行詳細(xì)介紹。節(jié)點(diǎn)管理在管理菜單中點(diǎn)擊“節(jié)點(diǎn)”:您將進(jìn)入節(jié)點(diǎn)管理頁面:添加節(jié)點(diǎn)點(diǎn)擊節(jié)點(diǎn)管理頁面右上角的“+”,進(jìn)入“添加節(jié)點(diǎn)”頁面:“添加節(jié)點(diǎn)”頁面有三個(gè)標(biāo)簽頁:選擇集群、編輯機(jī)柜和分配節(jié)點(diǎn)。選擇集群選擇所要操作的集群,點(diǎn)擊下一步。編輯機(jī)柜在“編輯機(jī)柜”標(biāo)簽頁中可以進(jìn)行下面操作:點(diǎn)擊“添加機(jī)柜”可以向集群中添加新機(jī)柜;將鼠標(biāo)移至要?jiǎng)h除的機(jī)柜上,點(diǎn)擊出現(xiàn)的“刪除”按鈕將其刪除;點(diǎn)擊任意機(jī)柜名及其描述,可對(duì)其進(jìn)行編輯。機(jī)柜編輯完成后,點(diǎn)擊“下一步”進(jìn)入“分配節(jié)點(diǎn)”標(biāo)簽頁。分配節(jié)點(diǎn)在分配節(jié)點(diǎn)標(biāo)簽頁可以進(jìn)行下面操作:添加節(jié)點(diǎn)點(diǎn)擊界面上的可以添加新節(jié)點(diǎn),系統(tǒng)會(huì)彈出下面窗口,在這個(gè)窗口可以搜要添加的節(jié)點(diǎn)并提供這些節(jié)點(diǎn)的訪問權(quán)限:在“搜索節(jié)點(diǎn)”標(biāo)簽頁中輸入IP地址搜索您想要添加的節(jié)點(diǎn),如果Manager節(jié)點(diǎn),它的IP會(huì)出現(xiàn)在列表中。完成搜索后點(diǎn)擊“繼續(xù)”,為Manager點(diǎn)的SSH訪問權(quán)限:節(jié)點(diǎn)便添加成功。分配新增節(jié)點(diǎn)的機(jī)柜如果您只有一個(gè)機(jī)柜,Manager自動(dòng)將新增節(jié)點(diǎn)分配給了默認(rèn)機(jī)柜。如果您有多個(gè)機(jī)柜,您可以勾選新增節(jié)點(diǎn),然后點(diǎn)擊來分配機(jī)柜(如果您集群中有6個(gè)以上的節(jié)點(diǎn),那么您必須配置機(jī)架信息,方便以后的運(yùn)維和服務(wù)配置)。刪除新增節(jié)點(diǎn)如果您想要放棄添加新增節(jié)點(diǎn),可以勾選新增節(jié)點(diǎn),然后點(diǎn)擊將其刪除。節(jié)點(diǎn)分配完成后,點(diǎn)擊“下一步”,Manager擊“完成”,節(jié)點(diǎn)便安裝成功:用戶管理點(diǎn)擊管理菜單中的“用戶”:進(jìn)入用戶管理界面:在用戶管理界面中您可以管理用戶、用戶組和用戶角色。管理用戶點(diǎn)擊頁面右側(cè)的,進(jìn)入用戶管理頁面:用戶管理頁面中顯示了當(dāng)前集群和Manager中所有的用戶。在該頁面,您可以進(jìn)行用戶管理操作,包括添加、刪除和編輯用戶。添加用戶
點(diǎn)擊來添加一個(gè)新用戶。Manager會(huì)彈出下面的窗口,您需要在這里輸入新用戶的息:其中,“用戶名”、“用戶名全名”、“用戶組”、“密碼”、“確認(rèn)密碼”和“用戶類型”是必須信息?!坝脩裘睂⒈挥脕淼顷慚anager或者訪問集群服務(wù);“用戶名全名”雖然必須提供,但是目前沒有特殊功能,在未來版本的TDH中會(huì)用于更好地管理集群用戶。“用戶類型”中:管理代表該用戶組將是管理類型的用戶組,管理類型的組只能在Manager中使用。集群集群則代表該用戶組將是集群類型的用戶組,集群類型的用戶組既可以在Manager使用,也可以在TDH集群中使用。例例6.1.創(chuàng)建用戶創(chuàng)建Carol用戶:刪除用戶編輯用戶
在用戶管理界面的用戶列表中勾選一個(gè)用戶,然后點(diǎn)擊便可以將其刪除。在用戶管理界面中點(diǎn)擊一個(gè)用戶,會(huì)進(jìn)入這個(gè)用戶的編輯界面,例如下面是集群用戶Carol的用戶編輯界面:下面是Manager用戶David的用戶編輯界面:在用戶編輯界面中,您可以:修改用戶信息設(shè)置用戶密碼修改用戶所屬組修改用戶角色鎖定或解鎖用戶編輯用戶權(quán)限(限集群用戶)生成Keytab文件(限集群用戶)修改用戶信息點(diǎn)擊用戶編輯界面的,Manager會(huì)彈出下面窗口:在該窗口中,您可以修改該用戶的郵件、用戶名全名、部門和描述。注意,不可修改用戶名。設(shè)置用戶密碼點(diǎn)擊用戶編輯界面的,Manager會(huì)彈出下面窗口讓您設(shè)置用戶密碼:修改用戶所屬組點(diǎn)擊用戶編輯界面的,Manager會(huì)彈出下面窗口:這個(gè)窗口中,左邊一欄是Manager(如果該用戶是Manager用戶)或集群(如果該用戶是集群用戶)中所有的組;右邊一欄是該用戶已經(jīng)加入的組。將用戶添加進(jìn)組在左欄中勾選想要將用戶添加進(jìn)去的組,然后點(diǎn)擊,勾選中的組會(huì)出現(xiàn)在右欄中,表添加成功。將用戶移出組在右欄中勾選想要將用戶移出的組,然后點(diǎn)擊,勾選中的組會(huì)從右欄中消失,表示移成功。修改用戶角色點(diǎn)擊用戶編輯界面的,Manager會(huì)彈出下面窗口:這個(gè)窗口中,左邊一欄是Manager(如果該用戶是Manager用戶)或集群(如果該用戶是集群用戶)中所有的角色;右邊一欄是該用戶已經(jīng)有的角色。賦予角色在左欄中勾選想要賦予給用戶的角色,然后點(diǎn)擊,勾選中的角色會(huì)出現(xiàn)在右欄中,表賦予成功。收回角色在右欄中勾選想要將從用戶處收回的角色,然后點(diǎn)擊,勾選中的角色會(huì)從右欄中消失表示收回成功。鎖定或解鎖用戶點(diǎn)擊會(huì)將用戶鎖定,用戶被鎖定后,將不能再登陸Manager或集群。要解鎖用戶,可在被鎖定用戶的編輯頁面點(diǎn)擊。編輯權(quán)限(限集群用戶)雖然Manager類型的用戶也有選項(xiàng),但是我們建議不對(duì)Manager型的用戶進(jìn)行權(quán)限設(shè)置操作。點(diǎn)擊一個(gè)集群用戶的用戶編輯頁面的會(huì)進(jìn)入該用戶的權(quán)限設(shè)置窗口,如下:頁面右上顯示了當(dāng)前的Inceptor服務(wù),頁面上顯示的是用戶在該Inceptor服務(wù)中的權(quán)限。如果您的集群上有多個(gè)Inecptor服務(wù),您可以點(diǎn)擊下圖中紅框標(biāo)出的部分切換Inceptor服務(wù):在這個(gè)頁面中,您可以對(duì)該用戶在集群上的Inceptor服務(wù)中的權(quán)限,在該頁面可以進(jìn)行所有InceptorSQL用戶授權(quán)語句能夠執(zhí)行的操作。下面我們舉一些例子。在頁面上的操作都需要點(diǎn)擊頁面下方的才會(huì)生效。例例6.2.授予用戶Alice在InceptorSQL1中創(chuàng)建數(shù)據(jù)庫的權(quán)限InceptorSQL中授予Alice創(chuàng)建數(shù)據(jù)庫權(quán)限的語句為:GRANTCREATETOUSERGRANTCREATETOUSERAlice;在Alice的權(quán)限設(shè)置頁面,您僅需要勾選頁面中的“CREATEDATABASE”,便可達(dá)到和上面語句相同的效果:勾選后,點(diǎn)擊頁面下方的動(dòng):讓改動(dòng)生效。Manager會(huì)彈出下面的窗口要求確認(rèn)改例例6.3.授予用戶Alice在InceptorSQL1中對(duì)某個(gè)數(shù)據(jù)庫的權(quán)限下面的InceptorSQL語句授予用戶Alice對(duì)數(shù)據(jù)庫hr的權(quán)限:GRANTCREATEONDATABASEhrTOUSERAlice;GRANTSELECTONDATABASEhrTOUSERAlice;授予用戶Alice在hr中建表的權(quán)限授予用戶Alice在hr中執(zhí)行SHOWTABLES下面是如何在用戶權(quán)限界面進(jìn)行等效操作:1.點(diǎn)擊,在下拉菜單中點(diǎn)擊數(shù)據(jù)庫hr:這時(shí),數(shù)據(jù)庫hr會(huì)出現(xiàn)在列表中:此時(shí),您只需要勾選hr對(duì)應(yīng)的 勾選框來授予Alice在hr中建表的權(quán)限,勾選hr對(duì)應(yīng)的 勾選框來授予Alice在hr中執(zhí)行SHOWTABLES的權(quán)限。如果您要收回用戶Alice的權(quán)限,只需要取消勾選便可。對(duì)應(yīng)的InceptorSQL為:REVOKE(CREATE|SELECT)ONDATABASEhrFROMUSERAlice;5.5.如果您要收回用戶Alice對(duì)hr的全部權(quán)限,您也可以直接點(diǎn)擊hr對(duì)應(yīng)的 將hr從列表中直接刪除。6.要使操作生效,您需要點(diǎn)擊頁面下方的。例例6.4.授予用戶Alice在InceptorSQL1中對(duì)某張表的權(quán)限以下InceptorSQL語句授予用戶Alice對(duì)在數(shù)據(jù)庫hr中的test表的權(quán)限:GRANT(INSERT|SELECT|UPDATE|DELETE|ALL)ONhr.testTOUSERAlice;下面是如何在用戶權(quán)限界面進(jìn)行等效操作:1.點(diǎn)擊,在下拉菜單中點(diǎn)擊數(shù)據(jù)庫hr:2.這時(shí)右邊會(huì)出現(xiàn),點(diǎn)擊它,在下拉菜單中點(diǎn)擊表test:現(xiàn)在,hr中的表test會(huì)出現(xiàn)在列表中:您只要勾選各項(xiàng)權(quán)限對(duì)應(yīng)的勾選框便可以完成授權(quán)操作。要收回權(quán)限,只需取消勾選。對(duì)應(yīng)的InceptorSQL操作為:REVOKE(INSERT|SELECT|UPDATE|DELETE|ALL)ONhr.testFROMUSERAlice;如果您要收回用戶Alice對(duì)test的全部權(quán)限,您也可以直接點(diǎn)擊test對(duì)應(yīng)的test從列表中直接刪除。6.6.要使操作生效,您需要點(diǎn)擊頁面下方的。生成Keytab文件(限集群用戶)點(diǎn)擊集群用戶編輯界面的,該用戶的Keytab文件便會(huì)自動(dòng)下載到本地。管理用戶組點(diǎn)擊頁面右側(cè)的,進(jìn)入用戶組管理頁面:頁面上會(huì)顯示當(dāng)前集群和Manager用戶組管理包括添加、刪除和編輯用戶組。添加用戶組點(diǎn)擊添加一個(gè)新的用戶組。Manager會(huì)彈出下面窗口,您需要提供新增用戶組的信息:其中“組名”和“用戶類型”為必須信息。“用戶類型”中:管理代表該用戶組將是管理類型的用戶組,管理類型的組只能在Manager中使用。集群集群則代表該用戶組將是集群類型的用戶組,集群類型的用戶組既可以在Manager使用,也可以在TDH集群中使用。例例6.5.添加用戶組添加一個(gè)名為Sales的集群用戶組:刪除用戶組在用戶組列表中選中一個(gè)組,然后點(diǎn)擊可以將選中的組刪除。編輯用戶組在用戶組列表中點(diǎn)擊一個(gè)用戶組可以進(jìn)入該用戶組的編輯界面,對(duì)用戶組進(jìn)行編輯。下面是一個(gè)名為Sales用戶組的編輯頁面:編輯組
點(diǎn)擊可以對(duì)用戶組本身進(jìn)行編輯;點(diǎn)擊可以對(duì)用戶組中的用戶進(jìn)行編輯。對(duì)組本身的編輯只能修改組的描述:編輯用戶
編輯完成后點(diǎn)擊保存修改。對(duì)組中用戶的編輯包括將用戶移入和移出用戶組。將用戶移入用戶組勾選“可選用戶”列表中的一個(gè)或多個(gè)用戶,點(diǎn)擊,選中用戶即被加入該組。將用戶移出用戶組勾選“已加入該組的用戶”列表中的一個(gè)或多個(gè)用戶,點(diǎn)擊,選中用戶即被移出該組。管理用戶角色點(diǎn)擊頁面右側(cè)的,進(jìn)入用戶角色頁面:添加角色
頁面上顯示了當(dāng)前Manager和集群上所有的角色以及它們的類型、權(quán)限和描述。在這個(gè)頁面,您可以進(jìn)行用戶角色管理操作,包括添加、編輯和刪除用戶角色。點(diǎn)擊可以添加一個(gè)新角色。Manager會(huì)彈出下面窗口:您需要在這個(gè)窗口提供新增角色的信息。其中“角色名”和“用戶類型”為必須信息?!坝脩纛愋汀敝校汗芾泶碓摻巧珜⑹枪芾眍愋偷慕巧芾眍愋偷慕巧荒茉贛anager中使用。集群集群則代表該角色將是集群類型的角色,集群類型的角色既可以在Manager也可以在TDH集群中使用。填寫完信息后點(diǎn)擊完成添加。例例6.6.創(chuàng)建角色添加sales角色:刪除角色編輯角色
在用戶角色頁面的角色列表中勾選一個(gè)角色,然后點(diǎn)擊,即可以刪除選中的角色。點(diǎn)擊角色管理頁面中的一個(gè)角色,可以進(jìn)入該角色的編輯頁面。例如下面是角色sales的編輯頁面:在角色編輯界面中,您可以:修改角色描述編輯角色下的用戶編輯角色權(quán)限(限集群角色)修改角色描述在角色編輯頁面中點(diǎn)擊,Manager會(huì)彈出下面窗口,在該窗口中您可以修改角色的述。注意,角色名不能修改。編輯角色下的用戶在角色編輯頁面中點(diǎn)擊,Manager會(huì)彈出下面窗口:這個(gè)窗口中,左邊一欄是Manager(如果該角色是Manager角色)或集群(如果該角色是集群角色)中所有的用戶;右邊一欄是角色下已經(jīng)有的用戶。賦予角色在左欄中勾選想要賦予角色的用戶,然后點(diǎn)擊,勾選中的用戶會(huì)出現(xiàn)在右欄中,表示予成功。收回角色在右欄中勾選想要將從收回角色的用戶,然后點(diǎn)擊,勾選中的用戶會(huì)從右欄中消失,示收回成功。編輯角色權(quán)限(限集群角色)在一個(gè)集群角色的角色編輯頁面點(diǎn)擊會(huì)進(jìn)入該角色的權(quán)限設(shè)置窗口,如下:頁面右上顯示了當(dāng)前的Inceptor服務(wù),頁面上顯示的是用戶在該Inceptor服務(wù)中的權(quán)限。如果您的集群上有多個(gè)Inecptor服務(wù),您可以點(diǎn)擊下圖中紅框標(biāo)出的部分切換Inceptor服務(wù):在這個(gè)頁面中,您可以對(duì)該角色在集群上的Inceptor服務(wù)中的權(quán)限,在該頁面可以進(jìn)行所有InceptorSQL角色授權(quán)語句能夠執(zhí)行的操作。下面我們舉一些例子。在頁面上的操作都需要點(diǎn)擊頁面下方的才會(huì)生效。讓改動(dòng)生效。Manager讓改動(dòng)生效。Manager會(huì)彈出下面的窗口要求確認(rèn)改勾選后,點(diǎn)擊頁面下方的動(dòng):在角色sales的權(quán)限設(shè)置頁面,您僅需要勾選頁面中的“CREATEDATABASE”,便可達(dá)到和上面語句相同的效果:GRANTCREATETOROLEsales;例6.7.授予角色sales在InceptorSQL1中創(chuàng)建數(shù)據(jù)庫的權(quán)限InceptorSQL中授予角色sales創(chuàng)建數(shù)據(jù)庫權(quán)限的語句為:例6.8.授予角色sales在InceptorSQL1中對(duì)某個(gè)數(shù)據(jù)庫的權(quán)限下面的InceptorSQL語句授予角色sales對(duì)數(shù)據(jù)庫hr的權(quán)限:GRANTCREATEONDATABASEhrTOROLEsales;GRANTSELECTONDATABASEhrTOROLEsales;授予角色sales在hr中建表的權(quán)限授予角色sales在hr中執(zhí)行SHOWTABLES下面是如何在sales的角色權(quán)限界面進(jìn)行等效操作:點(diǎn)擊,在下拉菜單中點(diǎn)擊數(shù)據(jù)庫hr:這時(shí),數(shù)據(jù)庫hr會(huì)出現(xiàn)在列表中:此時(shí),您只需要勾選hr對(duì)應(yīng)的 勾選框來授予角色sales在hr中建表的權(quán)限勾選hr對(duì)應(yīng)的 勾選框來授予角色sales在hr中執(zhí)行SHOWTABLES的權(quán)限。如果您要收回角色sales的權(quán)限,只需要取消勾選便可。對(duì)應(yīng)的InceptorSQL為:REVOKEREVOKE(CREATE|SELECT)ONDATABASEhrFROMROLEsales;5.如果您要收回角色sales對(duì)hr的全部權(quán)限,您也可以直接點(diǎn)擊hr對(duì)應(yīng)的 將hr從表中直接刪除。6.要使操作生效,您需要點(diǎn)擊頁面下方的。例例6.9.授予角色sales在InceptorSQL1中對(duì)某張表的權(quán)限以下InceptorSQL語句授予角色sales對(duì)在數(shù)據(jù)庫hr中的test表的權(quán)限:GRANT(INSERT|SELECT|UPDATE|DELETE|ALL)ONhr.testTOROLEsales;下面是如何在用戶權(quán)限界面進(jìn)行等效操作:1.點(diǎn)擊,在下拉菜單中點(diǎn)擊數(shù)據(jù)庫hr:2.這時(shí)右邊會(huì)出現(xiàn),點(diǎn)擊它,在下拉菜單中點(diǎn)擊表test:3.3.,hr中的表test會(huì)出現(xiàn)在列表中:您只要勾選各項(xiàng)權(quán)限對(duì)應(yīng)的勾選框便可以完成授權(quán)操作。4.InceptorSQL操作為:REVOKE(INSERT|SELECT|UPDATE|DELETE|ALL)ONhr.testFROMROLEsales;5.如果您要收回角色sales對(duì)test的全部權(quán)限,您也可以直接點(diǎn)擊test對(duì)應(yīng)的 test從列表中直接刪除。6.要使操作生效,您需要點(diǎn)擊頁面下方的。日志查詢TDHManager支持對(duì)所有日志進(jìn)行分類檢索查詢。選擇頂部菜單欄中的“管理”菜單,點(diǎn)擊“日志查詢”選項(xiàng),進(jìn)入日志查詢頁面。在過濾條件板塊,根據(jù)檢索需要選擇集群名稱、服務(wù)名稱、節(jié)點(diǎn)名稱、角色種類、級(jí)別、關(guān)鍵字等檢索要素,然后點(diǎn)擊查找,日志查詢結(jié)果顯示在頁面下方。審計(jì)查詢TDHManager記錄所有該TDHManager上與用戶有關(guān)的操作,包括用戶登錄、鎖住用戶、解鎖用戶、更新用戶的偏好等。選擇頂部菜單欄“管理”菜單,點(diǎn)擊“審計(jì)查詢”,進(jìn)入審計(jì)查詢頁面。在過濾條件板塊,根據(jù)檢索需要選擇用戶名、IP地址、分頁大小、“操作”關(guān)鍵字,點(diǎn)擊“檢索”,頁面下方顯示檢索結(jié)果,包括用戶登陸時(shí)間、用戶名、IP地址、操作。NTP管理一些服務(wù)比如Hyperbase在正常工作時(shí)需要節(jié)點(diǎn)之間進(jìn)行時(shí)間同步,所以TDHManager為用戶提供了網(wǎng)絡(luò)時(shí)間協(xié)議管理功能,即NTP管理。選擇頂部菜單欄中的“管理”菜單,點(diǎn)擊“網(wǎng)絡(luò)時(shí)間管理協(xié)議”,進(jìn)入NTP管理頁面。在NTP管理頁面中,狀態(tài)一欄顯示當(dāng)前為TDH提供時(shí)間的內(nèi)部服務(wù)器和外部服務(wù)器,以及所有和NTP服務(wù)器時(shí)間相差大于5分鐘的節(jié)點(diǎn)。外部NTP服務(wù)器一欄以列表形式顯示所有外部NTP服務(wù)節(jié)點(diǎn)名稱,右上角有“添加”和“刪除”兩個(gè)選項(xiàng)。勾選服務(wù)器,并點(diǎn)擊“刪除”,可以刪除選中的服務(wù)器。點(diǎn)擊“添加”彈出“添加外部NTP服務(wù)器”窗口。點(diǎn)擊“添加NTP服務(wù)器”,在空白欄中填寫服務(wù)器地址,再點(diǎn)擊“測(cè)試連接”,連接通過后點(diǎn)擊Append,添加完成。許可證管理TDH默認(rèn)有一個(gè)月的試用期,但過了試用期后,運(yùn)行TDH需要許可證,TDHManager提供對(duì)許可證的一站式管理。選擇頂部菜單欄的“管理”菜單,點(diǎn)擊“許可證”,進(jìn)入許可證管理頁面?!案乓辈糠诛@示ServerKey、序列號(hào)和許可證服務(wù)三項(xiàng)內(nèi)容,其中ServerKey回送的編碼,許可證服務(wù)顯示該服務(wù)的狀態(tài),用戶可以點(diǎn)擊“啟動(dòng)”開始這項(xiàng)服務(wù),或者點(diǎn)擊“停止”終止這項(xiàng)服務(wù)?!案乓毕路接袃蓚€(gè)選項(xiàng),點(diǎn)擊“上傳License”,用戶可以通過粘貼文本或上傳文件來上傳自己的序列號(hào)和LicenseKey。點(diǎn)擊“保存”,License即上傳成功。用戶可點(diǎn)擊“查看LicenseKey”查看自己的LicenseKey?!霸斍椤辈糠诛@示用戶當(dāng)前所使用產(chǎn)品的License情況,包括產(chǎn)品名稱、License類型、節(jié)點(diǎn)容量、License截止日期。Guardian服務(wù)監(jiān)控在管理菜單中選中Guardian:您會(huì)進(jìn)入Guardian頁面,這個(gè)頁面中您可以對(duì)Guardian服務(wù)進(jìn)行監(jiān)控。Guardian服務(wù)管理Manager以及集群中的用戶、用戶組和角色以及它們的權(quán)限。如果您想要了解Guardian使用,請(qǐng)參考“用戶管理”部分的內(nèi)容。Guardian服務(wù)的角色包括:OpenLDAPServer,KerberosServer以及KadminServer。以下是Guardian服務(wù)的角色頁面:您可以在這個(gè)頁面查看Guardian服務(wù)各個(gè)角色的健康狀況。您還可以啟動(dòng)(點(diǎn)擊角色對(duì)的 圖標(biāo))、停止(點(diǎn)擊角色對(duì)應(yīng)的圖標(biāo))和刪除(點(diǎn)擊角色對(duì)應(yīng)的圖標(biāo))。Guardian服務(wù)的配置點(diǎn)擊可以進(jìn)入Guardian服務(wù)的配置頁面:在這個(gè)頁面您可以修改Guardian服務(wù)的相關(guān)參數(shù)。直接點(diǎn)擊您要修改的參數(shù)的值便可以修改。修改完畢后您需要先點(diǎn)擊來保存更改,然后點(diǎn)擊頁面右上的,在出現(xiàn)的下拉菜單點(diǎn)擊“配置服務(wù)”。這樣操作后,對(duì)Guardian服務(wù)參數(shù)的修改才會(huì)生效。Guardian服務(wù)操作的監(jiān)控點(diǎn)擊可以進(jìn)入Guardian服務(wù)的操作監(jiān)控頁面:在這里您可以監(jiān)控Guardian服務(wù)的歷史操作。備份與恢復(fù)在管理菜單中選中“備份與恢復(fù)”:您會(huì)進(jìn)入備份管理界面。在這個(gè)頁面中,您可以:導(dǎo)出Manager數(shù)據(jù):點(diǎn)擊 ,Manager數(shù)據(jù)會(huì)自動(dòng)下載到本地。導(dǎo)入Manager數(shù)據(jù):通過導(dǎo)入Manager數(shù)據(jù),您可以恢復(fù)某個(gè)之前備份的Manager。擊 ,在彈出的窗口中選取本地的數(shù)據(jù),然后點(diǎn)擊“上傳”。7.Zookeeper的運(yùn)維7.Zookeeper的運(yùn)維Zookeeper的運(yùn)維ZooKeeper是一個(gè)分布式的,開源的分布式應(yīng)用程序協(xié)調(diào)服務(wù),是Google的Chubby一個(gè)開源的實(shí)現(xiàn),是Hadoop和Hbase的重要組件。它是一個(gè)為分布式應(yīng)用提供一致性服務(wù)的軟件,提供的功能包括:配置維護(hù)、名字服務(wù)、分布式同步、組服務(wù)等。ZooKeeper服務(wù)的管理啟動(dòng)、停止、刪除Zookeeper服務(wù)在“狀態(tài)”主頁面上,將鼠標(biāo)移至ZooKeeper框的右上角,出現(xiàn)下拉菜單,您可以點(diǎn)擊菜單欄中的選項(xiàng)啟動(dòng)、停止、刪除該ZooKeeper服務(wù)。您也可以進(jìn)入服務(wù)狀態(tài)頁面進(jìn)行操作,有兩種進(jìn)入服務(wù)狀態(tài)頁面的方法:直接點(diǎn)擊“狀態(tài)”主頁面上的ZooKeeper框選擇頂部菜單欄中的“服務(wù)”,在下拉菜單中選擇操作目標(biāo)服務(wù)。在ZooKeeper服務(wù)狀態(tài)頁面的頂部有三個(gè)圖標(biāo) ,點(diǎn)擊啟動(dòng)服務(wù),點(diǎn)擊停止服務(wù),擊 刪除服務(wù)。配置服務(wù)點(diǎn)擊服務(wù)狀態(tài)界面右上角的“更多操作”,在下拉菜單中點(diǎn)擊”配置服務(wù)”,開始配置。ZooKeeper服務(wù)的監(jiān)控CPU使用監(jiān)控進(jìn)入ZooKeeper服務(wù)狀態(tài)頁面,頁面的最上端顯示TDH上所有被管理節(jié)點(diǎn)的CPU使用率,將鼠標(biāo)置于任意時(shí)間點(diǎn)上,都會(huì)顯示該時(shí)間所在的5分鐘內(nèi)CPU的使用率。可以在時(shí)間軸上方設(shè)置時(shí)間軸尺度,默認(rèn)為30分鐘,可以選擇1小時(shí)、2小時(shí)、6小時(shí)、12小時(shí)、1天、1周、30天,下圖將時(shí)間軸尺度改為6小時(shí)一格。CPU使用率的時(shí)間軸上有一塊矩形陰影部分,您可以通過拖動(dòng)、拉伸、壓縮該陰影部分來調(diào)節(jié)本服務(wù)狀態(tài)頁面中所有表格的時(shí)間,當(dāng)您點(diǎn)擊時(shí)間軸左邊的“Now”時(shí),陰影的最右端復(fù)位至?xí)r間軸最右段,即現(xiàn)在的時(shí)間。所有服務(wù)的狀態(tài)頁面均會(huì)顯示CPU使用率。ZooKeeper概要信息監(jiān)控在ZooKeeper服務(wù)狀態(tài)頁面的中間有一欄“ZooKeeper概要”,左邊顯示該ZooKeeper服務(wù)的最大延遲、最小延遲、平均延遲分別以淡藍(lán)色線、綠線、深藍(lán)色線表示,將鼠標(biāo)放置在線的任意時(shí)間點(diǎn)上,都會(huì)顯示該時(shí)間有關(guān)延遲的詳細(xì)信息。“ZooKeeper概要”右邊部分顯示該ZooKeeper服務(wù)的領(lǐng)導(dǎo)節(jié)點(diǎn)和跟隨節(jié)點(diǎn)。點(diǎn)擊下方的“日志”,可進(jìn)入日志頁面進(jìn)行查詢,查詢操作方法見5.2。ZooKeeper服務(wù)歷史監(jiān)控ZooKeeper服務(wù)狀態(tài)頁面左下方顯示服務(wù)歷史,并顯示出每一條歷史的級(jí)別、時(shí)間、分類、標(biāo)題。ZooKeeper節(jié)點(diǎn)監(jiān)控ZooKeeper服務(wù)狀態(tài)頁面左下方顯示節(jié)點(diǎn)信息,包括CPU使用率、IP、主機(jī)名、所在機(jī)柜、核數(shù)、物理內(nèi)存,并用五種顏色標(biāo)識(shí)節(jié)點(diǎn)的CPU使用率的大小。ZooKeeper統(tǒng)計(jì)信息監(jiān)控ZooKeeper服務(wù)狀態(tài)頁面右下方顯示ZooKeeper統(tǒng)計(jì)信息,包括ZooKeeper接受數(shù)據(jù)包、ZooKeeper發(fā)送數(shù)據(jù)包、存在的連接、ZooKeeperOutstandingRequest。將鼠標(biāo)放在任意一個(gè)表中的任意一個(gè)時(shí)間點(diǎn),均會(huì)顯示數(shù)據(jù)源、時(shí)刻、數(shù)值。內(nèi)的時(shí)間鍵顯示前后時(shí)間的信息。ZooKeeper服務(wù)的配置點(diǎn)擊ZooKeeper您可以對(duì)Zookeeper的不同項(xiàng)目進(jìn)行配置。配置ZooKeeper的角色點(diǎn)擊ZooKeeper狀態(tài)頁面左邊的菜單欄,選擇“角色”選項(xiàng),進(jìn)入角色頁面。刪除角色
角色頁面顯示每個(gè)角色的角色名稱、節(jié)點(diǎn)名稱、機(jī)柜名稱、服務(wù)鏈接、健康狀況,并允許您對(duì)其進(jìn)行啟動(dòng)、停止、刪除和遷移操作。您還可以通過在搜索欄中輸入關(guān)鍵詞搜索角色。遷移角色
當(dāng)您想要?jiǎng)h除一個(gè)角色時(shí),必須要先停止該角色,有些角色像DataNode和NodeManager在刪除前最好能先將其退役。當(dāng)您點(diǎn)擊刪除按鍵時(shí),系統(tǒng)會(huì)彈出以下提示。從TDH4.3開始,大數(shù)據(jù)平臺(tái)Manager支持Zookeeperserver的遷移。在一個(gè)角色后面點(diǎn)擊便要重新啟動(dòng)以后,新的改動(dòng)才能夠被識(shí)別。在小于等于三個(gè)節(jié)點(diǎn)的集群上不能進(jìn)行Zookeeperserver角色的遷移。下面我們演示將在tw-node127上的Zookeeperserver遷移到tw-node132上。點(diǎn)擊tw-node127上的Zookeeperserver角色后的image::migrate.png[scaledwidth=120%]圖標(biāo):系統(tǒng)會(huì)彈出以下提示:點(diǎn)擊“繼續(xù)”來選擇遷移的目標(biāo)節(jié)點(diǎn),我們選擇集群中的最后一個(gè)節(jié)點(diǎn)即tw-node132節(jié)點(diǎn):點(diǎn)擊“繼續(xù)”進(jìn)入自定義配置:在這里您可以自定義如圖所示的三個(gè)參數(shù),您也可以選擇使用我們提供的默認(rèn)值。完成配置后點(diǎn)擊“繼續(xù)”來更新依賴:集群中很多其他服務(wù)都依賴于Zookeeper,在您遷移了Zookeeperserver這些服務(wù)才能更新依賴。您可以選擇在這一步就重啟依賴于這個(gè)Zookeeper服務(wù)的服務(wù)(勾選“立刻重啟收到影響的服務(wù)”),或者之后再手動(dòng)重啟所有該頁面提到的服務(wù)。點(diǎn)擊“完成”即可以讓大數(shù)據(jù)平臺(tái)Manager開始執(zhí)行遷移:當(dāng)該頁面顯示全部操作完成后點(diǎn)擊“完成”退出,您可以看到原來在tw-node127上的Zookeeperserver已經(jīng)成功遷移到了tw-node132上:修改ZooKeeper的配置點(diǎn)擊ZooKeeper狀態(tài)頁面左邊的菜單欄,選擇“配置”選項(xiàng),進(jìn)入服務(wù)配置頁面。服務(wù)配置頁面顯示所有配置項(xiàng)的名稱、值、描述。您可以通過在搜索欄中輸入關(guān)鍵詞搜索某配置項(xiàng)。點(diǎn)擊想要修改的配置的值,在欄中輸入新值,并點(diǎn)擊,完成修改;點(diǎn)擊,修改無效,恢置的值恢復(fù)至默認(rèn)值。增加自定義參數(shù)點(diǎn)擊界面右上方的“+增加自定義參數(shù)”,彈出以下頁面。在頁面中輸入屬性、值、描述,點(diǎn)擊“添加”,完成新增自定義參數(shù)。任何修改服務(wù)配置的操作都需要點(diǎn)擊右上角的“保存更改”按鈕才能被保存。Zookeeper的安全配置點(diǎn)擊ZooKeeper狀態(tài)頁面左邊的菜單欄,選擇“安全”選項(xiàng),進(jìn)入安全配置頁面。為了提高服務(wù)的安全級(jí)別,需要開啟Kerberos。點(diǎn)擊,彈出以下頁面。輸入KAdmin票據(jù)名、KAdmin密碼,點(diǎn)擊“確認(rèn)”,完成開啟。在開啟kerberos前必須先配置Kerberos,配置方法請(qǐng)見附錄A《配置Kerberos》。查看ZooKeeper操作點(diǎn)擊ZooKeeper狀態(tài)頁面左邊的菜單欄,選擇“操作”選項(xiàng),進(jìn)入操作查看頁面。可在頁面上查看某段時(shí)間內(nèi)的ZooKeeper操作,包括操作名稱、狀態(tài)、開始時(shí)間、結(jié)束時(shí)間、上下文??梢酝ㄟ^移動(dòng)、拉伸、壓縮頁面上方時(shí)間軸上的方塊陰影來調(diào)整所要查看的時(shí)間段。8.HDFS的運(yùn)維8.HDFS的運(yùn)維HDFS的運(yùn)維Hadoop分布式文件系統(tǒng)(HDFS)被設(shè)計(jì)成適合運(yùn)行在通用硬件(commodityhardware)上的分布式文件系統(tǒng)。它和現(xiàn)有的分布式文件系統(tǒng)有很多共同點(diǎn)。但同時(shí),它和其他的分布式文件系統(tǒng)的區(qū)別也是很明顯的。HDFS是一個(gè)高度容錯(cuò)性的系統(tǒng),適合部署在廉價(jià)的機(jī)器上。HDFS能提供高吞吐量的數(shù)據(jù)訪問,非常適合大規(guī)模數(shù)據(jù)集上的應(yīng)用。HDFS放寬了一部分POSIX約束,來實(shí)現(xiàn)流式讀取文件系統(tǒng)數(shù)據(jù)的目的。HDFS在最開始是作為ApacheNutch搜索引擎項(xiàng)目的基礎(chǔ)架構(gòu)而開發(fā)的。HDFS是ApacheHadoopCore項(xiàng)目的一部分。HDFS服務(wù)的管理啟動(dòng)、停止、刪除HDFS服務(wù)在“狀態(tài)”主頁面上,將鼠標(biāo)移至HDFS框的右上角,出現(xiàn)下拉菜單,您可以點(diǎn)擊菜單欄中的選項(xiàng)啟動(dòng)、停止、刪除該HDFS服務(wù)。您也可以進(jìn)入服務(wù)狀態(tài)頁面進(jìn)行操作,有兩種進(jìn)入服務(wù)狀態(tài)頁面的方法:直接點(diǎn)擊“狀態(tài)”主頁面上的HDFS框選擇頂部菜單欄中的“服務(wù)”,在下拉菜單中選擇操作目標(biāo)服務(wù)。在HDFS服務(wù)狀態(tài)頁面的頂部有三個(gè)圖標(biāo) ,點(diǎn)擊啟動(dòng)服務(wù),點(diǎn)擊停止服務(wù),點(diǎn)擊 除服務(wù)。配置服務(wù)點(diǎn)擊服務(wù)狀態(tài)界面右上角的“更多操作”,在下拉菜單中點(diǎn)擊”配置服務(wù)”,開始配置。HDFS服務(wù)的監(jiān)控CPU使用監(jiān)控進(jìn)入HDFS服務(wù)狀態(tài)頁面,頁面的最上端顯示TDH上所有被管理節(jié)點(diǎn)的CPU使用率,將鼠標(biāo)置于任意時(shí)間點(diǎn)上,都會(huì)顯示該時(shí)間所在的5分鐘內(nèi)CPU的使用率??梢栽跁r(shí)間軸上方設(shè)置時(shí)間軸尺度,默認(rèn)為30分鐘,可以選擇1小時(shí)、2小時(shí)、6小時(shí)、12小時(shí)、1天、1周、30天,下圖將時(shí)間軸尺度改為6小時(shí)一格。CPU使用率的時(shí)間軸上有一塊矩形陰影部分,您可以通過拖動(dòng)、拉伸、壓縮該陰影部分來調(diào)節(jié)本服務(wù)狀態(tài)頁面中所有表格的時(shí)間,當(dāng)您點(diǎn)擊時(shí)間軸左邊的“Now”時(shí),陰影的最右端復(fù)位至?xí)r間軸最右段,即現(xiàn)在的時(shí)間。所有服務(wù)的狀態(tài)頁面均會(huì)顯示CPU使用率。在HDFS服務(wù)狀態(tài)頁面的中間有一欄“HDFS概要”。當(dāng)您選擇“basic”項(xiàng)時(shí),左邊顯示該HDFS顯示該時(shí)間有關(guān)讀寫吞吐量的詳細(xì)信息,包括數(shù)據(jù)源、時(shí)刻、值;右邊顯示HDFS包括已使用容量、剩余容量、可用的DataNodes、待備份數(shù)據(jù)塊、損壞的數(shù)據(jù)塊、預(yù)定備份數(shù)據(jù)塊、數(shù)據(jù)塊總數(shù)、備份中的數(shù)據(jù)塊。當(dāng)您選擇“Namenode”選項(xiàng)時(shí),左邊顯示名字節(jié)點(diǎn)堆使用率、事務(wù)處理平均時(shí)間,將將鼠標(biāo)值;右邊顯示名字節(jié)點(diǎn)的信息,包括名稱、掛載點(diǎn)、現(xiàn)役名字節(jié)點(diǎn)、備用名字節(jié)點(diǎn)?!癏DFS概要”下邊部分顯示該HDFS服務(wù)的剩余分布式文件系統(tǒng)、活躍的字節(jié)比例。HDFS服務(wù)歷史監(jiān)控HDFS服務(wù)狀態(tài)頁面左下方顯示服務(wù)歷史,并顯示出每一條歷史的級(jí)別、時(shí)間、分類、標(biāo)題。HDFS節(jié)點(diǎn)監(jiān)控HDFS服務(wù)狀態(tài)頁面左下方顯示數(shù)據(jù)節(jié)點(diǎn)的使用率,包括數(shù)據(jù)節(jié)點(diǎn)使用率、IP、主機(jī)名、所在機(jī)柜、核數(shù)、物理內(nèi)存,并用五種顏色標(biāo)識(shí)數(shù)據(jù)節(jié)點(diǎn)使用率的大小。HDFS統(tǒng)計(jì)信息監(jiān)控HDFS服務(wù)狀態(tài)頁面右下方顯示HDFS統(tǒng)計(jì)信息,包括數(shù)據(jù)塊總數(shù)、損壞的數(shù)據(jù)塊、待備份數(shù)據(jù)塊、備份中的數(shù)據(jù)塊、預(yù)定備份數(shù)據(jù)塊。將鼠標(biāo)放在任意一個(gè)表中的任意一個(gè)時(shí)間點(diǎn),均會(huì)顯示數(shù)據(jù)源、時(shí)刻、數(shù)值。內(nèi)的時(shí)間鍵顯示前后時(shí)間的信息。HDFS服務(wù)的配置點(diǎn)擊HDFS狀態(tài)頁面左邊的菜單欄,彈出完整的菜單欄。通過點(diǎn)擊菜單欄中的不同選項(xiàng),您可以對(duì)HDFS的不同項(xiàng)目進(jìn)行配置。配置HDFS的角色點(diǎn)擊HDFS狀態(tài)頁面左邊的菜單欄,選擇“角色”選項(xiàng),進(jìn)入角色頁面。刪除角色
角色頁面顯示每個(gè)角色的角色名稱、節(jié)點(diǎn)名稱、機(jī)柜名稱、服務(wù)鏈接、健康狀況,并允許您對(duì)其進(jìn)行啟動(dòng)、停止和刪除,遷移角色的操作。您還可以通過在搜索欄中輸入關(guān)鍵詞搜索角色。當(dāng)您想要?jiǎng)h除一個(gè)角色時(shí),必須要先停止該角色,有些角色像DataNode和NodeManager在刪除前最好能先將其退役。當(dāng)您點(diǎn)擊刪除按鍵時(shí),系統(tǒng)會(huì)彈出以下提示。NameNode的遷移點(diǎn)擊NameNode后面的圖標(biāo)可以對(duì)NameNode角色進(jìn)行遷移。點(diǎn)擊遷移角色按鍵時(shí),系統(tǒng)會(huì)彈以下提示選擇想要遷移到的節(jié)點(diǎn),在這里,由于tw-node127,tw-node128,tw-node129節(jié)點(diǎn)上都有NameNode的角色,所以只能將tw-node127的角色遷移到tw-node129節(jié)點(diǎn)上選擇節(jié)點(diǎn)之后,可以自定義節(jié)點(diǎn)的屬性,一共有dfs.datanode.data.dir,.dir,datanode.memory三個(gè)屬性點(diǎn)擊“繼續(xù)”,會(huì)彈出“更新依賴”的界面,可以勾選“立即重啟受到影響的服務(wù)”,也可以稍后手動(dòng)重啟這些服務(wù),使得所做的變動(dòng)生效修改HDFS的配置點(diǎn)擊HDFS狀態(tài)頁面左邊的菜單欄,選擇“配置”選項(xiàng),進(jìn)入服務(wù)配置頁面。服務(wù)配置頁面顯示所有配置項(xiàng)的名稱、值、描述。您可以通過在搜索欄中輸入關(guān)鍵詞搜索某配置項(xiàng)。點(diǎn)擊想要修改的配置的值,在欄中輸入新值,并點(diǎn)擊,完成修改;點(diǎn)擊,修改無效,恢置的值恢復(fù)至默認(rèn)值。增加自定義參數(shù)點(diǎn)擊界面右上方的“+增加自定義參數(shù)”,彈出以下頁面。在頁面中輸入屬性、值、描述,點(diǎn)擊“添加”,完成新增自定義參數(shù)。任何修改服務(wù)配置的操作都需要點(diǎn)擊右上角的“保存更改”按鈕才能被保存。HDFS的安全配置點(diǎn)擊HDFS狀態(tài)頁面左邊的菜單欄,選擇“安全”選項(xiàng),進(jìn)入安全配置頁面。為了提高服務(wù)的安全級(jí)別,需要開啟Kerberos。點(diǎn)擊,彈出以下頁面。輸入KAdmin票據(jù)名、KAdmin密碼,點(diǎn)擊“確認(rèn)”,完成開啟。查看HDFS操作點(diǎn)擊HDFS狀態(tài)頁面左邊的菜單欄,選擇“操作”選項(xiàng),進(jìn)入操作查看頁面??稍陧撁嫔喜榭茨扯螘r(shí)間內(nèi)的HDFS操作,包括操作名稱、狀態(tài)、開始時(shí)間、結(jié)束時(shí)間、上下文??梢酝ㄟ^移動(dòng)、拉伸、壓縮頁面上方時(shí)間軸上的方塊陰影來調(diào)整所要查看的時(shí)間段。HDFS的維護(hù)點(diǎn)擊HDFS狀態(tài)頁面左邊的菜單欄,選擇“維護(hù)”選項(xiàng),進(jìn)入維護(hù)頁面。TDHManager允許您將名字節(jié)點(diǎn)恢復(fù)到新的節(jié)點(diǎn),但您可能需要現(xiàn)將服務(wù)停止。點(diǎn)擊“NameNode恢復(fù)”,彈出以下窗口。本向?qū)椭謴?fù)HDFS的NameNodes,向?qū)О韵聨撞剑?.分配角色2.配置服務(wù)3.安裝請(qǐng)根據(jù)您的需求對(duì)每一步做配置。9.YARN的運(yùn)維9.YARN的運(yùn)維YARN的運(yùn)維ApacheHadoopYARN(YetAnotherResourceNegotiator,另一種資源協(xié)調(diào)者)是一種新的Hadoop資源管理器,它是一個(gè)通用資源管理系統(tǒng),可為上層應(yīng)用提供統(tǒng)一的資源管理和調(diào)度,它的引入為集群在利用率、資源統(tǒng)一管理和數(shù)據(jù)共享等方面帶來了巨大好處。TDHYARN是新一代資源管理框架,允許多個(gè)應(yīng)用集群同時(shí)高效地運(yùn)行在一個(gè)物理集群上。經(jīng)改進(jìn)后,成為真正的多應(yīng)用程序平臺(tái),可服務(wù)于整個(gè)企業(yè)。YARN服務(wù)的管理啟動(dòng)、停止、刪除YARN服務(wù)在“狀態(tài)”主頁面上,將鼠標(biāo)移至YARN框的右上角,出現(xiàn)下拉菜單,您可以點(diǎn)擊菜單欄中的選項(xiàng)啟動(dòng)、停止、刪除該YARN服務(wù)。您也可以進(jìn)入服務(wù)狀態(tài)頁面進(jìn)行操作,有兩種進(jìn)入服務(wù)狀態(tài)頁面的方法:直接點(diǎn)擊“狀態(tài)”主頁面上的YARN框選擇頂部菜單欄中的“服務(wù)”,在下拉菜單中選擇操作目標(biāo)服務(wù)。在YARN服務(wù)狀態(tài)頁面的頂部有三個(gè)圖標(biāo) ,點(diǎn)擊啟動(dòng)服務(wù),點(diǎn)擊停止服務(wù),點(diǎn)擊 除服務(wù)。配置服務(wù)點(diǎn)擊服務(wù)狀態(tài)界面右上角的“更多操作”,在下拉菜單中點(diǎn)擊”配置服務(wù)”,開始配置。YARN服務(wù)的監(jiān)控CPU使用監(jiān)控進(jìn)入YARN服務(wù)狀態(tài)頁面,頁面的最上端顯示TDH上所有被管理節(jié)點(diǎn)的CPU使用率,將鼠標(biāo)置于任意時(shí)間點(diǎn)上,都會(huì)顯示該時(shí)間所在的5分鐘內(nèi)CPU的使用率??梢栽跁r(shí)間軸上方設(shè)置時(shí)間軸尺度,默認(rèn)為30分鐘,可以選擇1小時(shí)、2小時(shí)、6小時(shí)、12小時(shí)、1天、1周、30天,下圖將時(shí)間軸尺度改為6小時(shí)一格。CPU使用率的時(shí)間軸上有一塊矩形陰影部分,您可以通過拖動(dòng)、拉伸、壓縮該陰影部分來調(diào)節(jié)本服務(wù)狀態(tài)頁面中所有表格的時(shí)間,當(dāng)您點(diǎn)擊時(shí)間軸左邊的“Now”時(shí),陰影的最右端復(fù)位至?xí)r間軸最右段,即現(xiàn)在的時(shí)間。所有服務(wù)的狀態(tài)頁面均會(huì)顯示CPU使用率。YARN概要信息監(jiān)控在YARN服務(wù)狀態(tài)頁面的中間有一欄“YARN概要”,左上方為一個(gè)橫坐標(biāo)為時(shí)間、縱坐標(biāo)為個(gè)數(shù)的表,顯示正在運(yùn)行的應(yīng)用和等待中的應(yīng)用,分別以淡藍(lán)色線和綠色線表示。右上方顯示已使用內(nèi)存、剩余內(nèi)存、已使用的核、剩余的核,并提供進(jìn)入日志頁面的鏈接:點(diǎn)擊“日志”,可進(jìn)入日志頁面進(jìn)行查詢,查詢操作方法見5.2。下方為一行表格,顯示完成的應(yīng)用(AppsCompleted)、失敗的應(yīng)用(AppsFailed)、運(yùn)行中的容器(ContainersRunning)、活躍的節(jié)點(diǎn)(ActiveNodes)、退役的節(jié)點(diǎn)(Decommissioned)、丟失的節(jié)點(diǎn)(LostNodes)、不健康的節(jié)點(diǎn)(UnhealthyNodes)、重啟的節(jié)點(diǎn)(RebootedNodes)的數(shù)量。YARN服務(wù)歷史監(jiān)控YARN服務(wù)狀態(tài)頁面左下方顯示服務(wù)歷史,并顯示出每一條歷史的級(jí)別、時(shí)間、分類、標(biāo)題。YARN節(jié)點(diǎn)監(jiān)控YARN服務(wù)狀態(tài)頁面左下方顯示節(jié)點(diǎn)核使用率,包括節(jié)點(diǎn)核使用率、IP、主機(jī)名、所在機(jī)柜、核數(shù)、物理內(nèi)存,并用五種顏色標(biāo)識(shí)節(jié)點(diǎn)的CPU使用率的大小。YARN統(tǒng)計(jì)信息監(jiān)控YARN服務(wù)狀態(tài)頁面右下方顯示YARN統(tǒng)計(jì)信息,包括已使用內(nèi)存、剩余的內(nèi)存、已使用的核、剩余的核。將鼠標(biāo)放在任意一個(gè)表中的任意一個(gè)時(shí)間點(diǎn),均會(huì)顯示數(shù)據(jù)源、時(shí)刻、數(shù)值。內(nèi)的時(shí)間鍵顯示前后時(shí)間的信息。YARN服務(wù)的配置點(diǎn)擊YARN狀態(tài)頁面左邊的菜單欄,彈出完整的菜單欄。通過點(diǎn)擊菜單欄中的不同選項(xiàng),您可以對(duì)YARN的不同項(xiàng)目進(jìn)行配置。配置YARN的角色點(diǎn)擊YARN狀態(tài)頁面左邊的菜單欄,選擇“角色”選項(xiàng),進(jìn)入角色頁面。刪除角色
角色頁面顯示每個(gè)角色的角色名稱、節(jié)點(diǎn)名稱、機(jī)柜名稱、服務(wù)鏈接、健康狀況,并允許您對(duì)其進(jìn)行啟動(dòng)、停止和刪除操作。您還可以通過在搜索欄中輸入關(guān)鍵詞搜索角色。當(dāng)您想要?jiǎng)h除一個(gè)角色時(shí),必須要先停止該角色,有些角色像DataNode和NodeManager在刪除前最好能先將其退役。當(dāng)您點(diǎn)擊刪除按鍵時(shí),系統(tǒng)會(huì)彈出以下提示。您還可以點(diǎn)擊“服務(wù)鏈接”中的“Link”鏈接,查看角色的詳細(xì)內(nèi)容。比如,點(diǎn)擊resourcemanager(tw-node127)的鏈接,彈出以下頁面。添加角色您還可以添加角色:點(diǎn)擊頁面右上角的“+”,彈出以下頁面。通過添加角色、配置角色,完成角色添加。resourcemanager角色的遷移從TDH4.3起,大數(shù)據(jù)平臺(tái)Manager支持對(duì)resourcemanager色后的,會(huì)彈出以下的界面點(diǎn)擊“繼續(xù)”,會(huì)彈出“選擇節(jié)點(diǎn)”的界面,在這里我們可以選擇將resourcemanager移動(dòng)到的節(jié)點(diǎn)位置選擇節(jié)點(diǎn)之后,點(diǎn)擊“繼續(xù)”,進(jìn)行自定義配置節(jié)點(diǎn)的屬性配置好節(jié)點(diǎn)的屬性之后,點(diǎn)擊繼續(xù),會(huì)進(jìn)入下一步“更新依賴”的操作,勾選“立刻重啟受到影響的服務(wù)”,則受到影響的服務(wù)會(huì)被重啟,角色的遷移變動(dòng)也會(huì)生效修改YARN的配置點(diǎn)擊YARN狀態(tài)頁面左邊的菜單欄,選擇“配置”選項(xiàng),進(jìn)入服務(wù)配置頁面。服務(wù)配置頁面顯示所有配置項(xiàng)的名稱、值、描述。您可以通過在搜索欄中輸入關(guān)鍵詞搜索某配置項(xiàng)。點(diǎn)擊想要修改的配置的值,在欄中輸入新值,并點(diǎn)擊,完成修改;點(diǎn)擊,修改無效,恢置的值恢復(fù)至默認(rèn)值。增加自定義參數(shù)點(diǎn)擊界面右上方的“+增加自定義參數(shù)”,彈出以下頁面。在頁面中輸入屬性、值、描述,點(diǎn)擊“添加”,完成新增自定義參數(shù)。任何修改服務(wù)配置的操作都需要點(diǎn)擊右上角的“保存更改”按鈕才能被保存。YARN的資源管理點(diǎn)擊YARN狀態(tài)頁面左邊的菜單欄,選擇“資源管理”選項(xiàng),進(jìn)入YARNSchedule配置頁面。TDH提供兩種調(diào)度器:CapacityScheduler、FairScheduler,您可以選擇其中的一種。CapacityScheduler當(dāng)您選擇CapacityScheduler時(shí),您可在全局配置中選擇resourcecalculator的類型,并配置Queue。FairScheduler當(dāng)您選擇FairScheduler時(shí),您可以進(jìn)行全局配置、Queue配置和用戶配置。在配置完資源管理之后,點(diǎn)擊頁面右上角“保存更改”,完成配置。YARN的安全配置點(diǎn)擊YARN狀態(tài)頁面左邊的菜單欄,選擇“安全”選項(xiàng),進(jìn)入安全配置頁面。為了提高服務(wù)的安全級(jí)別,需要開啟Kerberos。點(diǎn)擊,彈出以下頁面。輸入KAdmin票據(jù)名、KAdmin密碼,點(diǎn)擊“確認(rèn)”,完成開啟。在開啟kerberos前必須先配置Kerberos,配置方法請(qǐng)見附錄A《配置Kerberos》。查看YARN操作點(diǎn)擊YARN狀態(tài)頁面左邊的菜單欄,選擇“操作”選項(xiàng),進(jìn)入操作查看頁面。可在頁面上查看某段時(shí)間內(nèi)的YARN操作,包括操作名稱、狀態(tài)、開始時(shí)間、結(jié)束時(shí)間、上下文??梢酝ㄟ^移動(dòng)、拉伸、壓縮頁面上方時(shí)間軸上的方塊陰影來調(diào)整所要查看的時(shí)間段。10.Hyperbase的運(yùn)維10.Hyperbase的運(yùn)維Hyperbase的運(yùn)維大數(shù)據(jù)平臺(tái)Hyperbase是星環(huán)信息科技(上海)有限公司開發(fā)的實(shí)時(shí)在線事務(wù)處理引擎,是一個(gè)建立在ApacheHBase基礎(chǔ)之上,融合了多種索引技術(shù)、分布式事務(wù)處理、全文實(shí)時(shí)搜索、圖形數(shù)據(jù)庫在內(nèi)的實(shí)時(shí)NoSQL數(shù)據(jù)庫。它也可以結(jié)合大數(shù)據(jù)平臺(tái)Inceptor進(jìn)行SQL查詢。在本章節(jié)中,我們將概述HyperBase在TDHManager中的管理,監(jiān)控以及簡(jiǎn)單的使用。Hyperbase服務(wù)的管理啟動(dòng)、停止、刪除Hyperbase服務(wù)在“狀態(tài)”主頁面上,將鼠標(biāo)移至Hyperbase框的右上角,出現(xiàn)下拉菜單,您可以點(diǎn)擊菜單欄中的選項(xiàng)啟動(dòng)、停止、刪除該Hyperbase服務(wù)。您也可以進(jìn)入服務(wù)狀態(tài)頁面進(jìn)行操作,有兩種進(jìn)入服務(wù)狀態(tài)頁面的方法:直接點(diǎn)擊“狀態(tài)”主頁面上的Hyperbase框選擇頂部菜單欄中的“服務(wù)”,在下拉菜單中選擇操作目標(biāo)服務(wù)。在Hyperbase服務(wù)狀態(tài)頁面的頂部有三個(gè)圖標(biāo) ,點(diǎn)擊啟動(dòng)服務(wù),點(diǎn)擊停止服務(wù),擊 刪除服務(wù)。配置服務(wù)點(diǎn)擊服務(wù)狀態(tài)界面右上角的“更多操作”,在下拉菜單中點(diǎn)擊”配置服務(wù)”,開始配置。Hyperbase服務(wù)的監(jiān)控CPU使用監(jiān)控進(jìn)入Hyperbase服務(wù)狀態(tài)頁面,頁面的最上端顯示TDH上所有被管理節(jié)點(diǎn)的CPU使用率,將鼠標(biāo)置于任意時(shí)間點(diǎn)上,都會(huì)顯示該時(shí)間所在的5分鐘內(nèi)CPU的使用率??梢栽跁r(shí)間軸上方設(shè)置時(shí)間軸尺度,默認(rèn)為30分鐘,可以選擇1小時(shí)、2小時(shí)、6小時(shí)、12小時(shí)、1天、1周、30天,下圖將時(shí)間軸尺度改為6小時(shí)一格。CPU使用率的時(shí)間軸上有一塊矩形陰影部分,您可以通過拖動(dòng)、拉伸、壓縮該陰影部分來調(diào)節(jié)本服務(wù)狀態(tài)頁面中所有表格的時(shí)間,當(dāng)您點(diǎn)擊時(shí)間軸左邊的“Now”時(shí),陰影的最右端復(fù)位至?xí)r間軸最右段,即現(xiàn)在的時(shí)間。所有服務(wù)的狀態(tài)頁面均會(huì)顯示CPU使用率。Hyperbase概要信息監(jiān)控在Hyperbase服務(wù)狀態(tài)頁面的中間有一欄“Hyperbase概要”。當(dāng)您選擇“Basic”項(xiàng)時(shí),左邊顯示該Hyperbase服務(wù)的發(fā)出的讀請(qǐng)求、寫請(qǐng)求,分別以深藍(lán)色線、綠色線表示,將鼠標(biāo)放置在線的任意時(shí)間點(diǎn)上,顯示該時(shí)間有關(guān)讀寫請(qǐng)求的詳細(xì)信息,包括數(shù)據(jù)源、時(shí)刻、值;右邊顯示liveregionservers、deadregionservers、totalregions的數(shù)目。當(dāng)您選擇“Masters”選項(xiàng)時(shí),左邊的界面不變;右邊顯示活躍節(jié)點(diǎn)和備用節(jié)點(diǎn)的分配情況。Hyperbase服務(wù)歷史監(jiān)控Hyperbase服務(wù)狀態(tài)頁面左下方顯示服務(wù)歷史,并顯示出每一條歷史的級(jí)別、時(shí)間、分類、標(biāo)題。Hyperbase節(jié)點(diǎn)監(jiān)控Hyperbase服務(wù)狀態(tài)頁面左下方顯示每個(gè)節(jié)點(diǎn)的region數(shù),包括region數(shù)、IP、主機(jī)名、所在機(jī)柜、核數(shù)、物理內(nèi)存,并用五種顏色標(biāo)識(shí)節(jié)點(diǎn)的CPU使用率的大小。Hyperbase統(tǒng)計(jì)信息監(jiān)控Hyperbase服務(wù)狀態(tài)頁面右下方顯示Hyperbase統(tǒng)計(jì)信息,包括CompactionQueueLength、FlushqueueLength、AverageLoad均會(huì)顯示數(shù)據(jù)源、時(shí)刻、數(shù)值。內(nèi)的時(shí)間鍵顯示前后時(shí)間的信息。Hyperbase服務(wù)的配置點(diǎn)擊Hyperbase狀態(tài)頁面左邊的菜單欄,彈出完整的菜單欄。通過點(diǎn)擊菜單欄中的不同選項(xiàng),您可以對(duì)Hyperbase的不同項(xiàng)目進(jìn)行配置。配置Hyperbase的角色點(diǎn)擊Hyperbase狀態(tài)頁面左邊的菜單欄,選擇“角色”選項(xiàng),進(jìn)入角色頁面。刪除角色
角色頁面顯示每個(gè)角色的角色名稱、節(jié)點(diǎn)名稱、機(jī)柜名稱、服務(wù)鏈接、健康狀況,并允許您對(duì)其進(jìn)行啟動(dòng)、停止和刪除操作。您還可以通過在搜索欄中輸入關(guān)鍵詞搜索角色。當(dāng)您想要?jiǎng)h除一個(gè)角色時(shí),必須要先停止該角色,有些角色像DataNode和NodeManager在刪除前最好能先將其退役。當(dāng)您點(diǎn)擊刪除按鍵時(shí),系統(tǒng)會(huì)彈出以下提示。master角色的遷移點(diǎn)擊master后面的圖標(biāo)可以對(duì)master角色進(jìn)行遷移。點(diǎn)擊遷移角色按鍵時(shí),系統(tǒng)會(huì)彈出以提示點(diǎn)擊繼續(xù),進(jìn)而選擇將要遷移到的節(jié)點(diǎn)位置選擇要遷移的節(jié)點(diǎn)位置之后,會(huì)進(jìn)入自定義配置的界面點(diǎn)擊繼續(xù),進(jìn)入到安全模式的界面,此時(shí)需要輸入Kadmin的用戶名和密碼點(diǎn)擊繼續(xù),進(jìn)入更新依賴的界面,這里我們可以選擇立刻重啟還是稍后重啟受到影響的服務(wù)部修改Hyperbase的配置點(diǎn)擊Hyperbase狀態(tài)頁面左邊的菜單欄,選擇“配置”選項(xiàng),進(jìn)入服務(wù)配置頁面。服務(wù)配置頁面顯示所有配置項(xiàng)的名稱、值、描述。您可以通過在搜索欄中輸入關(guān)鍵詞搜索某配置項(xiàng)。點(diǎn)擊想要修改的配置的值,在欄中輸入新值,并點(diǎn)擊,完成修改;點(diǎn)擊,修改無效,恢置的值恢復(fù)至默認(rèn)值。增加自定義參數(shù)點(diǎn)擊界面右上方的“+增加自定義參數(shù)”,彈出以下頁面。在頁面中輸入屬性、值、描述,點(diǎn)擊“添加”,完成新增自定義參數(shù)。任何修改服務(wù)配置的操作都需要點(diǎn)擊右上角的“保存更改”按鈕才能被保存。Hyperbase的安全配置點(diǎn)擊Hyperbase狀態(tài)頁面左邊的菜單欄,選擇“安全”選項(xiàng),進(jìn)入安全配置頁面。為了提高服務(wù)的安全級(jí)別,需要開啟Kerberos。點(diǎn)擊,彈出以下頁面。輸入KAdmin票據(jù)名、KAdmin密碼,點(diǎn)擊“確認(rèn)”,完成開啟。在開啟kerberos前必須先配置Kerberos,配置方法請(qǐng)見附錄A《配置Kerberos》。查看Hyperbase操作點(diǎn)擊Hyperbase狀態(tài)頁面左邊的菜單欄,選擇“操作”選項(xiàng),進(jìn)入操作查看頁面。可在頁面上查看某段時(shí)間內(nèi)的Hyperbase操作,包括操作名稱、狀態(tài)、開始時(shí)間、結(jié)束時(shí)間、上下文??梢酝ㄟ^移動(dòng)、拉伸、壓縮頁面上方時(shí)間軸上的方塊陰影來調(diào)整所要查看的時(shí)間段。11.Discover的運(yùn)維11.Discover的運(yùn)維Discover的運(yùn)維Discover是基于內(nèi)存的數(shù)據(jù)挖掘引擎。Discover服務(wù)的管理啟動(dòng)、停止、刪除Discover服務(wù)在“狀態(tài)”主頁面上,將鼠標(biāo)移至Discover框的右上角,出現(xiàn)下拉菜單,您可以點(diǎn)擊菜單欄中的選項(xiàng)啟動(dòng)、停止、刪除該Discover服務(wù)。您也可以進(jìn)入服務(wù)狀態(tài)頁面進(jìn)行操作,有兩種進(jìn)入服務(wù)狀態(tài)頁面的方法:直接點(diǎn)擊“狀態(tài)”主頁面上的Discover框選擇頂部菜單欄中的“服務(wù)”,在下拉菜單中選擇操作目標(biāo)服務(wù)。在Discover服務(wù)狀態(tài)頁面的頂部有三個(gè)圖標(biāo) ,點(diǎn)擊啟動(dòng)服務(wù),點(diǎn)擊停止服務(wù),擊 刪除服務(wù)。配置服務(wù)點(diǎn)擊服務(wù)狀態(tài)界面右上角的“更多操作”,在下拉菜單中點(diǎn)擊”配置服務(wù)”,開始配置。Discover服務(wù)的監(jiān)控CPU使用監(jiān)控進(jìn)入Discover服務(wù)狀態(tài)頁面,頁面的最上端顯示TDH上所有被管理節(jié)點(diǎn)的CPU使用率,將鼠標(biāo)置于任意時(shí)間點(diǎn)
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- GB/T 42707.2-2024數(shù)控機(jī)床遠(yuǎn)程運(yùn)維第2部分:故障診斷與預(yù)測(cè)性維護(hù)
- 著力構(gòu)建泛在可及的終身教育體系
- 2025新譯林版英語七年級(jí)下單詞默寫表
- 湖南部分學(xué)校2024-2025學(xué)年高三年級(jí)上冊(cè)9月聯(lián)考英語試題
- 公司年終總結(jié)會(huì)議通知-企業(yè)管理
- 2024年電離輻射計(jì)量標(biāo)準(zhǔn)器具項(xiàng)目投資申請(qǐng)報(bào)告代可行性研究報(bào)告
- 2025屆高考英語二輪復(fù)習(xí)專項(xiàng)(中國日?qǐng)?bào)新聞改編)時(shí)事新聞?wù)Z法填空 (社會(huì)與體育)(3篇含答案)
- 強(qiáng)制清算中應(yīng)注意的問題
- 強(qiáng)化硬件-拓展軟件-細(xì)化預(yù)算管理工作
- 單選之連詞 介詞(解析版)
- 四川省成都市2024年七年級(jí)上學(xué)期期中數(shù)學(xué)試卷【附答案】
- 期中易錯(cuò)密押卷(第1-5單元)(試題)-2024-2025學(xué)年五年級(jí)上冊(cè)數(shù)學(xué)人教版
- 咸寧房地產(chǎn)市場(chǎng)月報(bào)2024年08月
- 2024-2030年中國艾草行業(yè)供需分析及發(fā)展前景研究報(bào)告
- GB/T 37342-2024國家森林城市評(píng)價(jià)指標(biāo)
- 北京市海淀區(qū)2022-2023學(xué)年七年級(jí)上學(xué)期期末語文試題
- 人教版生物八年級(jí)下冊(cè) 8.1.1傳染病及其預(yù)防-教案
- 煤礦安全生產(chǎn)知識(shí)培訓(xùn)考試題庫(800題)
- 舊橋拆除監(jiān)理細(xì)則
- 干部履歷表填寫范本(中共中央組織部1999年)
- 古詩三首《江南春》+公開課一等獎(jiǎng)創(chuàng)新教案+教學(xué)闡釋+素材
評(píng)論
0/150
提交評(píng)論