記一次AD域域管理員密碼更改導(dǎo)致某系統(tǒng)群集管理器故障排查解決過(guò)程

1、記一次AD域域管理員密碼更改導(dǎo)致某系統(tǒng)群集管理器故障排查解決過(guò)程2015-11-12 0個(gè)評(píng)論 來(lái)源：reedyan 的BLOG收藏我要投稿環(huán)境描述某公司有一套系統(tǒng)，2臺(tái)Windows2003系統(tǒng)，采用自帶的群集管理器功能實(shí)現(xiàn)雙機(jī)熱備功能，正常情況下，服務(wù)器10.1.1.1承載中間件應(yīng)用服務(wù)，服務(wù)器10.1.1.2承載數(shù)據(jù)庫(kù)服務(wù)，僅當(dāng)其中一臺(tái)服務(wù)器故障時(shí)才會(huì)把資源切換至另一臺(tái)。系統(tǒng)名稱系統(tǒng)版本IP地址備注S-EIP-APPWindows2003ENTSP2采用Windows2003自帶的群集管理器實(shí)現(xiàn)雙機(jī)熱備功能S-EIP-DATAWindows2003ENTSP2故障表現(xiàn)某天晚上收到短信告警

2、，系統(tǒng)異常，無(wú)法訪問(wèn)。登錄系統(tǒng)10.1.1.1查看群集管理器狀態(tài)，發(fā)現(xiàn)服務(wù)器10.1.1.2處于脫離群集狀態(tài)。處理和分析過(guò)程1）遠(yuǎn)程登錄系統(tǒng)10.1.1.1，打開群集管理器，發(fā)現(xiàn)“S-EIP-DATA”數(shù)據(jù)庫(kù)服務(wù)器節(jié)點(diǎn)故障，顯示“紅色叉”，活動(dòng)資源中的“EAIEIP”、“Oracle Services for MSCS”、“OracleOraDb10g_home1TNSListenerFsloracle-vip”狀態(tài)處于“失敗”，群集管理器嘗試把故障自動(dòng)轉(zhuǎn)移至“S-EIP-APP”節(jié)點(diǎn)上，但故障依舊。2）把10.1.1.2服務(wù)器重啟系統(tǒng)嘗試解決，問(wèn)題依舊。3）登錄到10.1.1.2服務(wù)器，查看

3、事件日志，發(fā)現(xiàn)告警信息和錯(cuò)誤信息：“安全系統(tǒng)檢測(cè)到一個(gè)對(duì)服務(wù)器DNS/s-xx1.hq.cxxp.xxx的身份驗(yàn)證錯(cuò)誤，來(lái)自身份驗(yàn)證協(xié)議kerbers的失敗代碼為登錄無(wú)效，可能原因?yàn)闊o(wú)效的用戶名或驗(yàn)證消息”，如圖：服務(wù)器托管景安最快!【點(diǎn)擊進(jìn)入】機(jī)房位于骨干節(jié)點(diǎn)，用戶訪問(wèn)網(wǎng)站全國(guó)最快。 景安河南最大的多線服務(wù)器托管商！查 看服務(wù)器托管景安最快!【點(diǎn)擊進(jìn)入】機(jī)房位于骨干節(jié)點(diǎn)，用戶訪問(wèn)網(wǎng)站全國(guó)最快。 景安河南最大的多線服務(wù)器托管商！查 看服務(wù)器租用專家-吉特客網(wǎng)絡(luò)【點(diǎn)擊進(jìn)入】獨(dú)立服務(wù)器租用價(jià)格低至399元，更有雙線 高防。24小時(shí)客服團(tuán)隊(duì)在線，百人售后團(tuán)隊(duì)。查 看選學(xué)校?到江西萬(wàn)通汽車學(xué)院!【點(diǎn)擊

4、進(jìn)入】江西選技校職校,就到江西萬(wàn)通汽車學(xué)院, 技能+學(xué)歷,努力兩年,收獲一生!查 看4）從上圖日志看出，均出現(xiàn)類似“未知的用戶名和密碼錯(cuò)誤”錯(cuò)誤。由于Windows2003群集管理器采用AD域進(jìn)行集中管理，咨詢AD域管理員得知，之前有更改過(guò)AD域的管理員密碼。5）此時(shí)排查重點(diǎn)為，如何在門戶的群集管理器中修改AD域最新的密碼。經(jīng)過(guò)查閱官方KB和網(wǎng)上資料，嘗試修改群集管理器中的AD域的密碼：分別登錄10.1.1.1和10.1.1.2，修改“服務(wù)”中的“cluster service”-登錄-修改密碼，如圖：6）修改“cluster service“服務(wù)中的密碼后，問(wèn)題依舊，查看群集管理器中的”S-

5、EIP-DATA“中的”O(jiān)racle Services for MSCS“仍為失敗狀態(tài)，查看日志得知，仍是用戶密碼問(wèn)題，如圖：7）解決辦法：分別修改10.1.1.1和10.1.1.2中的”服務(wù)“中的”oracleMSCSServices“登錄密碼，如圖：8）修改完成后，群集管理器”S-EIP-DATA“活動(dòng)資源中的”EAIEIP“資源仍處于失敗狀態(tài)，如圖：9）從上圖報(bào)錯(cuò)可以看出，oracle fail safe故障轉(zhuǎn)移群集出現(xiàn)錯(cuò)誤用戶密碼，按照上面的經(jīng)驗(yàn)，應(yīng)該為oracle fail safe同樣采用的是AD域的管理員密碼，嘗試修改密碼：登錄10.1.1.2-開始-程序-“oracle-ofs34_home1”-oracle services for MSCS Security Setup，修改新的AD域管理員密碼。10）把所有與AD域管理員帳號(hào)相關(guān)的密碼更改成與AD域一致后，問(wèn)題解決，群集管理器功能正常，業(yè)務(wù)恢復(fù)正常