drbd+heartbeat+nfs配置詳細(xì).doc

一、 DRBD安裝(用以下方法編譯 一定要連網(wǎng))rootdrbd1 src# tar zxvf drbd-8.4.0.tar.gzrootdrbd1 src# cd drbd-8.4.0/rootdrbd1 drbd-8.4.0# ./configurerootdrbd1 drbd-8.4.0# make rpmrootdrbd1 drbd-8.4.0# make km-rpmrootdrbd1 drbd-8.4.0# cd /usr/src/redhat/RPMS/i386/rootdrbd1 i386# lsdrbd-8.4.0-1.i386.rpm drbd-heartbeat-8.4.0-1.i386.rpm drbd-pacemaker-8.4.0-1.i386.rpm drbd-xen-8.4.0-1.i386.rpmdrbd-bash-completion-8.4.0-1.i386.rpm drbd-km-2.6.18_194.el5-8.4.0-1.i386.rpm drbd-udev-8.4.0-1.i386.rpmdrbd-debuginfo-8.4.0-1.i386.rpm drbd-km-debuginfo-8.4.0-1.i386.rpm drbd-utils-8.4.0-1.i386.rpmrootdrbd1 i386# rpm -ivh drbd*rootdrbd1 i386# modprobe drbd #加載drbd到內(nèi)核rootdrbd1 i386# lsmod |grep drbd #查看是否加載成功drbd 250852 0開始配置drbd/etc/drbd.conf文件內(nèi)容如下# You can find an example in /usr/share/doc/drbd./drbd.conf.example#include drbd.d/global_common.conf;注釋到該行，因?yàn)樵撆渲靡呀?jīng)在下面配置了include drbd.d/*.res;# 是否參加DRBD使用者統(tǒng)計(jì).默認(rèn)是yes global usage-count no; # 設(shè)置主備節(jié)點(diǎn)同步時(shí)的網(wǎng)絡(luò)速率最大值,單位是字節(jié). common syncer rate 100M; # 一個(gè)DRBD設(shè)備(即:/dev/drbdX),叫做一個(gè)資源.里面包含一個(gè)DRBD設(shè)備的主備節(jié)點(diǎn)的 # 相關(guān)信息. # resource r0 # 使用協(xié)議C.表示收到遠(yuǎn)程主機(jī)的寫入確認(rèn)后,則認(rèn)為寫入完成. protocol C; net # 設(shè)置主備機(jī)之間通信使用的信息算法. cram-hmac-alg sha1; shared-secret FooFunFactory; # 每個(gè)主機(jī)的說(shuō)明以on開頭,后面是主機(jī)名.在后面的中為這個(gè)主機(jī)的配置. on # /dev/drbd1使用的磁盤分區(qū)是/dev/hdb1 device /dev/drbd1; disk /dev/hdb1; # 設(shè)置DRBD的監(jiān)聽端口,用于與另一臺(tái)主機(jī)通信 address :7898; meta-disk internal; on device /dev/drbd1; disk /dev/hdb1; address :7898; meta-disk internal; 兩臺(tái)機(jī)器上都執(zhí)行如下命令創(chuàng)建r0資源數(shù)據(jù)塊rootdrbd1 # drbdadm create-md r0（兩塊盤做DRBD時(shí)，只需要把分區(qū)分好，大小一樣，不用格式化。格式化操作此步可能會(huì)報(bào)錯(cuò)，什么找到文件系統(tǒng)ext3，此時(shí)可以這樣解決 dd if=/dev/zero of=/dev/hdb1 bs=1M count=128）兩次輸入yes，創(chuàng)建成功。-有的可能不需要輸入yes,自動(dòng)執(zhí)行完成再在兩臺(tái)機(jī)器上分別啟動(dòng)drbdrootdrbd1 # /etc/init.d/drbd start查看drbd運(yùn)行狀態(tài)：rootdrbd1 # cat /proc/drbdversion: 8.4.0 (api:1/proto:86-100)GIT-hash: 28753f559ab51b549d16bcf487fe625d5919c49c build by rootdrbd1, 2011-12-27 15:00:40 1: cs:Connected ro:Secondary/Secondary ds:Inconsistent/Inconsistent C r-ns:0 nr:0 dw:0 dr:0 al:0 bm:0 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:20964116發(fā)現(xiàn)在兩臺(tái)機(jī)器上，drbd都為Secondary模式，因此需要指定哪個(gè)為主，哪個(gè)為從設(shè)備只在drbd1機(jī)器上執(zhí)行如下命令：rootdrbd1 # drbdsetup /dev/drbd1 primary -force查看drbd運(yùn)行狀態(tài)，發(fā)現(xiàn)drbd正在同步數(shù)據(jù)rootdrbd1 # cat /proc/drbdversion: 8.4.0 (api:1/proto:86-100)GIT-hash: 28753f559ab51b549d16bcf487fe625d5919c49c build by rootdrbd1, 2011-12-27 15:00:40 1: cs:SyncSource ro:Primary/Secondary ds:UpToDate/Inconsistent C r- ns:1149952 nr:0 dw:0 dr:1158144 al:0 bm:69 lo:3 pe:1 ua:8 ap:0 ep:1 wo:b oos:19815188 . synced: 5.6% (19348/20472)M finish: 0:04:35 speed: 71,808 (71,808) K/sec這里需要等待一點(diǎn)時(shí)間，讓數(shù)據(jù)同步完成，然后執(zhí)行如下命令來(lái)使drbd1為drbd的主設(shè)備，只在drbd1上執(zhí)行：rootdrbd1 # drbdadm primary r0再看drbd的運(yùn)行狀態(tài)rootdrbd1 # cat /proc/drbdversion: 8.4.0 (api:1/proto:86-100)GIT-hash: 28753f559ab51b549d16bcf487fe625d5919c49c build by rootdrbd1, 2011-12-27 15:00:40 1: cs:Connected ro:Primary/Secondary ds:UpToDate/UpToDate C r-ns:20964116 nr:0 dw:0 dr:20964116 al:0 bm:1280 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:0可以看到drbd1現(xiàn)在為primary了，drbd2上正好相反：drbd1上查看角色rootdrbd1 # drbdadm role r0Primary/Secondarydrbd2上查看角色rootdrbd2 # drbdadm role r0Secondary/Primarydrbd設(shè)備，同一時(shí)間，只能在primary機(jī)器上被使用，因此這里只在drbd1上操作，對(duì)/dev/drbd1進(jìn)行格式化，并掛載rootdrbd1 # mkfs -t ext3 /dev/drbd1heartbeat安裝yum install heartbeatHeartbeat的主要配置文件有ha.cf、haresources、authkeys，在Heartbeat安裝后，默認(rèn)并沒有這三個(gè)文件，可以從官方網(wǎng)站下載得到，下載后放入/etc/ha.d/目錄，或者自己手工建也可以三個(gè)配置文件內(nèi)容如下ha.cfdebugfile /var/log/ha-debug #該文件保存heartbeat的調(diào)試信息logfile /var/log/ha-log # heartbeat的日志文件keepalive 2 #心跳的時(shí)間間隔，默認(rèn)時(shí)間單位為秒deadtime 30 #超出該時(shí)間間隔未收到對(duì)方節(jié)點(diǎn)的心跳，則認(rèn)為對(duì)方已經(jīng)死亡warntime 10 #超出該時(shí)間間隔未收到對(duì)方節(jié)點(diǎn)的心跳，則發(fā)出警告并記錄到日志中。initdead 120 #在某些系統(tǒng)上，系統(tǒng)啟動(dòng)或重啟之后需要經(jīng)過(guò)一段時(shí)間網(wǎng)絡(luò)才能正常工作，該選項(xiàng)用于解決這種情況產(chǎn)生的時(shí)間間隔。取值至少為deadtime的兩倍。udpport 694 #設(shè)置廣播通信使用的端口，694為默認(rèn)使用的端口號(hào)。ucast eth1 #此IP是對(duì)端口設(shè)備的心跳接口IPauto_failback on #的兩臺(tái)主機(jī)分別為主節(jié)點(diǎn)和從節(jié)點(diǎn)。主節(jié)點(diǎn)在正常情況下占用資源并運(yùn)行所有的服務(wù)，遇到故障時(shí)把資源交給從節(jié)點(diǎn)并由從節(jié)點(diǎn)運(yùn)行服務(wù)。在該選項(xiàng)設(shè)為on的情況下，一旦主節(jié)點(diǎn)恢復(fù)運(yùn)行，則自動(dòng)獲取資源并取代從節(jié)點(diǎn)，否則不取代從節(jié)點(diǎn)。node #節(jié)點(diǎn)主機(jī)名node #節(jié)點(diǎn)主機(jī)名authkeys文件內(nèi)容如下auth 11 crcauthkeys文件用于heartbeat的鑒權(quán)設(shè)置，共有三種可用的鑒權(quán)方式：crc、md5和sha1。三種方式安全性依次提高，但同時(shí)占用的系統(tǒng)資源也依次擴(kuò)大。crc安全性最低，適用于物理上比較安全的網(wǎng)絡(luò)，sha1提供最為有效的鑒權(quán)方式，占用的系統(tǒng)資源也最多。其配置語(yǔ)句格式如下：auth 設(shè)置如下：auth 1 1 sha1 key-for-sha1其中鍵值key-for-sha1可以任意指定，這里保留默認(rèn)的“HI！”，number設(shè)置必須保證上下一致。最后必須將authkeys的文件屬性設(shè)置為600# chmod 600 authkeysharesources文件內(nèi)容如下 172.16.1.