售后服務(wù)節(jié)點(diǎn)服務(wù)器群集及網(wǎng)絡(luò)存儲(chǔ)系統(tǒng)集成方案

1、 （售后服務(wù)）節(jié)點(diǎn)服務(wù) 器群集及網(wǎng)絡(luò)存儲(chǔ)系統(tǒng)集 成方案 夢(mèng)年的企業(yè)咨詢咸問經(jīng)理經(jīng)過實(shí)戰(zhàn)驗(yàn)證可以落地執(zhí)行的卓越萱理方案.值得您下誥擁有 Z B I C C B C G 0 5 3 3 2 A 信息中心 發(fā)布單位：中國(guó)核工業(yè)第五建設(shè)公司 AP1000 施工總承包部 版權(quán)聲明： 此文件內(nèi)容屬中國(guó)核工業(yè)第五建設(shè)公司所有，未經(jīng)同意不得引用、復(fù)制、借閱或發(fā)表目錄 1. 說明 3 2. 需求分析和選型原則 3 2.1 需求分析 3 2.2 選型原則 4 3.2 節(jié)點(diǎn)服務(wù)器群集介紹 5 4. 服務(wù)器群集方法比較 5 5. 網(wǎng)絡(luò)存儲(chǔ)系統(tǒng)技術(shù)介紹 6 5.1 網(wǎng)絡(luò)存儲(chǔ)技術(shù)分類 6 5.2 網(wǎng)絡(luò)存儲(chǔ)方式對(duì)比 7 6

2、. 網(wǎng)絡(luò)存儲(chǔ)技術(shù)方案整合 8 6.1NAS+SAN 方案 8 6.2NAS+SAN 融合構(gòu)架 9 7. 網(wǎng)絡(luò)存儲(chǔ)安全 10 8. 存儲(chǔ)方案總結(jié) 11 8.1 相同點(diǎn) 11 8.2 不同點(diǎn) 11 9. 總承包部網(wǎng)絡(luò)存儲(chǔ)部署方案 11 9.1 總包部存儲(chǔ)及服務(wù)器使用情況 11 9.2 部署方案選擇 14 9.3 產(chǎn)品的選型 14 10存儲(chǔ)系統(tǒng)劃分 15 ll.Oracle 數(shù)據(jù)庫集群部署 16 11.1Oracle 群集系統(tǒng)的介紹 16 11.2Windows 平臺(tái)下 Oracle 集群的安裝步驟 18 1. 說明 隨著總包部信息系統(tǒng)的深入應(yīng)用，信息系統(tǒng)內(nèi)的服務(wù)器擔(dān)負(fù)著總包部的關(guān)鍵 應(yīng)用，存儲(chǔ)著重

3、要的信息和數(shù)據(jù)，為總包部領(lǐng)導(dǎo)及決策部門提供綜合信息查詢服 務(wù)，因此，建立可靠的網(wǎng)絡(luò)群集存儲(chǔ)系統(tǒng)，保護(hù)關(guān)鍵應(yīng)用的數(shù)據(jù)安全是重中之重， 本方案是根據(jù) AP1000 三門核電項(xiàng)目信息系統(tǒng)的特點(diǎn)而編制的， 于總包部現(xiàn)有計(jì) 算機(jī)網(wǎng)絡(luò)平臺(tái)的基礎(chǔ)上，構(gòu)建壹套群集存儲(chǔ)系統(tǒng)，保證數(shù)據(jù)的完整性，避免數(shù)據(jù) 不會(huì)破壞和丟失。 2. 需求分析和選型原則 2.1 需求分析 隨著總承包部業(yè)務(wù)數(shù)據(jù)的增加和應(yīng)用對(duì)數(shù)據(jù)的依賴性的增強(qiáng)，數(shù)據(jù)的有效匯 集、集中管理、綜合分析以及容災(zāi)備份等處理要求日益提高，總承包部存儲(chǔ)系統(tǒng) 應(yīng)具備以下的需求： 數(shù)據(jù)集中化 數(shù)據(jù)存儲(chǔ)和管理集中化這種模式有利于總包部各項(xiàng)業(yè)務(wù)間的聯(lián)動(dòng)處理，且且 有利于實(shí)現(xiàn)分

4、級(jí)授權(quán)，加強(qiáng)控制和監(jiān)督，提高總包部集約化管理水平； 業(yè)務(wù)綜合化 業(yè)務(wù)綜合處理就是將各種業(yè)務(wù)緊密結(jié)合起來成為壹個(gè)整體，使得各系統(tǒng)之 間、部門之間信息共享，以消除總包部信息孤島現(xiàn)象，為數(shù)據(jù)挖掘和決策分析奠 定堅(jiān)實(shí)基礎(chǔ)； 數(shù)據(jù)安全性 存儲(chǔ)系統(tǒng)作為數(shù)據(jù)高度集中的系統(tǒng)，數(shù)據(jù)的安全是第壹位的，必須從網(wǎng)絡(luò)、 操作系統(tǒng)、數(shù)據(jù)庫、 存儲(chǔ)設(shè)備等方面建立起壹套嚴(yán)密的保障措施， 保證總包部、 用戶和業(yè)務(wù)數(shù)據(jù)的 100%可用； 高可靠性和高可用性 存儲(chǔ)系統(tǒng)的數(shù)據(jù)備份是保證數(shù)據(jù)高可靠、高可用的基本手段，于本地及異地建 立和業(yè)務(wù)系統(tǒng)相同的備份系統(tǒng)，或?qū)⒏鞣N系統(tǒng)的數(shù)據(jù)進(jìn)行實(shí)時(shí)備份，將大大提高 數(shù)據(jù)資源的可靠性； 效率和成本

5、總包部目前的數(shù)據(jù)由于比較分散，管理和備份均相當(dāng)?shù)碾y度，容易造成損壞或 丟失，安全性很低，新部署的存儲(chǔ)系統(tǒng)，數(shù)據(jù)需高度集中，管理和備份均非常方 便，能夠提高了工作效率同時(shí)也能夠降低系統(tǒng)成本； 兼容性和可擴(kuò)展性 由于總包部工作的進(jìn)壹步開展和擴(kuò)大， 數(shù)據(jù)量會(huì)迅速的增加，存儲(chǔ)系統(tǒng)的可 擴(kuò)展性尤為重要，良好的擴(kuò)展性能夠保證系統(tǒng)的連續(xù)性； 數(shù)據(jù)備份 存儲(chǔ)系統(tǒng)正式運(yùn)行后，數(shù)據(jù)及應(yīng)用系統(tǒng)均迫切需要行之有效的數(shù)據(jù)安全保護(hù) 措施，于此情況下，必須采取有效的數(shù)據(jù)備份手段，確保網(wǎng)絡(luò)系統(tǒng)、應(yīng)用系統(tǒng)的 高度安全，建立自動(dòng)化、跨平臺(tái)網(wǎng)絡(luò)備份管理系統(tǒng)有利于以后系統(tǒng)管理要求； 2.2 選型原則 先進(jìn)性 群集及網(wǎng)絡(luò)存儲(chǔ)集成系統(tǒng)采

6、用的技術(shù)必須是先進(jìn)而成熟的；當(dāng)下計(jì)算機(jī) 技術(shù)的發(fā)展日新月異，要保護(hù)總包部的投資就必須采用先進(jìn)的技術(shù)，且且這 種技術(shù)和產(chǎn)品必須被業(yè)界公認(rèn)為成熟且有發(fā)展前途的； 實(shí)用性 建設(shè)群集及網(wǎng)絡(luò)存儲(chǔ)集成系統(tǒng)的目的是要解決總包部數(shù)據(jù)信息的共享 和交換，提供現(xiàn)代化的管理，因此，部署存儲(chǔ)系統(tǒng)的出發(fā)點(diǎn)就是要滿足用戶 的信息要求； 經(jīng)濟(jì)性 于進(jìn)行設(shè)備選擇時(shí)不但要考慮采用技術(shù)的先進(jìn)、可靠，而且仍必須考慮 總包部的經(jīng)濟(jì)負(fù)擔(dān)。因此，群集及網(wǎng)絡(luò)存儲(chǔ)集成系統(tǒng)方案必須具備很高的性 價(jià)比； 高可管理性和高可靠性 由于總包部整個(gè)信息系統(tǒng)的數(shù)據(jù)采取集中式的存儲(chǔ)策略，所以群集及網(wǎng) 絡(luò)存儲(chǔ)集成系統(tǒng)必須具備很高的可管理性，另外，計(jì)算機(jī)網(wǎng)絡(luò)系

7、統(tǒng)的外部環(huán) 境是多變的，存儲(chǔ)方案必須能夠很方便地進(jìn)行調(diào)整，以滿足外部環(huán)境的變化； 高可擴(kuò)充性和升級(jí)能力 群集及網(wǎng)絡(luò)存儲(chǔ)集成系統(tǒng)方案必須能夠適應(yīng)總包部網(wǎng)絡(luò)系統(tǒng)發(fā)展的需 要，具備高可擴(kuò)充性和升級(jí)能力，存儲(chǔ)系統(tǒng)必須是能夠擴(kuò)充的，必須具備較 高的擴(kuò)展能力，而且隨著計(jì)算機(jī)技術(shù)的發(fā)展能夠?qū)Υ鎯?chǔ)局域網(wǎng)絡(luò)進(jìn)行升級(jí)； 開放性和標(biāo)準(zhǔn)化 群集及網(wǎng)絡(luò)存儲(chǔ)集成系統(tǒng)中所采用的技術(shù)和選用的產(chǎn)品均必須是目前 業(yè)界公認(rèn)的主流，而且必須滿足開放性的要求。 3. 2 節(jié)點(diǎn)服務(wù)器群集介紹 2 節(jié)點(diǎn)服務(wù)器群集是通過倆臺(tái)服務(wù)器共享壹個(gè)外部的磁盤存儲(chǔ)設(shè)備，所有要 求高可用的數(shù)據(jù)和應(yīng)用程序代碼存儲(chǔ)于共享的設(shè)備中，倆臺(tái)服務(wù)器分別對(duì)磁盤存 儲(chǔ)設(shè)

8、備具有訪問權(quán)，當(dāng)壹個(gè)服務(wù)器發(fā)生失效的時(shí)候，另外壹個(gè)服務(wù)器仍然能夠?qū)?共享存儲(chǔ)設(shè)備中的數(shù)據(jù)進(jìn)行訪問，客戶端網(wǎng)絡(luò)的訪問，能夠由這臺(tái)服務(wù)器繼續(xù)維 持。 4. 服務(wù)器群集方法比較 5. 網(wǎng)絡(luò)存儲(chǔ)系統(tǒng)技術(shù)介紹 眾所周知，目前主流存儲(chǔ)應(yīng)用的體系結(jié)構(gòu)主要有 DAS、NAS 和 SAN 三種模 式，三種模式從體系架構(gòu)的邏輯上見，有明顯的區(qū)別，根據(jù)總包部實(shí)際情況，本 方案必須符合性能、安全性、擴(kuò)展性、易用性、整體擁有成本、服務(wù)等要求。 5.1 網(wǎng)絡(luò)存儲(chǔ)技術(shù)分類 DAS DAS 是大型服務(wù)器采用的主要存儲(chǔ)方式，是指將外置存儲(chǔ)設(shè)備通過連接電 纜，直接連接到壹臺(tái)或多臺(tái)服務(wù)器上，采用直接外掛存儲(chǔ)方案的服務(wù)器結(jié)構(gòu)如同 P

9、C 機(jī)架構(gòu)，外部數(shù)據(jù)存儲(chǔ)設(shè)備采用 SCSI 技術(shù)，直接掛接于內(nèi)部總線上的方式， 數(shù)據(jù)存儲(chǔ)是整個(gè)服務(wù)器結(jié)構(gòu)的壹部分，于這種情況下往往是數(shù)據(jù)和操作系統(tǒng)均未 分離，DAS 這種直連方式，能夠解決單臺(tái)服務(wù)器的存儲(chǔ)空間擴(kuò)展、高性能傳輸需 求，且且單臺(tái)外置存儲(chǔ)系統(tǒng)的容量，已經(jīng)從不到 1TB，發(fā)展到了 2TB，隨著大容 量硬盤的推出，單臺(tái)外置存儲(chǔ)系統(tǒng)容量仍會(huì)上升，此外， DAS 仍能夠構(gòu)成基于磁 盤陣列的雙機(jī)高可用系統(tǒng)，滿足數(shù)據(jù)存儲(chǔ)對(duì)高可用的要求，從目前發(fā)展趨勢(shì)上見， DAS 仍然會(huì)作為壹種存儲(chǔ)模式，繼續(xù)得到應(yīng)用。 NAS NAS 設(shè)備主要用來實(shí)當(dāng)下不同操作系統(tǒng)平臺(tái)下的文件共享應(yīng)用，和傳統(tǒng)的服 務(wù)器或DAS

10、 存儲(chǔ)設(shè)備相比，NAS 設(shè)備的安裝、調(diào)試、使用和管理非常簡(jiǎn)單，采 用 NAS 能夠節(jié)省壹定的設(shè)備管理和維護(hù)費(fèi)用，NAS 設(shè)備提供 RJ-45 接口和單獨(dú) 的 IP 地址，能夠?qū)⑵渲苯訏旖佑谥鞲删W(wǎng)的交換機(jī)或其它局域網(wǎng)的桌面交換機(jī)上， 通過簡(jiǎn)單的設(shè)置就能夠于網(wǎng)絡(luò)即插即用地使用 NAS 設(shè)備，而且進(jìn)行網(wǎng)絡(luò)數(shù)據(jù)于 線擴(kuò)容時(shí)也無需停頓，從而保證數(shù)據(jù)流暢存儲(chǔ)。 SAN SAN 的支撐技術(shù)是光纖通道技術(shù)，光纖通道是 ANSI 為網(wǎng)絡(luò)和通道 I/O 接口 建立的壹個(gè)標(biāo)準(zhǔn)集成，支持 HIPPI、IPI、SCSI、IP、ATM 等多種高級(jí)協(xié)議，它 的最大特性是將網(wǎng)絡(luò)和設(shè)備的通訊協(xié)議和傳輸物理介質(zhì)隔離開，這樣多種協(xié)

11、議可 于同壹個(gè)物理連接上同時(shí)傳送，高性能存儲(chǔ)體和寬帶網(wǎng)絡(luò)使用單 I/O 接口，使得 系統(tǒng)的成本和復(fù)雜程度大大降低，光纖通道支持多種拓?fù)浣Y(jié)構(gòu)。 5.2 網(wǎng)絡(luò)存儲(chǔ)方式對(duì)比 NAS 1） 特點(diǎn) NAS 可理解為是壹整套的網(wǎng)絡(luò)存儲(chǔ)服務(wù)器產(chǎn)品，它和客戶之間通過 NFS 和 CIFS 協(xié)議通信，網(wǎng)絡(luò)中多個(gè)不同操作系統(tǒng)的應(yīng)用服務(wù)器均支持這倆個(gè)協(xié) 議，于服務(wù)器集群系統(tǒng)尤其顯得重要，能夠?qū)崿F(xiàn)不同操作系統(tǒng)之間文件共享， 即異構(gòu)平臺(tái)實(shí)現(xiàn)文件共享； 2） 缺點(diǎn) 單壹連入網(wǎng)絡(luò)容易單點(diǎn)失敗，壹旦出錯(cuò)，系統(tǒng)將無法訪問數(shù)據(jù)； 擴(kuò)張性能方面，NAS 不保證服務(wù)持續(xù)，添加新的磁盤將引起服務(wù)中 斷； NAS 是提供文件級(jí)的訪問，經(jīng)

12、過 TCP/IP 打包才能傳輸數(shù)據(jù)，打包 解包影響傳輸速度；NAS 的備份和恢復(fù)相當(dāng)困難，備份時(shí)間依數(shù)據(jù)量而定，容易使網(wǎng)絡(luò) 飽和； 因此 NAS 不能滿足事務(wù)處理。 522 SAN 1） 特點(diǎn) SAN 可理解為壹個(gè)專用網(wǎng)絡(luò)，能夠把壹個(gè)或多個(gè)系統(tǒng)連接到存儲(chǔ)設(shè)備和 子系統(tǒng)，是負(fù)責(zé)存儲(chǔ)傳輸?shù)摹昂蠖恕本W(wǎng)絡(luò)，而“前端”網(wǎng)絡(luò)（即數(shù)據(jù)網(wǎng)絡(luò)） 負(fù)責(zé)正常的數(shù)據(jù)傳輸，SAN 主要通過 FibreChannel 連接，于光纖協(xié)議上映 射 SCSImingling，實(shí)現(xiàn)塊級(jí)數(shù)據(jù)訪問，能夠?qū)崿F(xiàn)高可用性、高擴(kuò)張性、集 中存儲(chǔ)、較小備份周期等。 2） 缺點(diǎn) 只實(shí)現(xiàn)設(shè)備及共享，各個(gè)客戶端的存儲(chǔ)空間是分離的； 通過 Fibre

13、Channel 實(shí)現(xiàn)連接，設(shè)備價(jià)格高昂，SAN 的實(shí)現(xiàn)需要相當(dāng) 高的費(fèi)用；同時(shí)網(wǎng)絡(luò)維護(hù)也需要相當(dāng)?shù)拈_銷； 6. 網(wǎng)絡(luò)存儲(chǔ)技術(shù)方案整合 6.1 NAS+SAN 方案 NAS+SAN 網(wǎng)絡(luò)存儲(chǔ)方案適合于大型企業(yè)存儲(chǔ)，將倆種方式進(jìn)行融合，根據(jù) 總包部實(shí)際需要進(jìn)行選擇組合，即能夠使用以 NAS 為主、SAN 為輔，也能夠使 用 SAN 為主、NAS為輔； 6.1.1 NAS 為主、SAN 為輔 NAS 為主的整合方法是將 NAS 中的操作系統(tǒng)和存儲(chǔ)服務(wù)器分開，通過 SAN 連接操作系統(tǒng)和存儲(chǔ)資源，對(duì)外通過 NFS 和 CIFS 協(xié)議提供基于文件級(jí)的數(shù)據(jù)訪 問，同時(shí)仍能夠通過 ISCSI 協(xié)議提供對(duì)基于

14、塊數(shù)據(jù)級(jí)訪問。網(wǎng)絡(luò)能夠利用 SAN 來統(tǒng)壹管理存儲(chǔ)資源，且進(jìn)行高效備份和遠(yuǎn)程容災(zāi)，仍能夠通過存儲(chǔ)服務(wù)器，對(duì) 外提供異構(gòu)平臺(tái)數(shù)據(jù)共享，不過通過存儲(chǔ)器訪問存儲(chǔ)資源，會(huì)有壹定開銷，拓樸 圖如下： 6.1.2 SAN 為主、NAS 為輔 SAN 為主、NAS 為輔的方法是將應(yīng)用服務(wù)器中文件系統(tǒng)功能剝離出來，集 中到元數(shù)據(jù)服務(wù)器，對(duì)外通過直接提供和 SAN 相連，且通過存儲(chǔ)服務(wù)器實(shí)現(xiàn)塊 級(jí)數(shù)據(jù)的訪問，對(duì)于訪問文件級(jí)數(shù)據(jù)而言，需要通過元數(shù)據(jù)服務(wù)器訪問 SAN，對(duì) 元數(shù)據(jù)服務(wù)器會(huì)產(chǎn)生而外開銷，拓樸圖如下： 6.2 NAS+SAN 融合構(gòu)架 存儲(chǔ)服務(wù)器為 NAS 服務(wù)器，其他服務(wù)器除了和以太網(wǎng)連接外，仍和 S

15、AN 直 接連接，即解決了 NAS 單點(diǎn)失敗問題，也解決了 SAN 塊級(jí)數(shù)據(jù)訪問問題。此方 案能夠滿足上述 2個(gè)系統(tǒng)的存儲(chǔ)需求，又有較高的 I/O 速度，實(shí)現(xiàn)數(shù)據(jù)備份和遠(yuǎn) 程容災(zāi)，提供較高可靠性，因此，此方案適合很多大中型企業(yè)，不僅可應(yīng)用于關(guān) 鍵業(yè)務(wù)，也能夠?qū)崿F(xiàn)文件級(jí)和塊級(jí)數(shù)據(jù)訪問，部署結(jié)構(gòu)圖如下： 7. 網(wǎng)絡(luò)存儲(chǔ)安全 存儲(chǔ)安全實(shí)質(zhì)上是指系統(tǒng)中的數(shù)據(jù)受到保護(hù)，不受偶然的或者惡意的原因而 遭到破壞、更改、泄露，系統(tǒng)可連續(xù)可靠正常地運(yùn)行；因此，于網(wǎng)絡(luò)存儲(chǔ)選型時(shí) 必須考慮其安全性且保證符合以下要求： 保密性：存儲(chǔ)信息不泄露給非授權(quán)用戶、實(shí)體或過程； 完整性：數(shù)據(jù)未經(jīng)授權(quán)不能進(jìn)行改變的特性；即信息于存

16、儲(chǔ)或傳輸過程 中保持不被惡意修改、破壞和丟失； 可用性： 可被授權(quán)實(shí)體訪問且按需求使用的特性， 即當(dāng)需要時(shí)能否存取 所需的信息； 可控性：對(duì)存儲(chǔ)信息及內(nèi)容具有控制能力。 8. 存儲(chǔ)方案總結(jié) NAS、SAN 和傳統(tǒng)網(wǎng)絡(luò)存儲(chǔ)技術(shù)相比而言，無論是從網(wǎng)絡(luò)傳輸帶寬、數(shù)據(jù)共 享性仍是從存儲(chǔ)容量的可擴(kuò)充性、 數(shù)據(jù)的壹體化和安全性等方面來說， 其優(yōu)越性 是不言而喻的， 所以，我們于選擇存儲(chǔ)方案時(shí)，實(shí)際上也是就對(duì) NAS 和 SAN 的 擇擇了，能夠說，NAS 和 SAN 各有其長(zhǎng)短之處，于實(shí)際應(yīng)用中也各有不同之處， 對(duì)于經(jīng)濟(jì)實(shí)力不足,有傳統(tǒng)以太網(wǎng)絡(luò)，且急需擴(kuò)充存儲(chǔ)空間的用戶，NAS 無疑是 壹種便宜、快速的方

17、案，而對(duì)于擁有強(qiáng)大經(jīng)濟(jì)后盾，對(duì)網(wǎng)絡(luò)性能要求較高及未來 發(fā)展勢(shì)頭強(qiáng)勁的用戶，則應(yīng)該選擇 SAN 或者選擇 NAS+SAN 模式； 8.1 相同點(diǎn) NAS 和 SAN 也有許多共同的特點(diǎn)，它們均提供集中化的數(shù)據(jù)存儲(chǔ)和整合優(yōu) 化，均能有效的存取文件，均允許于眾多的主機(jī)間共享且支持多種操作系統(tǒng)，均 允許從應(yīng)用服務(wù)器上分離存儲(chǔ)。而且，它們均提供數(shù)據(jù)的高可用性，均能通過冗 余部件和 RAID 保證數(shù)據(jù)的完整性； 8.2 不同點(diǎn) 實(shí)施和維護(hù)的難易程度不同； 二者的設(shè)備管理難易成度不同； 9. 總承包部網(wǎng)絡(luò)存儲(chǔ)部署方案 9.1 總包部存儲(chǔ)及服務(wù)器使用情況 總包部原有 2 臺(tái) IBMNETFinity7000

18、服務(wù)器、壹臺(tái)磁盤陣列和壹臺(tái)磁帶機(jī)， 磁盤陣列和服務(wù)器僅用于數(shù)據(jù)庫群集使用，目前，由于設(shè)備老化原因，已經(jīng)按照 正常程序報(bào)廢，目前總包部的存儲(chǔ)方式采用不同服務(wù)器之間進(jìn)行數(shù)據(jù)互為備份， 由于數(shù)據(jù)比較分散等原因，管理和備份均相當(dāng)?shù)碾y度，容易造成損壞或丟失，安 全性很低，因此，隨著總包部數(shù)據(jù)量的不斷增加，急需擴(kuò)展存儲(chǔ)容量 . 9.1.1 服務(wù)器目前使用情況 9.1.2 服務(wù)器資源整合 9.2 部署方案選擇 從系統(tǒng)的兼容性、穩(wěn)定性和可靠性角度出發(fā)，且且考慮保護(hù)項(xiàng)目部已有的投資， 經(jīng)過市場(chǎng)調(diào)研和信息中心分析，認(rèn)為選擇基于 SAN 架構(gòu)的數(shù)據(jù)存儲(chǔ)方案能夠滿 足要求； 本方案中使用光纖通道交換機(jī)、本地磁盤陣列、

19、備份磁帶庫及遠(yuǎn)程容災(zāi)磁盤 陣列組成SAN 系統(tǒng)，為不同平臺(tái)的操作系統(tǒng)和磁盤系統(tǒng)提供支持，為容災(zāi)備份 提供無縫支持，且且能夠?qū)?dāng)下已有的投資和長(zhǎng)期的存儲(chǔ)解決方案結(jié)合起來，建 立壹個(gè)可擴(kuò)展、易管理、能夠靈活地適應(yīng)不可預(yù)見的存儲(chǔ)需要的網(wǎng)絡(luò)存儲(chǔ)環(huán)境。 9.3 產(chǎn)品的選型 10. 存儲(chǔ)系統(tǒng)劃分 11. Oracle 數(shù)據(jù)庫集群部署 11.1 Oracle 群集系統(tǒng)的介紹 11.1.1 Oracle 集群體系統(tǒng)結(jié)構(gòu) Oracle 集群實(shí)際是使用 2 臺(tái)或多臺(tái)服務(wù)器訪問同壹 Oracle 數(shù)據(jù)庫，這樣壹 方面能夠避免壹臺(tái)服務(wù)器務(wù)器出現(xiàn)故障時(shí)數(shù)據(jù)庫不能正常使用數(shù)據(jù)庫，同時(shí)也能 夠進(jìn)行且行運(yùn)算或負(fù)載均衡。從軟件

20、組件上講，oracle 集群由 2 臺(tái)或 2 臺(tái)之上服 務(wù)器組成，每臺(tái)服務(wù)器有自已的臨聽器，用于臨聽自已的網(wǎng)絡(luò)端口，每臺(tái)服務(wù)器 有自已的 OracleRAC服務(wù)，用于數(shù)據(jù)庫的集群訪問；每臺(tái)服務(wù)器有自已的集群 就緒服務(wù)，用于集群管理；所有的服務(wù)器通過自已的操作系統(tǒng)訪問壹個(gè)共享的存 儲(chǔ)設(shè)備， 共享存儲(chǔ)設(shè)備的存儲(chǔ)設(shè)備的存儲(chǔ)機(jī)制可使用裸設(shè)備（ Raw），集群文件 系統(tǒng)（OCFS），自動(dòng)存儲(chǔ)管理（ASM）或網(wǎng)絡(luò)區(qū)域存儲(chǔ)（NAS ），當(dāng)客戶端訪問時(shí)， 由上而下依次調(diào)用相應(yīng)的軟件。 11.1.2 群集部署軟件的組成 要安裝 Oracle 集群，至少需要倆個(gè)軟件，分別為： Oracle 數(shù)據(jù)庫軟件和 Orac

21、leClusterWare ;從邏輯結(jié)絕上講，集群中的每臺(tái)服務(wù)器有壹個(gè)實(shí)例，每臺(tái) 服務(wù)器上的實(shí)例均對(duì)應(yīng)到同壹個(gè)數(shù)據(jù)庫，詳情如下圖所示： 從上圖中能夠見出，于集群中有倆臺(tái)服務(wù)器，每臺(tái)服務(wù)器 個(gè)實(shí)例均訪問同壹個(gè)數(shù)據(jù)庫，數(shù)據(jù)庫存儲(chǔ)于共享磁盤上，關(guān)于 能夠存儲(chǔ)于本地磁盤上，也能夠存儲(chǔ)于共享磁盤上，關(guān)鍵取決于安時(shí)選擇的存儲(chǔ) 機(jī)制。 2） Oracle 集群的存儲(chǔ)機(jī)制 序 號(hào) 項(xiàng)目 存儲(chǔ)系統(tǒng) 存儲(chǔ)位置 備注 1 ClusterWare 軟件 NTFS 本地磁盤 有壹個(gè)實(shí)便，每 Oracle 軟件，即 最少地磁盤盤間 ClusterWare 軟件 RAC集群軟 Oracle 軟件 OCR（Oracle集群注

22、冊(cè)） - Oracle數(shù)據(jù)庫軟件 Voti ngDisk 數(shù)據(jù)記!錄信群集 存儲(chǔ)集群配 100M 匕、 200M 1.5G RAC數(shù)據(jù)庫 存儲(chǔ)所有數(shù)據(jù)庫文件 根據(jù)數(shù)據(jù)量來確定 恢復(fù)文件(RecoveryFile) 用于快速恢復(fù)數(shù)據(jù) 3G Oracle 集群的存儲(chǔ)選項(xiàng) 11.1.3 1）軟件和空間 說明 項(xiàng)目 2 Voti ngDisk OCFS、Rawdevice 共享磁盤 3 OCR（Oracle集群注冊(cè)） OCFS、Rawdevice 共享磁盤 4 Oracle數(shù)據(jù)庫軟件 OCFS（共享）、NTFS （本 地） 本地磁盤或共享磁 盤 5 RAC數(shù)據(jù)庫 OCFS、ASM、 Rawdevice

23、 共享磁盤 6 恢復(fù)文件（RecoveryFile） OCFS、ASM 共享磁盤 3）存儲(chǔ)機(jī)制的選擇 從下表能夠見出，要想使用單壹文件系統(tǒng)，必須使用 OCFS 文件系統(tǒng)， 可是，由于 oracle 提供了非常方便的存儲(chǔ)管理系統(tǒng) ASM，因此，此方案中 我們采用 OCFS來存儲(chǔ) Clusterware 的數(shù)據(jù)和 oracle 數(shù)據(jù)庫軟件，使用 ASM 來存放數(shù)據(jù)庫文件。 骨口. 序號(hào) 存儲(chǔ)選項(xiàng) 支持的文件類型 備注 Clusterware 數(shù)據(jù)庫 恢復(fù)文件 1 ASM 否 是 是 2 OCFS 是 是 是 3 RawDevice 是 是 否 11.2 Windows 平臺(tái)下 Oracle 集群的

24、安裝步驟 11.2.1 安裝前的準(zhǔn)備工作 1）系統(tǒng)要求 骨口. 序號(hào) 項(xiàng)目 要求 備注 1 體系結(jié)構(gòu) 32 位 2 操作系統(tǒng) wi ndowsserver2003+SP2 3 內(nèi)存 2G 4 網(wǎng)絡(luò)協(xié)議 TCP/IP 5 網(wǎng)絡(luò)適配器 2*NIC 6 瀏覽器 IE6.0之上 2）網(wǎng)絡(luò)規(guī)劃 骨口. 序號(hào) 主機(jī)名 類型 IP地址 注冊(cè)位置 備注 1 RAC01.Sa nmen .Local 公共 172.23.0.21 DNS 2 RAC02.Sa nmen .Local 公共 172.23.0.22 DNS 3 VIP01.Sa nemn. local 虛擬 172.23.0.1 DNS 4 VIP

25、02.Sa nmen .local 虛擬 172.23.0.2 DNS 5 Node1 專用 10.1.1.1 主機(jī)文件 6 NOde2 專用 10.1.1.2 主機(jī)文件 3）數(shù)據(jù)存儲(chǔ)策略 序 號(hào) 項(xiàng)目 存儲(chǔ)系統(tǒng) 存儲(chǔ)位置 備注 1 ClusterWare 軟件 NTFS 本地磁盤 2 Voti ngDisk OCFS 共享磁盤 3 OCR（Oracle集群注冊(cè)） OCFS 共享磁盤 4 Oracle數(shù)據(jù)庫軟件 OCFS 共享磁盤 5 RAC數(shù)據(jù)庫 OCFS 共享磁盤 6 恢復(fù)文件(RecoveryFile) OCFS 共享磁盤 11.2.2 安裝集群就緒軟件 1） 關(guān)閉磁盤寫緩存 于安裝集群

26、就緒軟件之前，需要分別于倆節(jié)點(diǎn)上關(guān)閉磁盤寫緩存，方法為， 打開 windows磁盤管理器，于共享磁盤上點(diǎn)右鍵，選擇“屬性”于“屬性” 對(duì)話框中，選擇“策略”標(biāo)簽，于策略標(biāo)簽中將“啟用磁盤上的寫入緩存” 復(fù)選框去掉。 2） 開啟 windows2003 磁盤自動(dòng)加載功能 由于此方案使用的系統(tǒng)是 windows2003 ，存儲(chǔ)策略選擇了 OCFS, ASM 等 存儲(chǔ)系統(tǒng)， 因此必須開啟磁盤自動(dòng)加載功能，于 Win dows2003 中開啟自動(dòng)加載功能，使 用 diskpart 工具即可，首先于 windows2003 的命令行運(yùn)行 diskpart 命令，然 后于 diskpart 的提示符下運(yùn)行

27、automountenable 命令即可，完成后運(yùn)行 exit 命令退出 diskpart 工具。 3）創(chuàng)建磁盤分區(qū) 根據(jù)磁盤分配規(guī)劃，于節(jié)點(diǎn) 1 上創(chuàng)建磁盤分區(qū)，且且于創(chuàng)建分區(qū)時(shí)不要 分配盤符，也不要格式化。 4） 設(shè)置網(wǎng)絡(luò) 根據(jù) 10.2.1 中的第 2 點(diǎn)，于節(jié)點(diǎn) 1 和節(jié)點(diǎn) 2 上，將本地連接重名為 Public, 本地連接 2 重命名為 pvivate，注意，配置完之后，再使用 ipconfig 查見網(wǎng) 絡(luò)設(shè)置時(shí)，要確保public 被列于第壹個(gè)。 5） 主機(jī)名稱解析 由于主機(jī)名，除 NODE1、NODE2 夕卜，其他均通過 DNS 服務(wù)器來解析， 因此，我們只需要于 Hosts 文

28、中解析用于內(nèi)部通信的主機(jī)名，方法為，分別 編輯節(jié)點(diǎn) 1 和節(jié)點(diǎn) 2 上的 C:windowssystem32driversetchosts 文件, 于文件內(nèi)輸入如下內(nèi)容： 1O.1.1.1NODE1 1O.1.1.2NODE2 6） 重新啟動(dòng)節(jié)點(diǎn) 為了確保配置生效，需要對(duì)倆節(jié)點(diǎn)進(jìn)行重新啟動(dòng)，啟動(dòng)節(jié)點(diǎn)后，檢查每 個(gè)節(jié)瞇的磁盤管理，確保于每個(gè)節(jié)點(diǎn)上沒有給共享磁盤的分區(qū)分配盤符，如 有發(fā)現(xiàn)某節(jié)點(diǎn)給共享磁盤的分區(qū)他配了盤符，刪除盤符分配，且重新啟動(dòng)該 節(jié)點(diǎn)。 7） 開始安裝 于其中壹個(gè)節(jié)點(diǎn)上執(zhí)行安裝程序 setup，進(jìn)入 Clusterware 的安裝界面， 點(diǎn)擊“下壹步”繼續(xù)。 8） 設(shè)置安裝目錄

29、指定 OracleHome 的名稱和安裝的目錄位置，因?yàn)?CRS 為集群就緒軟 件，于集群起來之前，每個(gè)節(jié)點(diǎn)必須要啟動(dòng)該軟件，所以只能將其安裝于各 個(gè)節(jié)點(diǎn)的本地磁盤上。 9） 安裝條件檢測(cè) 安裝程序會(huì)自動(dòng)進(jìn)行安裝條件檢測(cè)，如果沒有方案錯(cuò)誤，則點(diǎn)擊“下壹 步”繼續(xù)，如果方案錯(cuò)誤，根根錯(cuò)誤提示作相應(yīng)的設(shè)置。 10） 指定集群配置 指定集群名稱及集群節(jié)點(diǎn)的關(guān)聯(lián)信息，關(guān)聯(lián)配置參見 10.2.1 中的第 2 點(diǎn)； 11） 指定網(wǎng)絡(luò)接口用途 于確保設(shè)置了公用 IP （用于外部通訊）的網(wǎng)絡(luò)接口類型是公用的，設(shè)置 了私網(wǎng) IP （用于內(nèi)部通訊）的網(wǎng)絡(luò)接口的類型為專用的，如果有錯(cuò)，于確定 配置正確的前提下能夠點(diǎn)

30、擊“編輯”進(jìn)行手工修改，完成后點(diǎn)擊“下壹步” 繼續(xù)。 12） 配置存儲(chǔ)選項(xiàng) 于存儲(chǔ)選項(xiàng)配置中，列出了可用的磁盤分區(qū)，根據(jù)磁盤分配方案選中關(guān) 聯(lián)的分區(qū)，點(diǎn)擊“編輯”將出現(xiàn)指定的磁盤配置對(duì)話框，分別選擇：“用 CFS 來格式化分區(qū)”，“將分區(qū)用于存儲(chǔ)軟件”，且為該分區(qū)指定壹個(gè)于倆個(gè)節(jié) 上均能使用的盤符，然后點(diǎn)擊“確定”確認(rèn)配置，依次選擇第二分區(qū)，根據(jù) 用途對(duì)磁盤進(jìn)行相應(yīng)的處理，完成磁盤配置后，點(diǎn)擊“下壹步”繼續(xù)，此時(shí) 會(huì)出現(xiàn)壹些警告信息，提示是否需要對(duì) OCR 和表決盤做冗余。 13） 開始安裝軟件 出現(xiàn)安裝概要后，查見各項(xiàng)概要是否符合要求，點(diǎn)擊“安裝”開始安裝 軟件，此時(shí)，請(qǐng)耐心等待安裝過程，安

31、裝完成后點(diǎn)擊“退出”程序。 11.2.3 安裝 Oracle 數(shù)據(jù)庫軟件 1） 執(zhí)行安裝程序 將數(shù)據(jù)庫光盤插入光驅(qū)中或?qū)?oracle 源程序復(fù)制到服務(wù)器中，然后執(zhí)行 SETUP.EXE 程序，待出現(xiàn)安裝界面后，點(diǎn)擊“下壹步”繼續(xù)。 2） 選擇安裝類型 于安裝類型擇時(shí)，選擇“企業(yè)版”。 3） 選擇軟件的安裝位置 由于本方案采用 OCFS 存儲(chǔ)系統(tǒng)，于創(chuàng)建 OCFS 時(shí)，將軟件安裝于已規(guī) 劃好的共享盤符中。 4） 選擇安裝模式 于安裝模式中，選擇集群安半，且選中要集群的所有節(jié)點(diǎn)，然后點(diǎn)擊“下 壹步”繼續(xù)，注意：只有安裝了集群就緒軟件，才會(huì)有集群安裝選項(xiàng)。 5） 檢查安裝條件 安裝程會(huì)自動(dòng)檢測(cè)系統(tǒng)環(huán)境是否滿足安裝條件，如果不能滿足，根據(jù)錯(cuò) 誤碼提示進(jìn)行調(diào)整，如沒有錯(cuò)誤，點(diǎn)擊“下壹步”繼續(xù)。 6） 選擇配置選擇 于配置選項(xiàng)中，選擇“僅安裝數(shù)據(jù)庫