Teradata高可用性方案介紹

2009.01.22Teradata高可用性解決方案背景傳統(tǒng)上，高可用性側(cè)重于對(duì)企業(yè)級(jí)的實(shí)時(shí)業(yè)務(wù)系統(tǒng)的保障隨著國內(nèi)銀行發(fā)展方式由粗放式往集約式的轉(zhuǎn)變，分析類應(yīng)用對(duì)于銀行的經(jīng)營和決策支持越來越重要，已經(jīng)成為銀行IT系統(tǒng)中不可或缺的重要組成部分?jǐn)?shù)據(jù)倉庫在CCB經(jīng)過近4年的發(fā)展，已經(jīng)逐步穩(wěn)定，并將逐步為一些重要的業(yè)務(wù)系統(tǒng)提供數(shù)據(jù)支持，因此，對(duì)于數(shù)據(jù)倉庫高可用性也產(chǎn)生了更高的要求如何平衡系統(tǒng)可用性的投入和系統(tǒng)不可用帶來的業(yè)務(wù)收入的損失每年系統(tǒng)不可用的小時(shí)數(shù)0縮短系統(tǒng)恢復(fù)時(shí)間的成本由于系統(tǒng)不可用導(dǎo)致的業(yè)務(wù)收入的損失$高可用性的價(jià)值—保護(hù)數(shù)據(jù)倉庫投資價(jià)值業(yè)務(wù)收入的損失大于高可用性投入上節(jié)省的成本高可用性的投入過多系統(tǒng)目標(biāo)所有的風(fēng)險(xiǎn)都是對(duì)業(yè)務(wù)而言高可用性可以保證數(shù)據(jù)倉庫的業(yè)務(wù)價(jià)值，減少系統(tǒng)故障導(dǎo)致的業(yè)務(wù)損失應(yīng)該由業(yè)務(wù)的需求來決定業(yè)務(wù)可持續(xù)性（系統(tǒng)高可用性）的目標(biāo)從而決定在高可用性上的投入Teradata高可用性總體解決方案Teradata高可用性總體解決方案Teradata提供的缺省方案缺省的高可用性方案是Teradata的數(shù)據(jù)倉庫體系架構(gòu)所決定的一種與生倶來的特征，也是Teradata硬件、軟件集成后所產(chǎn)生的一種高附加值的效能。右圖所示是Teradata數(shù)據(jù)倉庫的典型架構(gòu)，主要提供了三種系統(tǒng)高可用性方案：硬件冗余技術(shù)RAID保護(hù)技術(shù)Clique技術(shù)Teradata提供的缺省方案（續(xù)）硬件冗余技術(shù)BYNEY網(wǎng)絡(luò)保護(hù)電源保護(hù)磁盤陣列保護(hù)節(jié)點(diǎn)保護(hù)RAID保護(hù)技術(shù)支持RAID1和RAID5兩種方式銀行業(yè)通常選擇RAID1方式Clique技術(shù)Teradata數(shù)據(jù)倉庫架構(gòu)中的基本概念，是由一組節(jié)點(diǎn)與磁盤陣列通過光纖線連接在一起形成了一個(gè)Clique組。在一個(gè)Clique組里，所有的節(jié)點(diǎn)共享一組磁盤陣列。在每個(gè)Clique中某臺(tái)節(jié)點(diǎn)產(chǎn)生故障時(shí)，同一個(gè)Clique中的其它節(jié)點(diǎn)會(huì)接管故障節(jié)點(diǎn)上的所有的AMP，保證數(shù)據(jù)倉庫業(yè)務(wù)的不間斷（會(huì)有一定的性能損失）。Teradata高可用性總體解決方案HSNHSNHSNSystemPerformanceNode

Node

Node

Node

Node

Node

HSN實(shí)現(xiàn)高可用性的價(jià)值Teradata提供的可選方案—熱備節(jié)點(diǎn)技術(shù)沒有

HSN系統(tǒng)宕機(jī)50%67%有

HSN100%100%100%HotStandbyNodes

(HSN)=高可用性和性能的持續(xù)性一個(gè)節(jié)點(diǎn)失敗后，HSN立即接管了這個(gè)節(jié)點(diǎn)的軟件和硬件避免了數(shù)據(jù)庫性能的大幅下降，減少了因故障節(jié)點(diǎn)修復(fù)后重返clique需要的數(shù)據(jù)庫重啟對(duì)于關(guān)鍵業(yè)務(wù)系統(tǒng)非常有效

5500Node

5500Node5500Node5500NodeDualBYNETInterconnectsStorageHSN一個(gè)node故障后Teradata提供的可選方案—數(shù)據(jù)備份恢復(fù)與歸檔數(shù)據(jù)保護(hù)的工業(yè)標(biāo)準(zhǔn)成本最低的恢復(fù)手段提供以下情況下的數(shù)據(jù)保護(hù)硬件失敗自然災(zāi)害應(yīng)用失敗或錯(cuò)誤數(shù)據(jù)損害或丟失人為錯(cuò)誤對(duì)長期數(shù)據(jù)歸檔,滿足客戶管理和使用的要求作為災(zāi)難備份和恢復(fù)的主要解決方案Teradata支持三種最好的軟件解決方案業(yè)內(nèi)最好的硬件提供商最好的服務(wù)為客戶量身定制特定服務(wù)Teradata提供的可選方案—FALLBACK技術(shù)為了加強(qiáng)系統(tǒng)的安全性和高可用性，Teradata還提供了一個(gè)FallBack的選項(xiàng)，它也是人工定義的。定義一個(gè)表時(shí)，可以定義該表使用"FALLBACK"選項(xiàng)或者"NOFALLBACK"選項(xiàng)。

FallBack的原理很簡單，就是在磁盤的另一個(gè)位置再保存一份相同的記錄，這樣，當(dāng)原始數(shù)據(jù)所在存儲(chǔ)單元發(fā)生故障時(shí)，可以使用其備份，并且不會(huì)中斷原來的交易處理過程。當(dāng)然，這是以額份的存儲(chǔ)空間作為代價(jià)的。

Teradata高可用性總體解決方案Teradata提供的最佳方案—DualActiveSystemsTeradata雙活動(dòng)系統(tǒng)（DualActiveSystem）是為了滿足用戶提出的業(yè)務(wù)連續(xù)性和高可用性而提供的一種完整的系統(tǒng)解決方案，它包括了Teradata的產(chǎn)品（包括硬件、軟件）和專業(yè)服務(wù)。雙活動(dòng)Teradata系統(tǒng)一般情況下使用在有關(guān)鍵應(yīng)用、要求系統(tǒng)不間斷運(yùn)行，并能有效的防止有計(jì)劃性的停機(jī)或非計(jì)劃性停產(chǎn)造成的影響的場合中。另外，一般情況下，雙活動(dòng)系統(tǒng)中的兩個(gè)系統(tǒng)分別放置于距離比較遠(yuǎn)兩個(gè)地方，可以有效的防止由于自然災(zāi)害因素對(duì)系統(tǒng)造成的影響。DualActiveSystems的系統(tǒng)架構(gòu)TeradataSystemATeradataSystemBTeradataQuery

DirectorTeradataQuery

DirectorReplicationDualLoadDataSynchronizationQueryRoutingMonitoringAdministrationOperationalControlMonitoring&ControlUsers/

ApplicationsUsers/

ApplicationsUsers/

ApplicationsDualActiveSystems的關(guān)鍵要素Teradata系統(tǒng)：兩套由Teradata硬件、軟件組成的完整的數(shù)據(jù)倉庫系統(tǒng)。任務(wù)的分配（TQD）：在兩套系統(tǒng)都正常運(yùn)行的情況下，它可以在兩套系統(tǒng)之間分配任務(wù)，或是指定特定的任務(wù)到特定的系統(tǒng)中。當(dāng)其中一套系統(tǒng)意外中斷時(shí)，它可以自動(dòng)將切換所有的任務(wù)到另外一套系統(tǒng)中。數(shù)據(jù)同步（DataSynchonizaiton）：這是雙活動(dòng)系統(tǒng)的最基本的功能，要求兩套系統(tǒng)保留相同的數(shù)據(jù)。系統(tǒng)管理：包括對(duì)雙活動(dòng)系統(tǒng)的監(jiān)控、管理和應(yīng)用的控制等功能，保證雙系統(tǒng)的正常運(yùn)作。DualActiveSystems的價(jià)值消除單點(diǎn)故障消除非計(jì)劃停機(jī)的影響消除系統(tǒng)維護(hù)的規(guī)劃停機(jī)時(shí)間的影響保持同一版本的數(shù)據(jù)對(duì)用戶與應(yīng)用透明讓用戶感覺到是保障響應(yīng)時(shí)間的前提下的連續(xù)的性能體驗(yàn)充分利用現(xiàn)有投資，在成本有效性基礎(chǔ)上的負(fù)載均衡的解決方案合理利用現(xiàn)有系統(tǒng)作為備份系統(tǒng)是完成關(guān)鍵業(yè)務(wù)的數(shù)據(jù)倉庫環(huán)境為關(guān)鍵應(yīng)用提供有保護(hù)的數(shù)據(jù)倉庫環(huán)境價(jià)值雙系統(tǒng)的三種實(shí)現(xiàn)方式方式一第二套系統(tǒng)既可以單純作為災(zāi)備系統(tǒng)，也可以兼用作開發(fā)和測(cè)試系統(tǒng)當(dāng)需要時(shí)，系統(tǒng)可以被恢復(fù)，用來接管生產(chǎn)系統(tǒng)的工作方式二兩個(gè)系統(tǒng)保持相同的數(shù)據(jù)結(jié)構(gòu)和并定期做數(shù)據(jù)同步一個(gè)對(duì)前端應(yīng)用Active，另一個(gè)Standby當(dāng)需要時(shí)，經(jīng)過較短的恢復(fù)時(shí)間，Standby的系統(tǒng)可以接管工作方式三兩個(gè)Active的系統(tǒng)保持相同的數(shù)據(jù)結(jié)構(gòu)和并持續(xù)地做數(shù)據(jù)同步兩套系統(tǒng)具有部分或完全的重復(fù)數(shù)據(jù)，兩套系統(tǒng)均可用，可以實(shí)現(xiàn)工作任務(wù)的均衡負(fù)載初級(jí)階段高級(jí)階段Active/PassiveABABABProduction/DRADRADRActive/ActiveABABAB三種實(shí)現(xiàn)方式的比較Active/ActiveActive/PassiveProduction/DRABABAB可保證系統(tǒng)不停機(jī)，包括計(jì)劃內(nèi)和非計(jì)劃。完全滿足支撐運(yùn)營的關(guān)鍵業(yè)務(wù)兩套系統(tǒng)同時(shí)對(duì)外提供訪問，能夠?qū)崿F(xiàn)負(fù)載均衡。系統(tǒng)停機(jī)的恢復(fù)時(shí)間為分鐘級(jí)到小時(shí)級(jí)基本滿足支持運(yùn)營的關(guān)鍵業(yè)務(wù)。專用的備用系統(tǒng)，如果需要，可以做到隨時(shí)切換。系統(tǒng)恢復(fù)時(shí)間為小時(shí)級(jí)到天級(jí)部分滿足支持運(yùn)營的關(guān)鍵業(yè)務(wù)非專用的備用系統(tǒng)，切換需要有一定的準(zhǔn)備時(shí)間。 適用于比較關(guān)鍵的業(yè)務(wù) 適用于整個(gè)的企業(yè)級(jí)DW系統(tǒng)工作的混合度數(shù)據(jù)的詳細(xì)程度DW的發(fā)展階段持續(xù)更新對(duì)響應(yīng)速度敏感的查詢變得重要操作化

正在發(fā)生什么？事件觸發(fā)型的分析占據(jù)主要地位動(dòng)態(tài)化使其發(fā)生！主要是批量處理和少量的隨機(jī)報(bào)告隨機(jī)分析增長分析為什么會(huì)發(fā)生？報(bào)告發(fā)生了什么？分析型模型增加預(yù)測(cè)會(huì)發(fā)生什么？批量處理隨機(jī)查詢決策分析查詢持續(xù)更新和小查詢事件觸發(fā)DW系統(tǒng)與業(yè)務(wù)流程的整合程度更緊密查詢的復(fù)雜度增長工作負(fù)載的復(fù)合度增長數(shù)據(jù)規(guī)模增長對(duì)歷史的追溯深度增長用戶數(shù)量增長期望值增長DW系統(tǒng)發(fā)展越成熟，對(duì)高可用性的要求就越高我們的建議客戶在選擇高可靠性解決方案時(shí)，應(yīng)當(dāng)考慮以下幾個(gè)因素：了解自身EDW系統(tǒng)目前