新一代分布式核心系統(tǒng)建設(shè)

閱讀使人充實(shí)會(huì)談使人敏捷，作使人精確?！喔猩蹄y行新一分布式核心系統(tǒng)建設(shè)2016-12-23楊招商行高級(jí)構(gòu)師楊勉文|楊勉招商銀行在發(fā)過(guò)程中一直秉持技興行的發(fā)展戰(zhàn)，立足于市場(chǎng)和客需求，致力于建設(shè)全統(tǒng)一的信息系統(tǒng)建行近三十年，招商銀行IT系統(tǒng)經(jīng)歷會(huì)計(jì)電算化、業(yè)電子化和全行主機(jī)大集中等三個(gè)段，已基本建成蓋客戶(hù)、渠道、品、賬務(wù)、管理等域的較為完整的銀行息系統(tǒng)，在支撐務(wù)發(fā)展和管理變中發(fā)揮著重要的支作用。一、目背景隨著業(yè)務(wù)快速展和二次轉(zhuǎn)型工的推進(jìn)銀行需要對(duì)現(xiàn)有系統(tǒng)架構(gòu)、業(yè)務(wù)體系進(jìn)行構(gòu)和優(yōu)化打造運(yùn)行高效長(zhǎng)期用滿(mǎn)足專(zhuān)業(yè)化經(jīng)營(yíng)求的新一代系統(tǒng)，技面對(duì)的挑戰(zhàn)主要現(xiàn)在以下幾個(gè)方。1.移互聯(lián)代的務(wù)快增從PC聯(lián)時(shí)代進(jìn)入了移動(dòng)互時(shí)代動(dòng)終端用戶(hù)和易量大幅增加移動(dòng)應(yīng)用的客戶(hù)接觸是時(shí)隨地的越越多的第三方統(tǒng)接入到銀行這些趨勢(shì)都造成銀行業(yè)務(wù)逐年番傳單主機(jī)集中式架構(gòu)無(wú)繼續(xù)支持上億客戶(hù)日均數(shù)億請(qǐng)求的業(yè)務(wù)量。2.利市場(chǎng)的業(yè)產(chǎn)品新速隨著利率改革漸深入利率市場(chǎng)化呼之欲出為在存款利率市化到來(lái)的第一時(shí)間響應(yīng)需，銀行系統(tǒng)要足靈活，要實(shí)現(xiàn)配化的產(chǎn)品工廠。學(xué)問(wèn)是異常珍的東西，從任何泉吸收都不可恥——阿卜·日法拉茲

閱讀使人充實(shí)會(huì)談使人敏捷，作使人精確?！喔?.業(yè)連續(xù)要求趨苛招商銀行作為型零售銀行對(duì)要業(yè)務(wù)系統(tǒng)運(yùn)連續(xù)性要求異?？倘缤C(jī)超過(guò)半小時(shí)造的業(yè)務(wù)損失、聲損失估值可達(dá)數(shù)元人民幣，雙11”等交易高峰期對(duì)銀行心系統(tǒng)的處理能也不斷提出新的戰(zhàn)。二、目研發(fā)況招商銀行新一分布式核心系統(tǒng)2010啟動(dòng)規(guī)劃，從劃到投產(chǎn)歷時(shí)3年項(xiàng)目作為一個(gè)大型項(xiàng)目集群，為核心解耦、銀卡、CIF等項(xiàng)目群，目群下分為多個(gè)大目片區(qū)個(gè)區(qū)立項(xiàng)數(shù)十個(gè)群管理分為術(shù)組和業(yè)務(wù)組各自成立項(xiàng)目管理辦公室負(fù)責(zé)各自方把控資源協(xié)調(diào)工作推動(dòng)等。同時(shí)為了加強(qiáng)個(gè)工作組橫向溝成立以相關(guān)技術(shù)業(yè)務(wù)部領(lǐng)導(dǎo)為成員的執(zhí)行管理組。整個(gè)項(xiàng)目新建改造數(shù)據(jù)表數(shù)萬(wàn)新增改造程序達(dá)數(shù)萬(wàn)個(gè)新增和改造代碼數(shù)百萬(wàn)行。項(xiàng)目投產(chǎn)過(guò)程時(shí)半年按先小型分行投產(chǎn)后中小型分行投產(chǎn)最后大分行投產(chǎn)的順序逐推進(jìn)，數(shù)據(jù)遷移均衡分布，穩(wěn)步產(chǎn)。三、施成果1.技層面(1)解耦心系。造層次清晰、行高效、長(zhǎng)期用的核心框架，未來(lái)業(yè)務(wù)系統(tǒng)落地實(shí)奠定了基礎(chǔ);重構(gòu)業(yè)務(wù)體系，設(shè)滿(mǎn)足專(zhuān)業(yè)化經(jīng)要求的業(yè)務(wù)系統(tǒng)集群，提高品定價(jià)能力和盈水平，降低運(yùn)營(yíng)本，控制操作風(fēng)險(xiǎn))統(tǒng)一客信息。建立統(tǒng)的客戶(hù)視圖和配套管理系統(tǒng)，實(shí)現(xiàn)客基本信息的集中和統(tǒng)一理統(tǒng)一的客戶(hù)標(biāo)識(shí)項(xiàng)聯(lián)戶(hù)在各系統(tǒng)中的產(chǎn)開(kāi)通、產(chǎn)品使用、客行為等信息，形360度客戶(hù)視圖，同時(shí)通過(guò)完整客戶(hù)信息管理、治理體，明確客戶(hù)信息收集、維護(hù)和使的策略、制度，滿(mǎn)客戶(hù)經(jīng)營(yíng)和管理中各節(jié)對(duì)客戶(hù)信息的要。學(xué)問(wèn)是異常珍的東西，從任何泉吸收都不可恥——阿卜·日法拉茲

閱讀使人充實(shí)會(huì)談使人敏捷，作使人精確?！喔?3)打破道豎。強(qiáng)渠道整合，架構(gòu)上改變目渠道的豎井狀結(jié)，建立多渠道協(xié)同體，統(tǒng)一客戶(hù)接觸統(tǒng)一客戶(hù)任務(wù)、一客戶(hù)認(rèn)證，使客獲得連續(xù)、一致的服，讓客戶(hù)真正體ONEBANK務(wù)，不斷提高價(jià)值戶(hù)的忠誠(chéng)度和滿(mǎn)意度。(4)提升能指。根本上解決主性能壓力。目日均交易量大幅出設(shè)計(jì)標(biāo)準(zhǔn)，各項(xiàng)非能指標(biāo)仍然優(yōu)異2.業(yè)層(1)提高面效。系統(tǒng)進(jìn)行了一全面梳理和優(yōu)，簡(jiǎn)化操作流程減少業(yè)務(wù)菜單，強(qiáng)化統(tǒng)自動(dòng)控制，提單筆業(yè)務(wù)效率。(2)提升戶(hù)體。大免填單業(yè)務(wù)圍，以回單替申請(qǐng)，方便客戶(hù)務(wù)辦理創(chuàng)新業(yè)務(wù)處理式，將憑證掛失類(lèi)業(yè)務(wù)受理范圍調(diào)整至行所有網(wǎng)點(diǎn)，便利客戶(hù)業(yè)務(wù)申。(3)增強(qiáng)中風(fēng)。過(guò)拍照儀、短通知、密碼鍵確認(rèn)交易等手段化業(yè)務(wù)操作事中風(fēng)險(xiǎn)制，降低銀行操風(fēng)險(xiǎn)。(4)業(yè)務(wù)礎(chǔ)支。利率定價(jià)、利靈活設(shè)置、結(jié)化存款方面建立先進(jìn)的底層技術(shù)支持制，并將客戶(hù)價(jià)貢獻(xiàn)引入到定價(jià)程;在收定價(jià)、收費(fèi)統(tǒng)一管理方面也做大量改進(jìn)。(5)加強(qiáng)理信支持。業(yè)務(wù)維度定義“產(chǎn)品-事件任務(wù)”模型，系統(tǒng)詳細(xì)記錄柜員每次操作為柜臺(tái)的成本分和柜面行為管控供精細(xì)化的數(shù)據(jù)支。(6)推進(jìn)據(jù)標(biāo)全面地。面對(duì)大數(shù)據(jù)代的來(lái)臨，數(shù)標(biāo)準(zhǔn)的實(shí)施是全行管好用好數(shù)據(jù)的基礎(chǔ)借助新代核心系統(tǒng)項(xiàng)招商銀行數(shù)據(jù)標(biāo)準(zhǔn)全面落地實(shí)施方面扎扎實(shí)實(shí)地邁出一大步。四、新特點(diǎn)學(xué)問(wèn)是異常珍的東西，從任何泉吸收都不可恥——阿卜·日法拉茲

閱讀使人充，會(huì)談使人敏捷寫(xiě)作使人精確?！喔?.基集群分布式核業(yè)內(nèi)對(duì)分布系統(tǒng)的探討大多于開(kāi)放式架構(gòu)，而商銀行選擇的基于AS400主機(jī)集群的布式系統(tǒng)為業(yè)內(nèi)創(chuàng)。招商銀行一面倚重AS400的高可用性易維護(hù)性，發(fā)揮身在AS400管理、開(kāi)發(fā)、運(yùn)維面的知識(shí)積累優(yōu)方面通過(guò)以AS400主機(jī)系統(tǒng)為礎(chǔ)的集群獲得了足夠可擴(kuò)展性，并保了分布式架構(gòu)下的據(jù)一致性。AS400主機(jī)與普通×86務(wù)器相比，機(jī)性能強(qiáng)大，布式集群的規(guī)模較，集群的可維性高本項(xiàng)目例集群能需要上百臺(tái)服器AS400的集群僅需幾臺(tái)主機(jī)。由單主機(jī)向布式架構(gòu)的轉(zhuǎn)變必會(huì)帶來(lái)數(shù)據(jù)庫(kù)的分銀采取垂直分片方式將業(yè)務(wù)為借記卡和其他務(wù)保障簡(jiǎn)但巨量的借記卡業(yè)的同時(shí)借記卡業(yè)務(wù)分行來(lái)分表，從實(shí)現(xiàn)了業(yè)務(wù)集群化礎(chǔ)上的可擴(kuò)展性。2.AS400集群內(nèi)事務(wù)護(hù)對(duì)于銀行核系統(tǒng)而言務(wù)數(shù)據(jù)事務(wù)一致性重要性不言而喻銀行核心系統(tǒng)的場(chǎng)景下互聯(lián)網(wǎng)公司經(jīng)常用的最終一致性方是行不通的。招商銀行自設(shè)計(jì)的雙機(jī)間的易穿透和雙機(jī)事務(wù)護(hù)機(jī)制群的不同主機(jī)間采用強(qiáng)事一致性賬務(wù)層實(shí)現(xiàn)了交易穿用開(kāi)發(fā)人可以完全不用知曉賬戶(hù)所在位置核心底層自動(dòng)完成集群主機(jī)間的賬務(wù)穿透務(wù)交易成功則雙方同確認(rèn)，任意一側(cè)成功則雙方同時(shí)回。由于實(shí)現(xiàn)了易的自動(dòng)穿透，商銀行在AS400上幾十年積的80%的應(yīng)用得以不修改或小修改就能適應(yīng)的架構(gòu)，有效保護(hù)信息資產(chǎn)。3.分級(jí)的主切換新一代分布核心集群的高可方案采用深滬兩地本地?zé)醾溥h(yuǎn)程溫備主備切方案按分鐘級(jí)別計(jì)，在極端情況下供秒級(jí)切換。學(xué)問(wèn)是異常貴的東西，從任源泉吸收都不可恥——阿卜·日·法茲

閱讀使人充實(shí)會(huì)談使人敏捷，作使人精確?！喔紫龋鳈C(jī)要速切換到備機(jī)，速切換的前提是備數(shù)據(jù)已經(jīng)同步到一點(diǎn)。實(shí)現(xiàn)快速同步術(shù)的前提是將聯(lián)和批量的同步通分離布架構(gòu)已經(jīng)將同步數(shù)據(jù)進(jìn)行了次切分再通過(guò)批量和聯(lián)機(jī)的通分離使聯(lián)需要同步的數(shù)據(jù)量進(jìn)一步減少延遲保持在秒級(jí)其次批量交易由于會(huì)帶來(lái)?yè)?jù)庫(kù)的大量讀寫(xiě)往往延較長(zhǎng)通過(guò)應(yīng)用設(shè)計(jì)中的可重入等機(jī)在批量同步時(shí)間預(yù)過(guò)長(zhǎng)的情況下步數(shù)據(jù)可以直接棄在備機(jī)上重新跑，以減少災(zāi)難場(chǎng)下切換所需的延。最后在系統(tǒng)中保存了一個(gè)分鐘的交易緩沖池以在數(shù)據(jù)未同步情況下進(jìn)行事后交易核在極端環(huán)境下直接換時(shí)可憑借這幾分鐘數(shù)的事后核對(duì)保障業(yè)務(wù)的完整和正確性。4.虛子賬熱點(diǎn)賬戶(hù)是目互聯(lián)網(wǎng)高頻交易境下帶來(lái)系統(tǒng)沖的主要原因之一，雙11”支付寶的相關(guān)易賬戶(hù)在秒殺等景下極易產(chǎn)生熱商銀通過(guò)虛擬子賬戶(hù)技術(shù)從核心層提供了互聯(lián)網(wǎng)高交易的分散策略虛擬子賬戶(hù)把度先分配到所有虛擬子賬戶(hù)上間交易時(shí)只鎖定子賬戶(hù)而不鎖定主賬戶(hù)賬戶(hù)對(duì)業(yè)務(wù)不可見(jiàn)務(wù)查詢(xún)主賬戶(hù)時(shí)累計(jì)子賬戶(hù)余呈現(xiàn)。虛擬子賬戶(hù)的計(jì)不僅很好地分了熱點(diǎn)且于虛擬子賬戶(hù)以按商戶(hù)設(shè)置，在清算上提供額外的便利。5.漸式的度投策略為了保障更好業(yè)務(wù)服務(wù)和風(fēng)險(xiǎn)控新代核心系統(tǒng)投產(chǎn)過(guò)程需逐切換支持灰度發(fā)布系統(tǒng)支持必要完全回退到老的核系統(tǒng)此外系統(tǒng)上線的業(yè)務(wù)中斷服務(wù)的時(shí)需要控制在2小時(shí)以?xún)?nèi)，不能對(duì)業(yè)務(wù)生影響。為滿(mǎn)足上述約條件新一核心系統(tǒng)為投產(chǎn)做專(zhuān)門(mén)的設(shè)計(jì)投過(guò)程歷時(shí)半年，按先小型行、后中小型分、最后大型分行產(chǎn)的順序逐步推進(jìn)在分行分批上線的半時(shí)間內(nèi)，新老兩核心系統(tǒng)同時(shí)在業(yè)務(wù)路由支持新老兩代心系統(tǒng);單張卡通配置可以切換到新心系統(tǒng)同時(shí)提供