金融大數(shù)據(jù)平臺建設(shè)實施方案

1、二、大數(shù)據(jù)平臺建設(shè)（一）大數(shù)據(jù)平臺框架概述大數(shù)據(jù)平臺建設(shè)充分整合信息化資源，打破行業(yè)、部 門之間 的信息壁壘，運用大數(shù)據(jù)技術(shù)進(jìn)行采集、加工、建模、分析，將數(shù)據(jù)價 值融入到金融之中，從而提升創(chuàng)新能力和產(chǎn)品服務(wù)能力。主要包 括以下三部分：1 .大數(shù)據(jù)分析基礎(chǔ)平臺按照功能劃分?jǐn)?shù)據(jù)區(qū)，設(shè)計數(shù)據(jù)模型，在統(tǒng)一流程調(diào)度下，整合各 類數(shù)據(jù)，同現(xiàn)有的企業(yè)級數(shù)據(jù)倉庫和歷史數(shù)據(jù)存儲系統(tǒng)一起， 形 成基礎(chǔ)數(shù)據(jù)體系，提供支撐經(jīng)營管理的各類數(shù)據(jù)應(yīng)用，支撐上層應(yīng)用。2 .大數(shù)據(jù)應(yīng)用系統(tǒng)基于基礎(chǔ)數(shù)據(jù)平臺，持續(xù)建設(shè)各類數(shù)據(jù)應(yīng)用系統(tǒng)，通過數(shù)據(jù)挖掘、計量分析和機(jī)器學(xué)習(xí)等手段，對豐富的大數(shù)據(jù)資源進(jìn)行 開發(fā)使用，并將數(shù)據(jù)決策化過程結(jié)合

2、到風(fēng)控、營銷、營運等經(jīng)營管 理活動，充分發(fā)揮大數(shù)據(jù)價值。3 .大數(shù)據(jù)管控建立數(shù)據(jù)標(biāo)準(zhǔn)，提升數(shù)據(jù)質(zhì)量，加強(qiáng)元數(shù)據(jù)管理能力，為 平臺建設(shè)及安全提供保障（二）大數(shù)據(jù)平臺建設(shè)原則大數(shù)據(jù)平臺是大數(shù)據(jù)運用的基礎(chǔ)實施，其設(shè)計、建設(shè)和 系統(tǒng)實現(xiàn)過程中，應(yīng)遵循如下指導(dǎo)原則：經(jīng)濟(jì)性：基于現(xiàn)有場景分析，對數(shù)據(jù)量進(jìn)行合理評估,確定大數(shù)據(jù)平臺規(guī)模，后續(xù)根據(jù)實際情況再逐步優(yōu)化擴(kuò)容可擴(kuò)展性：架構(gòu)設(shè)計與功能劃分模塊化，考慮各接口的開放性、可擴(kuò)展性，便于系統(tǒng)的快速擴(kuò)展與維護(hù)，便于第三方系統(tǒng)的快速接入?？煽啃裕合到y(tǒng)采用的系統(tǒng)結(jié)構(gòu)、技術(shù)措施、開發(fā)手段都應(yīng)建立在已經(jīng)相當(dāng)成熟的應(yīng)用基礎(chǔ)上，在技術(shù)服務(wù)和維護(hù)響應(yīng)上同用戶積極配合，確保系統(tǒng)

3、的可靠；對數(shù)據(jù)指標(biāo)要保證完整性，準(zhǔn)確性。安全性：針對系統(tǒng)級、應(yīng)用級、網(wǎng)絡(luò)級，均提供合理的安全手段和措施，為系統(tǒng)提供全方位的安全實施方案，確保企業(yè)內(nèi)部信息的安全。大數(shù)據(jù)技術(shù)必須自主可控。先進(jìn)性：涵蓋結(jié)構(gòu)化，半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)存儲和分析的特點。借鑒互聯(lián)網(wǎng)大數(shù)據(jù)存儲及分析的實踐，使平臺具有良好的先進(jìn)性和彈性。支撐當(dāng)前及未來數(shù)據(jù)應(yīng)用需求，引入對應(yīng)大數(shù)據(jù)相關(guān)技術(shù)。平臺性：歸納整理大數(shù)據(jù)需求，形成統(tǒng)一的大數(shù)據(jù)存儲服務(wù)和大數(shù)據(jù)分析服務(wù)。利用多租戶, 實現(xiàn)計算負(fù)荷和數(shù)據(jù)訪問負(fù)荷隔離。多集群統(tǒng)一管理。分層解耦：大數(shù)據(jù)平臺提供開放的、標(biāo)準(zhǔn)的接口，實現(xiàn)與各應(yīng)用產(chǎn)品的無縫對接（三）基礎(chǔ)數(shù)據(jù)來源1銀行內(nèi)部大數(shù)據(jù)資源

4、客戶自身信息以及其金融交易行為，依照目前積累沉淀的數(shù)量資源情況，將數(shù)據(jù)主要分為三大類:第一類：客戶基礎(chǔ)數(shù)據(jù)客戶信息數(shù)據(jù)，即客戶基礎(chǔ)數(shù)據(jù)，主要是指描述客戶自 身特點的數(shù)據(jù)。個人客戶信息數(shù)據(jù)包括：個人姓名、性別、年齡、身份 信息、聯(lián)系方式、職業(yè)、生活城市、工作地點、家庭地址、 所屬行業(yè)、具體職業(yè)、婚姻狀況、教育情況、工作經(jīng)歷、工 作技能、賬戶信息、產(chǎn)品信息、個人愛好等等。企業(yè)客戶信息數(shù)據(jù)包括：企業(yè)名稱、關(guān)聯(lián)企業(yè)、所屬行 業(yè)、銷售金額、注冊資本、賬戶信息、企業(yè)規(guī)模、企業(yè)地點、 分公司情況、客戶和供應(yīng)商、信用評價、主營業(yè)務(wù)、法人信 息等等。將這些割裂的數(shù)據(jù)整合到大數(shù)據(jù)平臺，形成全局?jǐn)?shù)據(jù)， 再按照自身需

5、要進(jìn)行歸類和打標(biāo)簽，由于都是結(jié)構(gòu)化數(shù)據(jù)因 此將有利于數(shù)據(jù)分析。可以將這些信息集中在大數(shù)據(jù)管理平 臺，對客戶進(jìn)行分類，依據(jù)其他的交易數(shù)據(jù)，進(jìn)行產(chǎn)品開發(fā) 和決策支持。第二類：支付信息交易信息數(shù)據(jù)，可以稱之為支付信息，主要是指客戶通 過渠道發(fā)生的交易以及現(xiàn)金流信息。個人客戶交易信息：包括工資收入、個人消費、公共事 業(yè)繳費、信貸還款、轉(zhuǎn)賬交易、委托扣款、購買理財產(chǎn)品、購買保險產(chǎn)品、信用卡還款等。企業(yè)客戶交易信息：包括供應(yīng)鏈應(yīng)收款項、供應(yīng)鏈應(yīng)付款項、員工工資、企業(yè)運營支出、同分公司之間交易、同總公司之間交易、稅金支出、理財產(chǎn)品買賣、金融衍生產(chǎn)品購買、公共費用支出、其他轉(zhuǎn)賬等。第三類：資產(chǎn)信息資產(chǎn)信息主要

6、是指客戶在金融機(jī)構(gòu)端資產(chǎn)和負(fù)債信息，同時也包含金融機(jī)構(gòu)自身資產(chǎn)負(fù)債信息，其中數(shù)據(jù)大多來自銀行。個人客戶資產(chǎn)負(fù)債信息包括：購買的理財產(chǎn)品、定期存款、活期存款、信用貸款、抵押貸款、信用卡負(fù)債、抵押房產(chǎn)、企業(yè)年金等。企業(yè)客戶資產(chǎn)負(fù)債信息包括：企業(yè)定期存款、活期存款、信用貸款、抵押貸款、擔(dān)保額度、應(yīng)收賬款、應(yīng)付賬款、理財產(chǎn)品、票據(jù)、債券、固定資產(chǎn)等。銀行自身端資產(chǎn)負(fù)債信息包括：自身資產(chǎn)和負(fù)債例如活期存款、定期存款、借入負(fù)債、結(jié)算負(fù)債、現(xiàn)金資產(chǎn)、固定資產(chǎn)貸款證券投資等。第四類：新型業(yè)務(wù)數(shù)據(jù)此類數(shù)據(jù)包括系統(tǒng)的運行日志、客服語音、視頻影像、網(wǎng)站日志等。2外部大數(shù)據(jù)來源為了贏得差異化競爭，就必須考慮其他數(shù)據(jù)源

7、的輸入， 這些數(shù)據(jù)是自身不具有的，但是對其數(shù)據(jù)分析和決策起到了 很重要的作用。線上交易、電商平臺、社交網(wǎng)絡(luò)等互聯(lián)網(wǎng)數(shù)據(jù)來源，司 法、工商、財稅等政府部門依法公開的信息，主要包括： 互 聯(lián)網(wǎng)消費行為數(shù)據(jù)，了解客戶消費能力和消費偏好 等；個人 嚴(yán)重行政處罰記錄（如行政拘留等）、刑事犯罪記錄、涉訴情況（人身關(guān)系、財產(chǎn)關(guān)系）、交通嚴(yán)重違規(guī)違章記錄 等； 客戶征信信息、客戶在其他銀行或金融機(jī)構(gòu)的貸款記錄、信用記錄等信息等；客戶的第三方征信評級情況， 客戶的社保、 納稅、公積金等信息，客戶的社會保障情況及經(jīng)濟(jì)能力，工 作單位性質(zhì)，客戶社會身份 等；客戶在第三方催收機(jī)構(gòu)的催 收記錄、社會信息 等；由入境記錄

8、，客戶由入境目的地、 出 入境頻率等；國內(nèi)由行記錄，客戶由行習(xí)慣等；采用同大數(shù) 據(jù)廠商合作的方式，通過自身平臺來采集數(shù)據(jù)或購買第三方 數(shù)據(jù)。（四）大數(shù)據(jù)平臺實現(xiàn)功能捶詈優(yōu)化蝴硼產(chǎn)品定價情標(biāo)幽西務(wù)e析模型言理提升風(fēng)性控制大數(shù)據(jù)平臺功能架構(gòu)圖(1)批量實現(xiàn)較高水準(zhǔn)的個性化客戶產(chǎn)品服務(wù)，增加 客戶粘性，推動業(yè)務(wù)創(chuàng)新。有效地將大數(shù)據(jù)分析系統(tǒng)夠構(gòu)建 客戶360度全方位視圖，設(shè)計更有競爭力的創(chuàng)新產(chǎn)品。對企 業(yè)型客戶的財務(wù)狀況、相關(guān)產(chǎn)業(yè)鏈上下游數(shù)據(jù)分析，把握客 現(xiàn)在的狀況，更可以通過數(shù)據(jù)的交換、映射對其進(jìn)行短期、 中期預(yù)測未來發(fā)展?fàn)顩r。同時通過與同行業(yè)中的企業(yè)比較， 以及利用公共平臺收集企業(yè)的上、游對其評價

9、，取得多維度 的評估，對中小企業(yè)風(fēng)險進(jìn)行有效的識別，從而緩解銀行與 中小企業(yè)信息不對稱問題，更好地推動中小企業(yè)市場業(yè)務(wù)創(chuàng) 新。(2)針對客戶需求，實現(xiàn)精準(zhǔn)營銷。銀行借助大數(shù)據(jù) 分析平臺，通過對客戶的瀏覽記錄、購買路徑、消費數(shù)據(jù)， 進(jìn)行挖掘、追蹤、分析，將不同的客戶群體進(jìn)行聚類，根據(jù) 不同的客戶特性打造個性化產(chǎn)品營銷服務(wù)，將最適合的產(chǎn)品 服務(wù)推介給最需要的客戶。提高客戶對銀行服務(wù)的認(rèn)可程度 以及客戶經(jīng)理在營銷過程中的專業(yè)程度。(3)增強(qiáng)風(fēng)險管控能力。大數(shù)據(jù)分析幫助銀行摒棄原來 過度依靠貸款人提供財務(wù)報表獲取信息的業(yè)務(wù)方式，轉(zhuǎn)而對 其資產(chǎn)價格、賬務(wù)流水、相關(guān)業(yè)務(wù)活動等流動性數(shù)據(jù)進(jìn)行動 態(tài)監(jiān)控，了解

10、客戶的自然屬性和行為屬性，結(jié)合客戶行為分 析、客戶信用度分析、客戶風(fēng)險分析以及客戶的資產(chǎn)負(fù)債狀 況，從而有效提升客戶信息透明度，建立完善的風(fēng)險防范體 系。(4)促進(jìn)銀行內(nèi)部管理流程化，降低管理運營成本。運 用大數(shù)據(jù)能夠增加銀行內(nèi)部的透明度，使企業(yè)上下級之間的 信息流通更順暢；同時，基于大數(shù)據(jù)優(yōu)化企業(yè)內(nèi)部的各種流 程，以及通過自己和社會信息歸集渠道，了解客戶真實反映，積極改進(jìn)和提高，大大縮短信息收集、反饋時間，提高企業(yè) 運作效率。而通過大數(shù)據(jù)應(yīng)用和分析，能夠準(zhǔn)確定位內(nèi)部管 理缺陷，制定有針對性的改進(jìn)措施，實行符合自身特點的管 理模式，進(jìn)而降低管理運營成本。(五)平臺的技術(shù)架構(gòu)為實現(xiàn)上述功能經(jīng)多方

11、考察研討擬采用FusioninsightHD平臺作為大數(shù)據(jù)基礎(chǔ)平臺。Fusioninsight 是企業(yè)級大數(shù) 據(jù)存儲、查詢和分析的統(tǒng)一平臺。它以海量數(shù)據(jù)處理引擎和實時數(shù)據(jù)處理引擎為核心，并針對金融、運營商等數(shù)據(jù)密集 型行業(yè)的運行維護(hù)、應(yīng)用開發(fā)等需求，打造了敏捷、智慧、 可信的平臺軟件、建模中間件及 0般統(tǒng)，讓企業(yè)可以更快、 更準(zhǔn)、更穩(wěn)的從各類繁雜無序的海量數(shù)據(jù)中發(fā)現(xiàn)全新價值點 和企業(yè)商機(jī)。上層應(yīng)用,web客戶端聊等I A |PI . |HiLruh.OJtt呷1叔 年引 才信殂咐其tElhl 皿 tu 口 困* HD酎就 的緋合 機(jī)亞7大數(shù)據(jù)平臺架構(gòu)圖，三萬調(diào)度平臺第三方開發(fā)平臺第三方管理系統(tǒng)

12、Loader（數(shù)據(jù)to 孤懶和 加虹具）IOczieC此任初I楮）<x藪囑受所層將二Hive（煉計九新）MapReduce副數(shù)梃分析應(yīng)月赫 L歷史數(shù)據(jù)管理.北向接口HBasE（海重額也隨機(jī)仔鍍:批量救據(jù)加載集慧目理一寮HD=3存僭海量基柯化數(shù)相“非瞥構(gòu)化勤據(jù)）-LSi4H Ins ight H*g)p平臺 一 M 一 V* W M M ! 一 大數(shù)據(jù)平臺與其他相關(guān)系統(tǒng)接口描述圖（七）大數(shù)據(jù)平臺的網(wǎng)絡(luò)拓?fù)洌ò耍┐髷?shù)據(jù)平臺承載的應(yīng)用系統(tǒng)1. 客戶綜合服務(wù)平臺依托大數(shù)據(jù)分析整合四大板塊銀行客戶信息，建設(shè)客戶 綜合服務(wù)平臺，逐步建立客戶數(shù)據(jù)模型、數(shù)據(jù)標(biāo)準(zhǔn)以及統(tǒng)一的客戶信息視圖，將分散在各系統(tǒng)的客

13、戶信息數(shù)據(jù)集中整合、統(tǒng)一管理，支持客戶分類管理和差異化需求，提升服務(wù)質(zhì)量和服務(wù)效率；按照以客戶為中心的“流程銀行”理念，推進(jìn)業(yè)務(wù)運作流程化，推動流程革新，在流程各環(huán)節(jié)強(qiáng)化風(fēng)險控制，落實合規(guī)要求；實現(xiàn)對客戶的價值分析與評價，以科技手段引導(dǎo)產(chǎn)品創(chuàng)新、產(chǎn)品營銷和風(fēng)險控制，通過差異化定價實現(xiàn)營銷服務(wù)戰(zhàn)略的轉(zhuǎn)變。2. 存貸產(chǎn)品利率定價與管理系統(tǒng)通過大數(shù)據(jù)分析，打造覆蓋事前報價、事中執(zhí)行及控制、事后監(jiān)測管理的全流程利率定價及管理體系，使利率管理貫穿整個業(yè)務(wù)價值流程；建立適應(yīng)未來變化的利率組成結(jié)構(gòu)，支持靈活、差異化的產(chǎn)品利率，通過利息公共構(gòu)件提供靈活多樣的多種計息方式，完善利率管理系統(tǒng)中利率審批、利率風(fēng)險管

14、理、利率定價分析功能，以提升我行精細(xì)化利率管理及風(fēng)險管控能力。3. 加強(qiáng)線上平臺整合4. 1）電商平臺整合通過與電商平臺的對接，將更多金融業(yè)務(wù)滲透到企業(yè)產(chǎn)業(yè)鏈條各環(huán)節(jié)，圍繞核心企業(yè)大數(shù)據(jù)探索上下游企業(yè)自動化應(yīng)收賬款融資、綜合授信等產(chǎn)業(yè)鏈金融服務(wù)，從而實現(xiàn)信息流、資金流及物流的整合，提升金融服務(wù)的效率和深度，為電商平臺提供有力的信用增級、安全的資金監(jiān)管、豐富的交易場景、便捷的支付體系、健全的賬戶管理、特色的會員服務(wù)、專業(yè)的融資貿(mào)易等金融服務(wù)。(2)互聯(lián)網(wǎng)平臺整合用互聯(lián)網(wǎng)改造傳統(tǒng)金融業(yè)務(wù)流程，促進(jìn)金融走向數(shù)字化，推進(jìn)金融業(yè)務(wù)從以往的人工化融合轉(zhuǎn)向數(shù)字化牽引；通過移動支付、第三方支付、大數(shù)據(jù)、眾籌融資、網(wǎng)絡(luò)銀行等方面 的建設(shè)實現(xiàn)向 開放、共享、去中心化、平等、普惠 ”的新型 數(shù)字金融的轉(zhuǎn)變。4.小微貸系統(tǒng)運用大數(shù)據(jù)技術(shù)，解決小微企業(yè)及農(nóng)戶融資難問題； 加 強(qiáng)大數(shù)據(jù)風(fēng)控，更精確地評價客戶信用，提升風(fēng)險決策實時 性，將內(nèi)控規(guī)則嵌入交易流程，更迅速地