金融大數(shù)據(jù)平臺建設(shè)方案

1、二'大數(shù)據(jù)平臺建設(shè)（一大數(shù)據(jù)平臺框架概述大數(shù)據(jù)平臺建設(shè)充分整合信息化資源，打破行業(yè)、部門之間 的信息壁壘，運大數(shù)據(jù)技術(shù)進(jìn)行采集、加工、建模、分析，將數(shù)據(jù)價 值融入金融之中，從而提升創(chuàng)新能力和產(chǎn)品服務(wù)能力。主要包 括以下三部分：1. 大數(shù)據(jù)分析基礎(chǔ)平臺按照功能劃分?jǐn)?shù)據(jù)區(qū)，設(shè)計數(shù)據(jù)模型，在統(tǒng)一流程調(diào)度下，翳各 類數(shù)據(jù)，同現(xiàn)有的企業(yè)級數(shù)據(jù)倉庫和歷史數(shù)據(jù)存儲系統(tǒng)一起，形 成基礎(chǔ)數(shù)據(jù)體系，提供支撐經(jīng)營管理的各類數(shù)據(jù)應(yīng)用，支撐上 層應(yīng)用。2. 大數(shù)據(jù)應(yīng)用系統(tǒng)基于基礎(chǔ)數(shù)據(jù)平臺，持續(xù)建設(shè)各類數(shù)據(jù)應(yīng)用系統(tǒng)，通過數(shù) 據(jù)挖掘、計量分析和機(jī)器學(xué)習(xí)等手段，對豐富的大數(shù)據(jù)資源進(jìn)行 開發(fā)使用，并將數(shù)據(jù)決策化過程結(jié)合

2、到風(fēng)控、營銷、營運等經(jīng)營管 理活動，充分發(fā)揮大數(shù)據(jù)價值。3. 大數(shù)據(jù)管控建立數(shù)據(jù)標(biāo)準(zhǔn)，提升數(shù)據(jù)質(zhì)量，加強元數(shù)據(jù)管理能力，為 平臺建設(shè)及安全提供保障（二大數(shù)據(jù)平臺建設(shè)原則大數(shù)據(jù)平臺是大數(shù)據(jù)運用的基礎(chǔ)實施，其設(shè)計、建設(shè)和 系統(tǒng)實現(xiàn)過程中，應(yīng)遵循如下指導(dǎo)原則：經(jīng)濟(jì)性：基于現(xiàn)有場景分析，對數(shù)據(jù)量進(jìn)行合理評估， 確定大數(shù)據(jù)平臺規(guī)模，后續(xù)根據(jù)實際情況再逐步優(yōu)化擴(kuò)容?？蓴U(kuò)展性：架構(gòu)設(shè)計與功能劃分模塊化，考慮各接口的 開放性、可擴(kuò)展性，便于系統(tǒng)的快速擴(kuò)展與維護(hù)，便于第三 方系統(tǒng)的快速接入。可靠性：系統(tǒng)采用的系統(tǒng)結(jié)構(gòu)、技術(shù)措施、開發(fā)手段都 應(yīng)建立在已經(jīng)相當(dāng)成熟的應(yīng)用基礎(chǔ)上，在技術(shù)服務(wù)和維護(hù)響 應(yīng)上同用戶積極配合

3、，確保系統(tǒng)的可靠；對數(shù)據(jù)指標(biāo)要保證 完整性，準(zhǔn)確性。安全性：針對系統(tǒng)級、應(yīng)用級、網(wǎng)絡(luò)級，均提供合理的 安全手段和措施，為系統(tǒng)提供全方位的安全實施方案，確保 企業(yè)內(nèi)部信息的安全。大數(shù)據(jù)技術(shù)必須自主可控。先進(jìn)性：涵蓋結(jié)構(gòu)化，半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)存儲和 分析的特點。借鑒互聯(lián)網(wǎng)大數(shù)據(jù)存儲及分析的實踐，使平臺 具有良好的先進(jìn)性和彈性。支撐當(dāng)前及未來數(shù)據(jù)應(yīng)用需求, 引入對應(yīng)大數(shù)據(jù)相關(guān)技術(shù)。平臺性：歸納整理大數(shù)據(jù)需求，形成統(tǒng)一的大數(shù)據(jù)存儲 服務(wù)和大數(shù)據(jù)分析服務(wù)。利用多租戶，實現(xiàn)計算負(fù)荷和數(shù)據(jù) 訪問負(fù)荷隔離。多集群統(tǒng)一管理。分層解耦：大數(shù)據(jù)平臺提供開放的、標(biāo)準(zhǔn)的接口，實現(xiàn) 與各應(yīng)用產(chǎn)品的無縫對接三）基礎(chǔ)數(shù)據(jù)

4、來源1.銀行內(nèi)部大數(shù)據(jù)資源客戶自身信息以及其金融交易行為，依照目前積累沉淀 的數(shù)量資源情況，將數(shù)據(jù)主要分為三大類：第一類：客戶基礎(chǔ)數(shù)據(jù)客戶信息數(shù)據(jù)，即客戶基礎(chǔ)數(shù)據(jù)，主要是指描述客戶自 身特點的數(shù)據(jù)。個人客戶信息數(shù)據(jù)包括：個人姓名、性別、年齡、身份 信息、聯(lián)系方式、職業(yè)、生活城市、工作地點、家庭地址、 所屬行業(yè)、具體職業(yè)、婚姻狀況、教育情況、工作經(jīng)歷、工 作技能、賬戶信息、產(chǎn)品信息、個人愛好等等。企業(yè)客戶信息數(shù)據(jù)包括：企業(yè)名稱、關(guān)聯(lián)企業(yè)、所屬行 業(yè)、銷售金額、注冊資本、賬戶信息、企業(yè)規(guī)模、企業(yè)地點、 分公司情況、客戶和供應(yīng)商、信用評價、主營業(yè)務(wù)、法人信 息等等。將這些割裂的數(shù)據(jù)整合到大數(shù)據(jù)平臺，

5、形成全局?jǐn)?shù)據(jù), 再按照自身需要進(jìn)行歸類和打標(biāo)簽，由于都是結(jié)構(gòu)化數(shù)據(jù)因 此將有利于數(shù)據(jù)分析?？梢詫⑦@些信息集中在大數(shù)據(jù)管理平 臺，對客戶進(jìn)行分類，依據(jù)其他的交易數(shù)據(jù)，進(jìn)行產(chǎn)品開發(fā) 和決策支持。第二類：支付信息交易信息數(shù)據(jù)，可以稱之為支付信息，主要是指客戶通 過渠道發(fā)生的交易以及現(xiàn)金流信息。個人客戶交易信息：包括工資收入、個人消費、公共事 業(yè)繳費、信貸還款、轉(zhuǎn)賬交易、委托扣款、購買理財產(chǎn)品、 購買保險產(chǎn)品、信用卡還款等。企業(yè)客戶交易信息：包括供應(yīng)鏈應(yīng)收款項、供應(yīng)鏈應(yīng)付 款項、員工工資、企業(yè)運營支出、同分公司之間交易、同總 公司之間交易、稅金支出、理財產(chǎn)品買賣、金融衍生產(chǎn)品購 買、公共費用支出、其他

6、轉(zhuǎn)賬等。第三類：資產(chǎn)信息資產(chǎn)信息主要是指客戶在金融機(jī)構(gòu)端資產(chǎn)和負(fù)債信息, 同時也包含金融機(jī)構(gòu)自身資產(chǎn)負(fù)債信息，其中數(shù)據(jù)大多來自 銀行。個人客戶資產(chǎn)負(fù)債信息包括：購買的理財產(chǎn)品、定期存 款、活期存款、信用貸款、抵押貸款、信用卡負(fù)債、抵押房 產(chǎn)、企業(yè)年金等。企業(yè)客戶資產(chǎn)負(fù)債信息包括：企業(yè)定期存款、活期存款、 信用貸款、抵押貸款、擔(dān)保額度、應(yīng)收賬款、應(yīng)付賬款、理 財產(chǎn)品、票據(jù)、債券、固定資產(chǎn)等。銀行自身端資產(chǎn)負(fù)債信息包括：自身資產(chǎn)和負(fù)債例如活 期存款、定期存款、借入負(fù)債、結(jié)算負(fù)債、現(xiàn)金資產(chǎn)、固定 資產(chǎn)貸款證券投資等。第四類：新型業(yè)務(wù)數(shù)據(jù)此類數(shù)據(jù)包括系統(tǒng)的運行日志、客服語音、視頻影像、 網(wǎng)站日志等。2

7、.外部大數(shù)據(jù)來源為了贏得差異化競爭，就必須考慮其他數(shù)據(jù)源的輸入, 這些數(shù)據(jù)是自身不具有的，但是對其數(shù)據(jù)分析和決策起到了 很重要的作用。線上交易、電商平臺、社交網(wǎng)絡(luò)等互聯(lián)網(wǎng)數(shù)據(jù)來源，司 法、工商、財稅等政府部門依法公開的信息，主要包括：互 聯(lián)網(wǎng)消費行為數(shù)據(jù)，了解客戶消費能力和消費偏好等；個人 嚴(yán)重行政處罰記錄（如行政拘留等）、刑事犯罪記錄、涉訴 情況（人身關(guān)系、財產(chǎn)關(guān)系）、交通嚴(yán)重違規(guī)違章記錄等； 客戶征信信息、客戶在其他銀行或金融機(jī)構(gòu)的貸款記錄、信 用記錄等信息等；客戶的第三方征信評級情況，客戶的社保、 納稅、公積金等信息，客戶的社會保障情況及經(jīng)濟(jì)能力，工 作單位性質(zhì)，客戶社會身份等；客戶在第

8、三方催收機(jī)構(gòu)的催 收記錄、社會信息等；出入境記錄，客戶出入境目的地、出 入境頻率等；國內(nèi)出行記錄，客戶出行習(xí)慣等；采用同大數(shù) 據(jù)廠商合作的方式，通過自身平臺來采集數(shù)據(jù)或購買第三方 數(shù)據(jù)。（四）大數(shù)據(jù)平臺實現(xiàn)功能經(jīng)營優(yōu)化醫(yī)理提升1風(fēng)險控制18準(zhǔn)營銷|多組度魚利分析領(lǐng)導(dǎo)蠢駛艙中小企業(yè)貸款風(fēng)險評怙市場與渠道分析i產(chǎn)品定價績效考孩實時欺詐交易分析用戶畫像eva. raroc 指標(biāo)模型反歐詐模型中小企業(yè)征信模型kphjt 型財務(wù)分忻模型信用卡分析欖型業(yè)務(wù)系統(tǒng)外部數(shù)據(jù)蜩ms大數(shù)據(jù)平臺功能架構(gòu)圖(1) 批量實現(xiàn)較高水準(zhǔn)的個性化客戶產(chǎn)品服務(wù)，增加客戶粘性，推動業(yè)務(wù)創(chuàng)新。有效地將大數(shù)據(jù)分析系統(tǒng)夠構(gòu)建 客戶360

9、度全方位視圖，設(shè)計更有競爭力的創(chuàng)新產(chǎn)品。對企 業(yè)型客戶的財務(wù)狀況、相關(guān)產(chǎn)業(yè)鏈上下游數(shù)據(jù)分析，把握客 現(xiàn)在的狀況，更可以通過數(shù)據(jù)的交換、映射對其進(jìn)行短期、 中期預(yù)測未來發(fā)展?fàn)顩r。同時通過與同行業(yè)中的企業(yè)比較, 以及利用公共平臺收集企業(yè)的上、游對其評價，取得多維度 的評估，對中小企業(yè)風(fēng)險進(jìn)行有效的識別，從而緩解銀行與 中小企業(yè)信息不對稱問題，更好地推動中小企業(yè)市場業(yè)務(wù)創(chuàng) 新。(2) 針對客戶需求，實現(xiàn)精準(zhǔn)營銷。銀行借助大數(shù)據(jù) 分析平臺，通過對客戶的瀏覽記錄、購買路徑、消費數(shù)據(jù), 進(jìn)行挖掘、追蹤、分析，將不同的客戶群體進(jìn)行聚類，根據(jù) 不同的客戶特性打造個性化產(chǎn)品營銷服務(wù)，將最適合的產(chǎn)品 服務(wù)推介給最

10、需要的客戶。提高客戶對銀行服務(wù)的認(rèn)可程度 以及客戶經(jīng)理在營銷過程中的專業(yè)程度。(3) 增強風(fēng)險管控能力。大數(shù)據(jù)分析幫助銀行摒棄原來 過度依靠貸款人提供財務(wù)報表獲取信息的業(yè)務(wù)方式，轉(zhuǎn)而對 其資產(chǎn)價格、賬務(wù)流水、相關(guān)業(yè)務(wù)活動等流動性數(shù)據(jù)進(jìn)行動 態(tài)監(jiān)控，了解客戶的自然屬性和行為屬性，結(jié)合客戶行為分 析、客戶信用度分析、客戶風(fēng)險分析以及客戶的資產(chǎn)負(fù)債狀 況，從而有效提升客戶信息透明度，建立完善的風(fēng)險防范體 系。(4) 促進(jìn)銀行內(nèi)部管理流程化，降低管理運營成本。運 用大數(shù)據(jù)能夠增加銀行內(nèi)部的透明度，使企業(yè)上下級之間的 信息流通更順暢；同時，基于大數(shù)據(jù)優(yōu)化企業(yè)內(nèi)部的各種流 程，以及通過自己和社會信息歸集渠

11、道，了解客戶真實反映, 積極改進(jìn)和提高，大大縮短信息收集、反饋時間，提高企業(yè) 運作效率。而通過大數(shù)據(jù)應(yīng)用和分析，能夠準(zhǔn)確定位內(nèi)部管 理缺陷，制定有針對性的改進(jìn)措施，實行符合自身特點的管 理模式，進(jìn)而降低管理運營成本。(五)平臺的技術(shù)架構(gòu)為實現(xiàn)上述功能經(jīng)多方考察研討擬采用fusioninsight hd平臺作為大數(shù)據(jù)基礎(chǔ)平臺。fusioninsight是企業(yè)級大數(shù) 據(jù)存儲、查詢和分析的統(tǒng)一平臺。它以海量數(shù)據(jù)處理引擎和實時數(shù)據(jù)處理引擎為核心，并針對金融、運營商等數(shù)據(jù)密集 型行業(yè)的運行維護(hù)、應(yīng)用開發(fā)等需求，打造了敏捷、智慧、 可信的平臺軟件、建模中間件及0m系統(tǒng)，讓企業(yè)可以更快、 更準(zhǔn)、更穩(wěn)的從各類

12、繁雜無序的海量數(shù)據(jù)中發(fā)現(xiàn)全新價值點 和企業(yè)商機(jī)。fusionin sight hd manager 債個就 的艙臺 fcwebui大數(shù)據(jù)平臺架構(gòu)圖!第三方調(diào)度平臺ii（歷區(qū)疇里）北向接口loader（數(shù)據(jù)抽 取、轉(zhuǎn)換和 加我工具）一 dv jls 山aoozie （mr任務(wù)編排）hive （統(tǒng)計分析）imapreduce基礎(chǔ)數(shù)據(jù)分析數(shù)援分析層接口實時數(shù)據(jù)眼務(wù)層接口ihbase（海量數(shù)據(jù)隨機(jī)存取jhdfs（存儲海量結(jié)構(gòu)化數(shù)振、非結(jié)構(gòu)化數(shù)據(jù)）fusion insi大數(shù)據(jù)平臺與其他相關(guān)系統(tǒng)接口描述圖（七）大數(shù)據(jù)平臺的網(wǎng)絡(luò)拓?fù)洌ò耍┐髷?shù)據(jù)平臺承載的應(yīng)用系統(tǒng)1. 客戶綜合服務(wù)平臺依托大數(shù)據(jù)分析整合四大板

13、塊銀行客戶信息，建設(shè)客戶 綜合服務(wù)平臺，逐步建立客戶數(shù)據(jù)模型、數(shù)據(jù)標(biāo)準(zhǔn)以及統(tǒng)一 的客戶信息視圖，將分散在各系統(tǒng)的客戶信息數(shù)據(jù)集中整合、 統(tǒng)一管理，支持客戶分類管理和差異化需求，提升服務(wù)質(zhì)量 和服務(wù)效率；按照以客戶為中心的“流程銀行理念，推進(jìn)業(yè) 務(wù)運作流程化，推動流程革新，在流程各環(huán)節(jié)強化風(fēng)險控制， 落實合規(guī)要求；實現(xiàn)對客戶的價值分析與評價，以科技手段 引導(dǎo)產(chǎn)品創(chuàng)新、產(chǎn)品營銷和風(fēng)險控制，通過差異化定價實現(xiàn) 營銷服務(wù)戰(zhàn)略的轉(zhuǎn)變。2. 存貸產(chǎn)品利率定價與管理系統(tǒng)通過大數(shù)據(jù)分析，打造覆蓋事前報價、事中執(zhí)行及控制、 事后監(jiān)測管理的全流程利率定價及管理體系，使利率管理貫 穿整個業(yè)務(wù)價值流程；建立適應(yīng)未來變

14、化的利率組成結(jié)構(gòu)， 支持靈活、差異化的產(chǎn)品利率，通過利息公共構(gòu)件提供靈活 多樣的多種計息方式，完善利率管理系統(tǒng)中利率審批、利率 風(fēng)險管理、利率定價分析功能，以提升我行精細(xì)化利率管理 及風(fēng)險管控能力。3. 加強線上平臺整合(1)電商平臺整合通過與電商平臺的對接，將更多金融業(yè)務(wù)滲透到企業(yè)產(chǎn) 業(yè)鏈條各環(huán)節(jié)，圍繞核心企業(yè)大數(shù)據(jù)探索上下游企業(yè)自動化 應(yīng)收賬款融資、綜合授信等產(chǎn)業(yè)鏈金融服務(wù)，從而實現(xiàn)信息 流、資金流及物流的整合，提升金融服務(wù)的效率和深度，為 電商平臺提供有力的信用增級、安全的資金監(jiān)管、豐富的交 易場景、便捷的支付體系、健全的賬戶管理、特色的會員服 務(wù)、專業(yè)的融資貿(mào)易等金融服務(wù)。(2)互聯(lián)網(wǎng)平臺整合用互聯(lián)網(wǎng)改造傳統(tǒng)金融業(yè)務(wù)流程，促進(jìn)金融走向數(shù)字化, 推進(jìn)金融業(yè)務(wù)從以往的人工化融合轉(zhuǎn)向數(shù)字化牽引；通過移 動支付、第三方支付、大數(shù)據(jù)、眾籌融資、網(wǎng)絡(luò)銀行等方面 的建設(shè)實現(xiàn)向“開放、共享、去中心化、平等、普惠”的新型 數(shù)字金融的轉(zhuǎn)變。4. 小微貸系統(tǒng)運用大數(shù)據(jù)技術(shù)，解決小微企業(yè)及農(nóng)戶融資難問題；加 強大數(shù)據(jù)風(fēng)控，更精確地評價客戶信用，提升風(fēng)險決策實時 性，將內(nèi)控規(guī)則嵌入交易流程，更迅速地識別操作風(fēng)險，預(yù) 防、發(fā)現(xiàn)并及時阻斷銀