大數(shù)據(jù)行業(yè)用戶案例

大數(shù)據(jù)行業(yè)用戶案例HPEVerticaReal-timeAnalyticsPlatform專為大數(shù)據(jù)分析構(gòu)建的關(guān)系數(shù)據(jù)庫(kù)和非結(jié)構(gòu)化分析引擎，分析100%的數(shù)據(jù)大數(shù)據(jù)實(shí)時(shí)分析平臺(tái)高擴(kuò)展高擴(kuò)展列式計(jì)算實(shí)時(shí)聚合高級(jí)分析概念模型語(yǔ)義理解X86大規(guī)模并行處理架構(gòu)（MPP）自動(dòng)優(yōu)化高速并行裝載實(shí)時(shí)分析查詢SQLODBC/JDBC/ADO.NETSQLODBC/JDBC/ADO.NET50x–1000x性能提升TBs~10PBs在線擴(kuò)展節(jié)約90%的存儲(chǔ)空間開放、簡(jiǎn)單易用結(jié)構(gòu)化非結(jié)構(gòu)化ConnectorsRESTful

簡(jiǎn)單、高效、可擴(kuò)展、開放的關(guān)系數(shù)據(jù)庫(kù)和非結(jié)構(gòu)化分析引擎大數(shù)據(jù)分析平臺(tái)架構(gòu))ODBCJDBCADO.NET安裝管理監(jiān)控優(yōu)化備份恢復(fù)

標(biāo)準(zhǔn)SQL解析，列式計(jì)算優(yōu)化器內(nèi)存存儲(chǔ)自定義存儲(chǔ)管理控制臺(tái)列式計(jì)算執(zhí)行引擎列式存儲(chǔ)抽象層HDFSCLI本地文件系統(tǒng)物理存儲(chǔ)層負(fù)載均衡和失敗轉(zhuǎn)移接口層負(fù)載管理實(shí)時(shí)聚合MPP架構(gòu)數(shù)據(jù)庫(kù)引擎New原生高級(jí)分析算法自定義分析處理算法SDK：C++、Java、R非結(jié)構(gòu)化引擎RESTfulNewVertica專注于大數(shù)據(jù)分析，尤其是實(shí)時(shí)分析數(shù)據(jù)量高低OLTP系統(tǒng)作業(yè)類型單行數(shù)據(jù)實(shí)時(shí)性高低批量混合型場(chǎng)景傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)大數(shù)據(jù)分析大數(shù)據(jù)交易以網(wǎng)絡(luò)為中心的電信業(yè)務(wù)模式Telco1G…AMPS|nodata2G…GSM|nodata2.5+G…GPRS&EDGE|56kb/s3G…UMTS|237kb/s3.5+G…HDPA/HSPA|14mb/s4G…LTE|100mb/s電信架構(gòu)演變Vertica電信行業(yè)典型方案BSS經(jīng)營(yíng)分析〔BASS〕詳單〔CDR〕分析流量經(jīng)營(yíng)分析精準(zhǔn)營(yíng)銷分析歷史庫(kù)與報(bào)表合作伙伴與電子渠道分析用戶分類與收益分析……OSS信令分析網(wǎng)絡(luò)錯(cuò)誤與性能優(yōu)化網(wǎng)絡(luò)分析網(wǎng)絡(luò)綜合分析綜合監(jiān)控分析網(wǎng)絡(luò)容量管理客戶體驗(yàn)管理漫游分析……MSSERP數(shù)據(jù)倉(cāng)庫(kù)財(cái)務(wù)報(bào)表系統(tǒng)集中數(shù)據(jù)分析……創(chuàng)新業(yè)務(wù)增值業(yè)務(wù)分析平臺(tái)大數(shù)據(jù)分析平臺(tái)互聯(lián)網(wǎng)分析用戶行為分析用戶位置分析點(diǎn)擊流分析……超快分析速度、無(wú)限的擴(kuò)展能力；SQL標(biāo)準(zhǔn)和開放性實(shí)時(shí)分析和聚合、無(wú)限的擴(kuò)展能力；SQL標(biāo)準(zhǔn)和開放性超快分析速度；SQL標(biāo)準(zhǔn)和開放性開放性和與Hadoop/R的整合能力；超快分析速度、無(wú)限的擴(kuò)展能力；非結(jié)構(gòu)化分析數(shù)據(jù)量大分析處理能力要求高數(shù)據(jù)量巨大實(shí)時(shí)性要求高分析性能要求高數(shù)據(jù)量巨大分析處理能力要求高分析算法要求豐富業(yè)務(wù)域挑戰(zhàn)的優(yōu)勢(shì)HP最具競(jìng)爭(zhēng)力！很強(qiáng)競(jìng)爭(zhēng)力！較強(qiáng)競(jìng)爭(zhēng)力！典型場(chǎng)景:信令監(jiān)測(cè)、共享和分析業(yè)務(wù)信令采集和實(shí)時(shí)信令共享，對(duì)上層業(yè)務(wù)數(shù)據(jù)從多維度關(guān)聯(lián)分析和挖掘，支撐數(shù)據(jù)業(yè)務(wù)精確營(yíng)銷和新數(shù)據(jù)產(chǎn)品效勞。面臨的挑戰(zhàn)數(shù)據(jù)量100sTB~PB:從網(wǎng)絡(luò)和DPI設(shè)備上采集的海量日志和日益豐富的應(yīng)用數(shù)據(jù)，傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)難以滿足存儲(chǔ)和處理的要求分鐘級(jí)準(zhǔn)實(shí)時(shí)性：以社交新媒體和游戲?yàn)橹攸c(diǎn)的應(yīng)用，要求快速抓取社會(huì)熱點(diǎn)，傳統(tǒng)分析工具無(wú)法滿足準(zhǔn)時(shí)分析挖掘的要求Vertica解決方案帶來(lái)的好處無(wú)限的擴(kuò)展能力快速、持續(xù)的數(shù)據(jù)裝載，實(shí)時(shí)分析和聚合SQL標(biāo)準(zhǔn)和開放性準(zhǔn)實(shí)時(shí)分析，大數(shù)據(jù)變現(xiàn)典型案例:山西移動(dòng)信令檢測(cè)分析60節(jié)點(diǎn)HPBL460cG7刀片〔VCFlex10〕D2200sb存儲(chǔ)存儲(chǔ)〔12*1TB7200RPMSATA〕TMR數(shù)據(jù)入庫(kù)超過200MB/s包括GB,IUPS,GN,DPI等原始表入庫(kù)周期為分鐘級(jí)別匯總表入庫(kù)周期為15分鐘級(jí)別保存2個(gè)月，總量超過500TB多種粒度的匯總5分鐘、小時(shí)、天Vertica準(zhǔn)實(shí)時(shí)分析，前所未有典型場(chǎng)景:網(wǎng)絡(luò)性能分析和優(yōu)化業(yè)務(wù)采集網(wǎng)絡(luò)設(shè)備日志和路測(cè)優(yōu)化無(wú)線網(wǎng)絡(luò)運(yùn)行狀態(tài)和效勞質(zhì)量，提升用戶體驗(yàn)。面臨的挑戰(zhàn)數(shù)據(jù)量100sTB:從大量的網(wǎng)絡(luò)設(shè)備采集的海量日志，傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)難以滿足存儲(chǔ)和處理的要求分鐘級(jí)準(zhǔn)實(shí)時(shí)性：快速發(fā)現(xiàn)網(wǎng)絡(luò)質(zhì)量問題，盡可能防止用戶投訴Vertica解決方案帶來(lái)的好處無(wú)限的擴(kuò)展能力快速、持續(xù)的數(shù)據(jù)裝載，實(shí)時(shí)分析和聚合歷史和相似場(chǎng)景分析預(yù)測(cè)潛在問題，有效防止設(shè)備過多配置的浪費(fèi)準(zhǔn)實(shí)時(shí)分析，提升網(wǎng)絡(luò)效勞質(zhì)量典型案例:四川電信無(wú)線網(wǎng)絡(luò)優(yōu)化CDTCM、FM、PMIMSI-終端映射表Rx/Tx/FFER/SINR，位置CDT服務(wù)器OMMServer電信終端分析系統(tǒng)FTP普通終端采集數(shù)據(jù)工參電信資源管理系統(tǒng)數(shù)據(jù)采集NDS服務(wù)器數(shù)據(jù)預(yù)處理：話單分析容量分析，關(guān)聯(lián)分析，預(yù)測(cè)數(shù)據(jù)分析電信網(wǎng)優(yōu)云處理云：解析匯總存儲(chǔ)云：話單數(shù)據(jù)，匯總指標(biāo)數(shù)據(jù)應(yīng)用呈現(xiàn)FTP處理云：Hadoop集群完成數(shù)據(jù)解析匯總存儲(chǔ)云：HPVertica集群完成大數(shù)據(jù)存儲(chǔ)6個(gè)節(jié)點(diǎn)集群，數(shù)據(jù)量超過30T主表單表超過20TB，分鐘級(jí)準(zhǔn)實(shí)時(shí)入庫(kù)典型場(chǎng)景:經(jīng)營(yíng)分析業(yè)務(wù)利用業(yè)務(wù)支撐、網(wǎng)絡(luò)、效勞和財(cái)務(wù)等系統(tǒng)產(chǎn)生的大量根底數(shù)據(jù)實(shí)現(xiàn)經(jīng)營(yíng)情況的分析和監(jiān)控，供經(jīng)營(yíng)決策依據(jù)，以實(shí)現(xiàn)精細(xì)化營(yíng)銷。面臨的挑戰(zhàn)數(shù)據(jù)量100sTB~PB:傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)難以滿足存儲(chǔ)和快速處理的要求Vertica解決方案帶來(lái)的好處超快分析速度無(wú)限的擴(kuò)展能力SQL標(biāo)準(zhǔn)和開放性大數(shù)據(jù)高性能分析支撐精細(xì)化營(yíng)銷和差異競(jìng)爭(zhēng)能力典型案例:河南移動(dòng)經(jīng)營(yíng)分析32節(jié)點(diǎn)，數(shù)據(jù)量360TB數(shù)據(jù)自助效勞：業(yè)務(wù)用戶自助分析營(yíng)銷大數(shù)據(jù)分析：各種營(yíng)銷模式和促銷手段的大數(shù)據(jù)分析客戶屬性數(shù)據(jù)的關(guān)聯(lián)分析，包括客戶畫像查詢、標(biāo)簽客戶群刷新、標(biāo)簽分析的數(shù)據(jù)刷新典型方案：社交媒體情感分析支撐的營(yíng)銷和效勞系統(tǒng)100%數(shù)據(jù)深度分析全面把握瞬變的趨勢(shì)典型案例：CDR/DDR分析+網(wǎng)絡(luò)性能監(jiān)控分析2013年?duì)I業(yè)收入1280億

4GLTE用戶2.8億1.8億高速寬帶用戶裸數(shù)據(jù)容量3.2PB眾多電信分析業(yè)務(wù)的集中代表典型案例：KDDI網(wǎng)絡(luò)流量分析平臺(tái)日本第二大電信運(yùn)營(yíng)商4100萬(wàn)用戶,15萬(wàn)個(gè)基站通過分析所有網(wǎng)絡(luò)流量來(lái)了解用戶行為精準(zhǔn)營(yíng)銷差異化經(jīng)營(yíng)網(wǎng)絡(luò)質(zhì)量分析快速定位解決問題，提升客戶滿意度、提升競(jìng)爭(zhēng)力Vertica平臺(tái)：66節(jié)點(diǎn)，2.5PB數(shù)據(jù)量最好的性價(jià)比與高可擴(kuò)展性，大量PB級(jí)別的真實(shí)案例其它競(jìng)爭(zhēng)對(duì)手都有缺陷Netezza：邊加載邊查詢性能差，壓縮比低本錢高Exadata：PB級(jí)別查詢性能差，本錢高昂國(guó)內(nèi)電信行業(yè)案例上海電信3G網(wǎng)絡(luò)流量分析，>30TB中國(guó)電信集團(tuán)互聯(lián)網(wǎng)增值業(yè)務(wù)，>50TB四川電信網(wǎng)絡(luò)優(yōu)化,>30TB山西移動(dòng)信令實(shí)時(shí)分析，>500TB山東移動(dòng)網(wǎng)絡(luò)綜分，>20TB河南移動(dòng)經(jīng)營(yíng)分析，>300TB深圳移動(dòng)全網(wǎng)監(jiān)控智能分析平臺(tái)移動(dòng)西北諸省甘肅移動(dòng)大數(shù)據(jù)平臺(tái)青海移動(dòng)經(jīng)分系統(tǒng)陜西移動(dòng)經(jīng)分系統(tǒng)典型案例其他行業(yè)典型案例Vertica全球超過2500客戶，并且不斷增長(zhǎng)金融行業(yè)消費(fèi)市場(chǎng)在線網(wǎng)站和游戲醫(yī)療零售通信行業(yè)很多數(shù)據(jù)量超過1PB的案例能源行業(yè)應(yīng)用場(chǎng)景行業(yè)優(yōu)先工作重點(diǎn)減少能源開采成本通過分析區(qū)域數(shù)據(jù)減少區(qū)域服務(wù)成本智能電量、智能電表解決方案主要應(yīng)用場(chǎng)景M2M/智能傳感數(shù)據(jù)分析預(yù)測(cè)分析個(gè)性化價(jià)格方案客戶行為分析客戶價(jià)值管理忠誠(chéng)度管理實(shí)時(shí)使用分析具體行業(yè)公共事業(yè)能源開采智能電表智能電網(wǎng)智能數(shù)據(jù)倉(cāng)庫(kù)公司經(jīng)營(yíng)面臨的挑戰(zhàn)公司支撐波羅的海和北歐周邊國(guó)家的能源供給，包括電力、熱能、石油、天然氣和頁(yè)巖氣等。整個(gè)行業(yè)已在2021年1月經(jīng)被解除管制，公司不再是壟斷經(jīng)營(yíng)。因此公司需要更好的了解他們的客戶，并提供優(yōu)質(zhì)和增值的效勞。當(dāng)前客戶的集中化數(shù)據(jù)倉(cāng)庫(kù)已經(jīng)運(yùn)行多年，基于Oracle平臺(tái)。每天晚上的數(shù)據(jù)加載和批處理時(shí)間過長(zhǎng)，已經(jīng)無(wú)法在規(guī)定時(shí)間窗口內(nèi)完成。現(xiàn)有平臺(tái)的升級(jí)本錢過高，Oracle只提供一體機(jī)方案未來(lái)3年公司將廣泛實(shí)施智能電表、智能計(jì)價(jià)，會(huì)產(chǎn)生大規(guī)模的傳感和計(jì)價(jià)數(shù)據(jù)。因此需要一個(gè)可擴(kuò)展的、充分滿足未來(lái)3年增長(zhǎng)需求的數(shù)據(jù)倉(cāng)庫(kù)平臺(tái)解決方案。智能數(shù)據(jù)倉(cāng)庫(kù)HPVertica解決方案支持超過30種業(yè)務(wù)流程與分析模型，包括各種深度分析，幫助愛沙尼亞能源創(chuàng)造多種新的業(yè)務(wù)場(chǎng)景：銷售與市場(chǎng)支持：通過消費(fèi)者使用率分析來(lái)指導(dǎo)各種定價(jià)標(biāo)準(zhǔn)和市場(chǎng)策略，吸引新客戶、保存現(xiàn)有客戶用戶消耗：用戶可以通過快速的查詢到按時(shí)間維度的詳細(xì)資源消耗，包括電力、天然氣、熱力等。損失定位：快速定位能源損耗，是計(jì)價(jià)設(shè)備問題還是偷盜行為。5年前的能源損失率是12%，而在使用新系統(tǒng)后這個(gè)數(shù)值降為7%，大大提高了利潤(rùn)率和收入。分析和運(yùn)營(yíng)報(bào)表：快速的生成運(yùn)營(yíng)報(bào)表，實(shí)時(shí)加載實(shí)時(shí)查詢，無(wú)時(shí)間窗口限制，產(chǎn)生更多的各種不同維度的分析報(bào)表，供業(yè)務(wù)部門使用。5個(gè)月全部完成了從Oracle到Vertica的應(yīng)用和數(shù)據(jù)的遷移生產(chǎn)數(shù)據(jù)量10TB，1000+張表。包括4個(gè)Vertica環(huán)境：開發(fā)、開發(fā)測(cè)試、測(cè)試和生產(chǎn)典型案例：機(jī)器生成數(shù)據(jù)實(shí)時(shí)分析智能樓宇實(shí)時(shí)測(cè)控、高能效標(biāo)準(zhǔn)要求電、氣、水供給，空調(diào)制冷、空氣處理、…基于海量的傳感器數(shù)據(jù)的實(shí)時(shí)分析：實(shí)時(shí)數(shù)據(jù)采集和連續(xù)裝載實(shí)時(shí)調(diào)整優(yōu)化能源控制策略實(shí)時(shí)監(jiān)控設(shè)備狀態(tài)，主動(dòng)維護(hù)設(shè)備Vertica實(shí)時(shí)分析能力和時(shí)間序列分析算法，極大限度地優(yōu)化了資源配置，大幅降低了故障率，提升客服滿意度云端部署(AmazonEC2)，可隨時(shí)按需擴(kuò)展智能高能效樓宇醫(yī)療保健典型應(yīng)用場(chǎng)景藥物開發(fā)

藥物發(fā)現(xiàn)基因數(shù)據(jù)科學(xué)研究

循證醫(yī)學(xué)

預(yù)測(cè)副作用分析藥物風(fēng)險(xiǎn)評(píng)估臨床治療基于效果的診斷和治療個(gè)性化治療

藥物影響行為患者護(hù)理分析預(yù)防慢性疾病業(yè)務(wù)運(yùn)維收入保障

內(nèi)部風(fēng)險(xiǎn)評(píng)估

索賠處理方案合規(guī)工作流管理收入保障價(jià)格優(yōu)化/醫(yī)療保健本錢建模索賠欺詐品牌管理Web分析營(yíng)銷活動(dòng)優(yōu)化

醫(yī)療創(chuàng)新既挽救生命又省錢5400萬(wàn)條生命，35億人月的醫(yī)療保健數(shù)據(jù)不可預(yù)知的客戶需求，極長(zhǎng)的批處理隊(duì)列借助Vertica，可將響應(yīng)時(shí)間縮短到數(shù)分鐘/秒，批處理等待時(shí)間為0現(xiàn)在用于醫(yī)療費(fèi)用建模、慢性疾病預(yù)防、索賠欺詐發(fā)現(xiàn)、非品牌藥的使用等“開始時(shí)使用一個(gè)研究工程做試驗(yàn)，查詢結(jié)果返回得如此之快，我們還以為查詢失敗了呢！如今我們已將整個(gè)分析堆棧遷移到Vertica！很快樂成為Vertica的客戶。〞藍(lán)十字藍(lán)盾協(xié)會(huì)高級(jí)副總裁兼首席信息官DougPorter藍(lán)十字藍(lán)盾協(xié)會(huì)您了解嗎？數(shù)據(jù)科學(xué)家經(jīng)常將Vertica與SAS或R等工具一起用于深入的預(yù)測(cè)性建模Cerner挑戰(zhàn)CernerMillennium平臺(tái)需要更快分析更多的電子健康記錄和大量的系統(tǒng)性能度量指標(biāo)提高醫(yī)生效率，提升醫(yī)療效勞效果和質(zhì)量，改善診療流程解決方案Vertica準(zhǔn)實(shí)時(shí)分析效果提升60倍分析性能，幫助Cerner更全面洞察診療全過程，大幅改善醫(yī)生效率每天快速分析2百萬(wàn)告警，幫助Cerner提前了解面臨的問題，并防患于未然HPVertica助力優(yōu)化醫(yī)療信息解決方案廣告營(yíng)銷典型案例AppNexus實(shí)時(shí)在線廣告服務(wù)平臺(tái)，>100TB/24節(jié)點(diǎn)AppLovin移動(dòng)應(yīng)用營(yíng)銷活動(dòng)監(jiān)控，100TBInsightExpress跨媒體營(yíng)銷活動(dòng)效果分析，30TB/8節(jié)點(diǎn)Neverblue廣告用戶體驗(yàn)分析AdformWeb流量和網(wǎng)站分析支撐營(yíng)銷活動(dòng)優(yōu)化，30TBAdMarketplace基于用戶分析的搜索效果營(yíng)銷廣告營(yíng)銷典型案例AppNexus在線實(shí)時(shí)廣告效勞平臺(tái)背景廣告主和在線內(nèi)容提供商之間的在線實(shí)時(shí)廣告交易效勞平臺(tái)每天全球數(shù)百個(gè)企業(yè)購(gòu)置和銷售數(shù)十億個(gè)在線廣告3000億記錄/day,35TB/day挑戰(zhàn)高并發(fā)、低延遲擴(kuò)展能力、高可用解決方案HPHAVEn：Vertica+Hadoop優(yōu)勢(shì)實(shí)時(shí)數(shù)據(jù)裝載和查詢，高可用性分析模型快速演進(jìn)零售業(yè)典型應(yīng)用場(chǎng)景銷售和庫(kù)存全視角跟蹤提升區(qū)域倉(cāng)庫(kù)間貨物調(diào)度效率提供恰當(dāng)?shù)馁Y源配置以優(yōu)化店員效率關(guān)聯(lián)和購(gòu)物籃分析，更好地理解顧客購(gòu)置行為和忠誠(chéng)度實(shí)時(shí)分析對(duì)線上或?qū)嶓w零售都至關(guān)重要實(shí)時(shí)洞悉零售情況取代基于Oracle、無(wú)法擴(kuò)展的POS數(shù)據(jù)倉(cāng)庫(kù)使用Vertica時(shí)性能提高100倍，可以24x7加載數(shù)據(jù)，最大限度地減少行政開銷每一個(gè)商店經(jīng)理都可以使用MicroStrategy訪問移動(dòng)設(shè)備上的數(shù)據(jù)零售業(yè)瞬息萬(wàn)變，所以我們需要使用一個(gè)高性能的分析平臺(tái)，來(lái)滿足我們對(duì)快速處理信息的需求。〞-Guess,Inc.公司首席信息官M(fèi)ikeRelichGUESS,Inc.圖片是從Guess年度報(bào)告復(fù)制的：我們無(wú)權(quán)使用空中客車的銷售預(yù)測(cè)分析系統(tǒng)系統(tǒng)：Diio應(yīng)用提供最精確的航空公司銷售預(yù)測(cè)系統(tǒng)數(shù)據(jù)：包括所有航空公司的企業(yè)數(shù)據(jù)和市場(chǎng)智能數(shù)據(jù)，這些數(shù)據(jù)用作合理化預(yù)測(cè)空客公司的預(yù)算流程業(yè)務(wù)模型：提供清晰的業(yè)務(wù)預(yù)算分析，快速計(jì)算容量和費(fèi)用的影響快速的預(yù)測(cè)，將以前需要幾周的分析流程縮短到一天內(nèi)完成預(yù)測(cè)包括基于月度的飛行、銷售點(diǎn)和預(yù)定級(jí)別等各種維度的統(tǒng)計(jì)快速匯總，按人群分類、地區(qū)和系統(tǒng)，進(jìn)行根底費(fèi)用分割、YQ、稅和酬金的計(jì)算按方案的分析和無(wú)限制的預(yù)算分析至上而下的收入預(yù)測(cè)分析系統(tǒng)：4節(jié)點(diǎn)的集群，Diio實(shí)施應(yīng)用，IBM外包運(yùn)維〔中國(guó)〕澳洲航空的常旅客管理分析系統(tǒng)原系統(tǒng)無(wú)法滿足實(shí)時(shí)分析的要求系統(tǒng)上線以來(lái)常旅客數(shù)增加了60%而80%的收入增加來(lái)源于常旅客基于Vertica的新系統(tǒng)：公司制定以數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù)的策略，需要新的平臺(tái)來(lái)進(jìn)行市場(chǎng)和客戶分析快速實(shí)時(shí)的分析結(jié)果和業(yè)務(wù)報(bào)告典型案例：Symantec托管平安效勞Symantec托管平安效勞：為超過600個(gè)客戶提供網(wǎng)絡(luò)威脅檢測(cè)效勞，每個(gè)月：分析超過2750億條日志，7x24小時(shí)不間斷識(shí)別超過4萬(wàn)個(gè)潛在平安問題事件，驗(yàn)證超過4千個(gè)嚴(yán)重平安事件平臺(tái)上有超過1PB數(shù)據(jù)，目前只能存放90天的數(shù)據(jù)Symantec面臨的挑戰(zhàn)：分析查詢和數(shù)據(jù)準(zhǔn)實(shí)時(shí)加載性能低目前由2個(gè)割裂的專有系統(tǒng)構(gòu)成：聚合分析庫(kù)，歷史歸檔庫(kù)。歷史歸檔庫(kù)為了到達(dá)12倍壓縮率，缺乏高可用性和容災(zāi)能力對(duì)基于SQL標(biāo)準(zhǔn)的BI工具支撐困難并行處理和擴(kuò)展能力滿足不了要求HP解決方案：采用Vertica，單一數(shù)據(jù)庫(kù)實(shí)現(xiàn)聚合分析和歷史歸檔功能典型案例：Symantec托管平安效勞HPVertica帶來(lái)的好處：準(zhǔn)實(shí)時(shí)的數(shù)據(jù)裝載和分析查詢內(nèi)置高可用行，到達(dá)14倍壓縮效果，能存放更多的數(shù)據(jù)基于SQL標(biāo)準(zhǔn)和ODBC、JDBC、ADO.NET標(biāo)準(zhǔn)連接方式，支持主流的BI工具VerticaMPP架構(gòu)的線性擴(kuò)展能力經(jīng)過大規(guī)模驗(yàn)證，可以從幾個(gè)～近千個(gè)節(jié)點(diǎn)在線擴(kuò)展，性能和本錢完全可控制新部署容災(zāi)環(huán)境，只增加硬件，不再需要軟件投入Vertica自帶的高級(jí)分析算法，更容易挖掘潛在平安事件：時(shí)間序列分析方法：更方便關(guān)聯(lián)分析來(lái)自多個(gè)網(wǎng)絡(luò)設(shè)備不同時(shí)隙的事件模式匹配：理解網(wǎng)絡(luò)欺詐和攻擊行為模式，并用于預(yù)防聚類：根據(jù)用戶行為模式對(duì)用戶分群，識(shí)別高風(fēng)險(xiǎn)用戶“Verticahelpsusonthechallengeoftimeconsumingandcomplexityonbigdata,makingdataanalysisoncustomeractionsthroughweblogspossible.Expectmoreco-operationwithHPandVertica.〞

挑戰(zhàn)HP16000switch,10000routers,30萬(wàn)用戶工作在600個(gè)site,全球性的遠(yuǎn)程接入支持,產(chǎn)生海量網(wǎng)絡(luò)流量包分析人員如何從海量信息中快速發(fā)掘惡意軟件的蹤跡，找處各種惡意或者為經(jīng)批準(zhǔn)的網(wǎng)絡(luò)活動(dòng)，以便第一時(shí)間能夠隔離或消除其行為結(jié)果解決方案結(jié)合使用LancopeStealthWatch,一個(gè)網(wǎng)絡(luò)流量異常檢測(cè)引擎+

HPverticaDatabase,一個(gè)能夠在海量數(shù)據(jù)壓力下實(shí)現(xiàn)高性能實(shí)時(shí)分析的數(shù)據(jù)庫(kù)引擎結(jié)合HP已有的侵入保護(hù)系統(tǒng)TippingPoint和HP

Arcsight(SIEM)對(duì)網(wǎng)絡(luò)安全提供深層次保護(hù)>>>收益近實(shí)時(shí)在5-10分鐘內(nèi)對(duì)流量分析，觀察流量匯總和細(xì)節(jié)完全的自動(dòng)化整合提升HP安全團(tuán)隊(duì)?wèi)?yīng)對(duì)攻擊的響應(yīng)效率HP通過海量歷史數(shù)據(jù)分析，能夠進(jìn)一步增強(qiáng)對(duì)企業(yè)IT運(yùn)行正常狀況的理解，提升對(duì)“未知”異常的監(jiān)測(cè)能力HP大數(shù)據(jù)分析還幫助網(wǎng)絡(luò)專家識(shí)別企業(yè)內(nèi)部應(yīng)用與網(wǎng)絡(luò)關(guān)系，了解應(yīng)用使用的情況，從而更好規(guī)劃企業(yè)IT資源金融行業(yè)案例HPVertica金融行業(yè)案例列表〔局部〕客戶名稱客戶簡(jiǎn)介系統(tǒng)建設(shè)/應(yīng)用場(chǎng)景BOA(BankofAmerica)美洲銀行全球最大銀行之一系統(tǒng)1：信用卡數(shù)據(jù)倉(cāng)庫(kù)（替換原有的DB2平臺(tái)），支持信用卡業(yè)務(wù)統(tǒng)計(jì)分析及實(shí)時(shí)信用評(píng)分，數(shù)據(jù)量超過到1.5PB（88節(jié)點(diǎn)）系統(tǒng)2：投資事業(yè)部分析平臺(tái)（替換原有的TD平臺(tái)），支持全球資本市場(chǎng)及風(fēng)險(xiǎn)分析，數(shù)據(jù)量超過1PBRBC(RoyalBankofCanada)加拿大皇家銀行加拿大最大的銀行風(fēng)險(xiǎn)分析系統(tǒng)（替換原有的TD平臺(tái)），支持RBC全行的后臺(tái)風(fēng)險(xiǎn)分析CreditSuisse瑞士信貸銀行瑞士第二大的銀行投資風(fēng)險(xiǎn)分析平臺(tái)（替換原Exadata平臺(tái)），支持跟全面的監(jiān)管數(shù)據(jù)報(bào)送及交易數(shù)據(jù)實(shí)時(shí)加載和風(fēng)險(xiǎn)評(píng)估，靈活查詢性能提升200%，數(shù)據(jù)周期由2年延長(zhǎng)到10年。BNYMellon紐約梅隆銀行全球十大投資銀行之一銀行事件（交易，事務(wù)）實(shí)時(shí)分析，支撐超過150+業(yè)務(wù)應(yīng)用，一期數(shù)據(jù)量150TBOpenBank俄羅斯開放銀行俄羅斯最大的私營(yíng)銀行實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)，支持全面的BI、實(shí)時(shí)KPI指標(biāo)監(jiān)控及風(fēng)險(xiǎn)策略執(zhí)行情況ICICIBank印度工業(yè)信貸投資銀行印度最大私營(yíng)銀行企業(yè)級(jí)大數(shù)據(jù)分析平臺(tái)，融合結(jié)構(gòu)化和非機(jī)構(gòu)化數(shù)據(jù)，一期數(shù)據(jù)量300TB新韓銀行韓國(guó)最大商業(yè)銀行數(shù)據(jù)分析平臺(tái)，現(xiàn)有Teradata數(shù)據(jù)倉(cāng)庫(kù)的補(bǔ)充，一期數(shù)據(jù)量400TBGarantiBank土耳其擔(dān)保銀行土耳其第三大銀行風(fēng)險(xiǎn)管理/運(yùn)營(yíng)及安全分析/客戶分析招商銀行中國(guó)領(lǐng)先的商業(yè)銀行大數(shù)據(jù)分析平臺(tái)，20萬(wàn)以下小微貸款，20TB，4節(jié)點(diǎn)BOA選擇Vertica建設(shè)信用卡實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)背景及挑戰(zhàn)性能瓶頸：原有數(shù)據(jù)倉(cāng)庫(kù)Bacardi(BoACardInfrastructure)無(wú)法支持實(shí)時(shí)信用評(píng)估，并且欺詐偵測(cè)及風(fēng)險(xiǎn)預(yù)測(cè)模型支持3個(gè)月的數(shù)據(jù)本錢因素：基于Mainframe上的DB2的平臺(tái)架構(gòu)，運(yùn)維本錢很高，并且擴(kuò)展性受到限制解決方案用HPVertica替換原有DB288節(jié)點(diǎn)Vertica集群，1.5PB原始數(shù)據(jù)收益及效果增量數(shù)據(jù)實(shí)時(shí)加載，在1-5分鐘內(nèi)可以用于分析，用于分析的數(shù)據(jù)量從3個(gè)月擴(kuò)展到5年，批量加載9TB/小時(shí)分析性能提升180~240倍，欺詐偵測(cè)由2-3天縮短到15分鐘數(shù)百個(gè)分析師同時(shí)使用，峰值并發(fā)近千個(gè)，秒級(jí)響應(yīng)僅系統(tǒng)維護(hù)費(fèi)用，每年就節(jié)省數(shù)百萬(wàn)美元數(shù)據(jù)壓縮比為1/6，節(jié)省了1PB的存儲(chǔ)Vertica案例：ICICI企業(yè)級(jí)大數(shù)據(jù)分析平臺(tái)融合結(jié)構(gòu)化與互聯(lián)網(wǎng)數(shù)據(jù)，擴(kuò)展傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)的廣度與深度背景與需求：ICICI是印度最大的民營(yíng)銀行原有基于Sybase的平臺(tái)無(wú)法滿足新業(yè)務(wù)的需求需要建立一個(gè)新的企業(yè)級(jí)大數(shù)據(jù)分析平臺(tái)支持實(shí)時(shí)分析支持互聯(lián)網(wǎng)、社交媒體數(shù)據(jù)良好的可擴(kuò)展性和快速分析能力Vertica新平臺(tái)同時(shí)支持結(jié)構(gòu)化與半結(jié)構(gòu)化數(shù)據(jù)〔社交媒體〕近實(shí)時(shí)的營(yíng)銷信息推送，比方個(gè)人貸款、消費(fèi)等當(dāng)客戶訪問營(yíng)銷網(wǎng)點(diǎn)時(shí)的相應(yīng)促銷活動(dòng)實(shí)時(shí)銷售數(shù)據(jù)監(jiān)測(cè)基于地理位置的聯(lián)合分析，比方哪個(gè)ATM空閑等一期400TB，21節(jié)點(diǎn)新韓銀行：選擇Vertica建設(shè)數(shù)據(jù)分析平臺(tái)傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)的補(bǔ)充與替代背景與需求：1998年開始使用Teradata作為數(shù)據(jù)倉(cāng)庫(kù)，數(shù)據(jù)容量持續(xù)增長(zhǎng)〔120TB->240TB〕，擴(kuò)容及運(yùn)維本錢巨大考慮其他解決方案以緩解目前的壓力，并拓展新型的分析型應(yīng)用快速增長(zhǎng)的新金融業(yè)務(wù)，更強(qiáng)的風(fēng)險(xiǎn)控制解決方案選擇Vertica建設(shè)數(shù)據(jù)分析平臺(tái)48節(jié)點(diǎn)，120TBHPDL380Gen87個(gè)月完成系統(tǒng)遷移〔2021.1~2021.7〕45000+模型轉(zhuǎn)換5000+腳本遷移Vertica集群前端展現(xiàn)分支IT

總部存款外匯客戶貸款核心系統(tǒng)IBglobalbankafund其他源系統(tǒng)ODS信息分析DW目前DW(Teradata)EUCmart新集市新集市集市3集市2集市1單一數(shù)據(jù)流新韓銀行：選擇Vertica建設(shè)數(shù)據(jù)分析平臺(tái)通過性能提升，大幅增強(qiáng)目標(biāo)客戶的營(yíng)銷能力及時(shí)為每個(gè)網(wǎng)點(diǎn)提供目標(biāo)客戶信息生成目標(biāo)客戶信息的時(shí)間縮短3個(gè)小時(shí)〔3個(gè)小時(shí)5分鐘〕充分保障向目標(biāo)客戶開展直銷活動(dòng)的時(shí)間增加自助式BI系統(tǒng)的可用時(shí)間提前5小時(shí)提供自助式BI效勞〔12:007:00〕數(shù)據(jù)能夠更快的提供給各個(gè)業(yè)務(wù)部門，節(jié)省更多時(shí)間來(lái)進(jìn)行后續(xù)的作業(yè)處理〔分析，匯總等〕提升營(yíng)銷信息的查詢性能查詢時(shí)間提升11.7倍，〔過去平均4份44秒現(xiàn)在平均22.6秒〕當(dāng)處理大約500個(gè)營(yíng)銷信息是,處理時(shí)間從2366分鐘減少到188分鐘。(共減少36個(gè)小時(shí))所需時(shí)間對(duì)比性能提升比例138%159%整體匯總加載性能對(duì)比—ETL批處理整體匯總加載1170%原數(shù)據(jù)庫(kù)

原數(shù)據(jù)庫(kù)

所需時(shí)間對(duì)比性能提升比例性能對(duì)比—營(yíng)銷信息查詢新韓銀行：選擇Vertica建設(shè)數(shù)據(jù)分析平臺(tái)降低系統(tǒng)的整體擁有本錢〔TCO〕，優(yōu)化系統(tǒng)架構(gòu)深圳招聯(lián)：風(fēng)險(xiǎn)與營(yíng)銷大數(shù)據(jù)分析平臺(tái)通過大數(shù)據(jù)分析開掘新的業(yè)務(wù)時(shí)機(jī)背景與需求：招聯(lián)是招商銀行與中國(guó)聯(lián)通共同出資組建的子公司，專注于小微貸款〔20萬(wàn)以下的〕風(fēng)險(xiǎn)與營(yíng)銷業(yè)務(wù)。數(shù)據(jù)驅(qū)動(dòng)：通過金融數(shù)據(jù)與電信數(shù)據(jù)的融合分析，對(duì)客戶的信用及風(fēng)險(xiǎn)進(jìn)行實(shí)時(shí)分析