EMC成功案例分析

32?Copyright2021EMCCorporation.Allrightsreserved.Greenplum成功案例EMCGreenplumTrainingForATCEMC咨詢效勞部 Tracy.Li易安信電腦系統(tǒng)〔中國(guó)〕2021年11月Greenplum的應(yīng)用場(chǎng)景舉例BI/DW客戶管理，ODS，數(shù)據(jù)集市等數(shù)據(jù)挖掘，經(jīng)營(yíng)分析，網(wǎng)絡(luò)分析，知識(shí)庫(kù)管理，成本效益分析等可以高效、低成本的存儲(chǔ)、訪問(wèn)當(dāng)前及歷史數(shù)據(jù)利用Greenplum最低的TB數(shù)據(jù)成本（高性價(jià)比）利用Greenplum高效的數(shù)據(jù)加載能力，迅速將長(zhǎng)期積累的數(shù)據(jù)入庫(kù)利用Greenplum的并行數(shù)據(jù)流技術(shù)，將企業(yè)遺留的文件數(shù)據(jù)加工入庫(kù)利用Greenplum的并行數(shù)據(jù)流技術(shù)，進(jìn)行統(tǒng)計(jì)、訪問(wèn)和加工分析需要結(jié)合數(shù)據(jù)庫(kù)并行處理外部數(shù)據(jù)數(shù)據(jù)非常難以加工處理成數(shù)據(jù)庫(kù)表數(shù)據(jù)來(lái)存放（非結(jié)構(gòu)化數(shù)據(jù)）需要專用的處理程序處理（MapReduce）處理結(jié)果適合數(shù)據(jù)庫(kù)保存，或者需要結(jié)合數(shù)據(jù)庫(kù)數(shù)據(jù)進(jìn)行分析(Recochoku)Greenplum的客戶Agenda淘寶

阿里巴巴支付寶數(shù)據(jù)倉(cāng)庫(kù)網(wǎng)站日志交易數(shù)據(jù)詳細(xì)數(shù)據(jù)Greenplum海量根底數(shù)據(jù)大數(shù)據(jù)量查詢Oracle加工數(shù)據(jù)門戶網(wǎng)站高并發(fā)查詢。。。。。。用戶信息日志挖掘效勞器H+1，20臺(tái)信用/CTUDatamart/計(jì)算平臺(tái)數(shù)據(jù)倉(cāng)庫(kù)主庫(kù)定時(shí)任務(wù)計(jì)算60臺(tái)數(shù)據(jù)分發(fā)數(shù)據(jù)源OLTP系統(tǒng)財(cái)務(wù)系統(tǒng)銷售系統(tǒng)客服系統(tǒng)會(huì)員營(yíng)銷Datamart/計(jì)算平臺(tái)抽取數(shù)據(jù)收集分發(fā)中心數(shù)據(jù)倉(cāng)庫(kù)工具與管理平臺(tái)/調(diào)度系統(tǒng))管理元數(shù)據(jù)(MetaData)管理CDC資金/財(cái)務(wù)等Datamart/模型計(jì)算平臺(tái)CDCCDCCDC賬戶系統(tǒng)…數(shù)據(jù)倉(cāng)庫(kù)備庫(kù)查詢60臺(tái)數(shù)據(jù)歷史庫(kù)/挖掘40臺(tái)CDCCDC數(shù)據(jù)分發(fā)數(shù)據(jù)分發(fā)風(fēng)控系統(tǒng)會(huì)員營(yíng)銷客戶效勞資金管理財(cái)務(wù)分析客戶信用挖掘工具集商業(yè)智能信息門戶KPI報(bào)表與業(yè)務(wù)報(bào)告業(yè)務(wù)指標(biāo)儀表盤監(jiān)控運(yùn)營(yíng)與營(yíng)銷數(shù)據(jù)分析綜合數(shù)據(jù)查詢挖掘分析報(bào)告用戶訪問(wèn)行為跟蹤競(jìng)爭(zhēng)情報(bào)日志收集效勞器20臺(tái)日志/行為模型計(jì)算準(zhǔn)實(shí)時(shí)，4臺(tái)效勞打點(diǎn)效勞線上即時(shí)作弊判斷線上即時(shí)個(gè)性化營(yíng)銷企業(yè)數(shù)據(jù)中心網(wǎng)站訪問(wèn)交易系統(tǒng)圖例已經(jīng)上線greenplum集群，總共120臺(tái)即將上線查詢集群

總共60臺(tái)淘寶

阿里巴巴支付寶數(shù)據(jù)倉(cāng)庫(kù)AgendaAgenda北京銀行根底數(shù)據(jù)平臺(tái)北京銀行是一家股份制商業(yè)銀行。在北京、上海、天津、西安擁有136家營(yíng)業(yè)網(wǎng)點(diǎn)。北京銀行目前是中國(guó)第二大城市銀行及北京地區(qū)第三大銀行。功能和定位：實(shí)現(xiàn)信息資源的集成、整合和共享建立全行合理的數(shù)據(jù)架構(gòu)、體系作為效勞于各業(yè)務(wù)部門、各分行的的分析決策支持平臺(tái)初始全量：300GB每日加工數(shù)據(jù)文件：22GB 加載到數(shù)據(jù)庫(kù)：10GB近線存儲(chǔ)〔9個(gè)月數(shù)據(jù)〕：估算2TB離線存儲(chǔ)〔5年數(shù)據(jù)〕：估算8TB北京銀行根底數(shù)據(jù)平臺(tái)物理架構(gòu)北京銀行根底數(shù)據(jù)平臺(tái)邏輯架構(gòu)深開展銀行ODS平臺(tái)物理架構(gòu)深開展銀行ODS平臺(tái)2+6模式組成計(jì)算平臺(tái)邏輯架構(gòu)深開展銀行ODS平臺(tái)中信銀行信用卡中心數(shù)據(jù)倉(cāng)庫(kù)物理架構(gòu)中信銀行信用卡中心數(shù)據(jù)倉(cāng)庫(kù)2+4模式組成計(jì)算平臺(tái)邏輯架構(gòu)中信銀行信用卡中心數(shù)據(jù)倉(cāng)庫(kù)SAS數(shù)據(jù)集AS400DB2卡業(yè)務(wù)系統(tǒng)卡中心數(shù)據(jù)中心系統(tǒng)根底數(shù)據(jù)層〔ODS〕數(shù)據(jù)倉(cāng)庫(kù)層〔DW)BIServerCognosMicrosoftSQLServerMicrosoftAnalysisPHPMicrosoft.NetJAVA應(yīng)用Agenda物理架構(gòu)邏輯架構(gòu)Agenda華泰證券數(shù)據(jù)倉(cāng)庫(kù)物理架構(gòu)華泰證券數(shù)據(jù)倉(cāng)庫(kù)邏輯架構(gòu)華泰證券數(shù)據(jù)倉(cāng)庫(kù)Agenda雙鶴藥業(yè)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)北京雙鶴藥業(yè)股份，中國(guó)大型綜合型制藥骨干企業(yè)，位列全國(guó)醫(yī)藥制造行業(yè)前十名。功能和定位：構(gòu)建企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)和商務(wù)智能平臺(tái)覆蓋 生產(chǎn)、財(cái)務(wù)、分銷、質(zhì)量管理等領(lǐng)域集成預(yù)算數(shù)據(jù)與其他相關(guān)系統(tǒng)產(chǎn)品選型過(guò)程：

數(shù)據(jù)倉(cāng)庫(kù)–Oracle還是Greenplum?

ETLTool–OracleDataIntegrator還是Informatica?

最終方案：Informatica+Greenplum+OBIEE物理架構(gòu)雙鶴藥業(yè)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)邏輯架構(gòu)雙鶴藥業(yè)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)Agenda安吉天地汽車物流BI系統(tǒng)物理架構(gòu)安吉天地汽車物流BI系統(tǒng)邏輯架構(gòu)安吉天地汽車物流BI系統(tǒng)系統(tǒng)展示安吉天地汽車物流BI系統(tǒng)方案量分析：日?qǐng)?bào)表：運(yùn)輸方案量RDC分析、運(yùn)輸方案量供給商分析、運(yùn)輸方案量日統(tǒng)計(jì)分析月報(bào)表：運(yùn)輸方案量運(yùn)輸方式分析、運(yùn)輸方案量分發(fā)性質(zhì)分析年報(bào)表：運(yùn)輸方案量運(yùn)輸方式分析、運(yùn)輸方案量分發(fā)性質(zhì)分析圖標(biāo)分析：當(dāng)前日期與上月同期圖表、當(dāng)前日期與去年同期圖表系統(tǒng)展示安吉天地汽車物流BI系統(tǒng)實(shí)際量分析：實(shí)際操作量分發(fā)性質(zhì)分析、實(shí)際操作量供給商分析實(shí)際操作量運(yùn)輸方式分析、實(shí)際操作量統(tǒng)計(jì)分析KPI分析：OTC訂單綜合分析、OTC例外訂單綜合分析OT訂單綜合分析、OT例外訂單綜合分析系統(tǒng)展示安吉天地汽車物流BI系統(tǒng)運(yùn)輸本錢分析：車型角度分析：RDC鐵路運(yùn)輸本錢分析、RDC水路運(yùn)輸本錢分析運(yùn)距角度分析：RDC公路運(yùn)輸本錢綜合分析、RDC公路運(yùn)輸本錢分析運(yùn)輸重量角度分析：RDC公路運(yùn)輸本錢綜合分析、RDC公路運(yùn)輸本錢分析其他角度分析：承運(yùn)商運(yùn)輸本錢分析、供給商運(yùn)輸本錢分析、RDC運(yùn)輸本錢分析、運(yùn)輸線路本錢分析、承運(yùn)商運(yùn)輸方案完成情況分析、供給商運(yùn)輸方案完成情況分析決策分析：儀表盤-方案完成情況分析Agenda北京第二外國(guó)語(yǔ)學(xué)院輔助決策系統(tǒng)北京第二外國(guó)語(yǔ)學(xué)院于1964年創(chuàng)立，是一所以外國(guó)語(yǔ)言文學(xué)為主體學(xué)科的知名特色大學(xué)，現(xiàn)有本科專業(yè)22個(gè)，專任教師近500人，在校學(xué)生10000余人。功能和定位：形成集中管理的統(tǒng)一數(shù)據(jù)平臺(tái)建立以業(yè)務(wù)為主題的綜合分析系統(tǒng)，開發(fā)常用的統(tǒng)計(jì)報(bào)表以數(shù)據(jù)中心平臺(tái)為根底，不斷完善校情展示和決策分析系統(tǒng)招生分析：歷年招生人數(shù)分布分析、歷年招生人數(shù)多角度比照分析、北京地區(qū)歷年招生人數(shù)分布分析、北京地區(qū)各中學(xué)奉獻(xiàn)度分析、小語(yǔ)種網(wǎng)上報(bào)名和錄取統(tǒng)計(jì)分析就業(yè)分析：就業(yè)分布統(tǒng)計(jì)分析、就業(yè)趨勢(shì)分析、各專業(yè)就業(yè)趨勢(shì)分析、就業(yè)單位總?cè)藬?shù)統(tǒng)計(jì)分析、優(yōu)秀畢業(yè)生