華為FusionInsight平臺(tái)“精煉”大數(shù)據(jù)

1、華為 FusionInsight 平臺(tái)“精煉”大數(shù)據(jù)歷史的車輪駛?cè)?2015 年，人們對(duì)大數(shù)據(jù)的關(guān)注 焦點(diǎn)，已經(jīng)從之前的概念炒作，發(fā)展到如何通過(guò)大數(shù) 據(jù)為客戶業(yè)務(wù)創(chuàng)造價(jià)值。未來(lái)，數(shù)據(jù)將以十倍、 百倍的速度增長(zhǎng)， 信息“過(guò) 載”已經(jīng)成為許多企業(yè)的一大癥結(jié)。即使是石油，在 開(kāi)采出來(lái)之后，還需要經(jīng)過(guò)冶煉、蒸餾、精制等，才 能為社會(huì)創(chuàng)造價(jià)值。企業(yè)的數(shù)據(jù)，如果不能快速地抽 取、分析和變現(xiàn)，也將成為企業(yè)的沉重負(fù)擔(dān)。在各行各業(yè)受到互聯(lián)網(wǎng)沖擊的年代，客戶需要的 不僅僅是供應(yīng)商，更是合作伙伴；需要的是持續(xù)的聯(lián) 合創(chuàng)新、持續(xù)的開(kāi)放解決方案供應(yīng)、 持續(xù)的咨詢服務(wù)， 這樣才能幫助客戶直面競(jìng)爭(zhēng)和挑戰(zhàn)，甚至成功逆襲。Fu

2、sioninsight:累計(jì)成功部署500+項(xiàng)目大數(shù)據(jù)已成為華為未來(lái)的戰(zhàn)略方向之一。從 2009 年起，華為就開(kāi)始有節(jié)奏地投入大數(shù)據(jù)， 如今已經(jīng)取得開(kāi)源社區(qū)、 客戶和生態(tài)伙伴的共同認(rèn)可。 其具體舉措包括：在Apache Hadoop和Spark社區(qū)投 入高級(jí)專家持續(xù)貢獻(xiàn)內(nèi)核代碼，已取得社區(qū)排名全球 第四的成績(jī)。2011 年發(fā)布第一個(gè)平臺(tái)版本， 成功幫助電信運(yùn)營(yíng)商改善了基站投資結(jié)構(gòu)，大幅降低了高端客戶的離網(wǎng) 率;2013年發(fā)布全新架構(gòu)的Fusionlnsight大數(shù)據(jù)平臺(tái)， 并快速在金融、公安、政府和教育等行業(yè)取得突破， 已累計(jì)成功部署了 500+項(xiàng)目，同時(shí)已有 200+合作伙 伴的行業(yè)方案采用

3、了 Fusio nln sight平臺(tái)。華為始終秉承著以客戶為中心的理念，反映在大 數(shù)據(jù)領(lǐng)域，就是要貼近行業(yè)典型客戶進(jìn)行聯(lián)合創(chuàng)新， 有針對(duì)性地提供平臺(tái)解決方案，并引領(lǐng)合作伙伴在平 臺(tái)上持續(xù)構(gòu)建價(jià)值應(yīng)用。Fusionlnsight的整體結(jié)構(gòu)分為三層：最底層的DataOS是基石，可支持主流的開(kāi)源處理引擎一一 MapReduce批處理、Spark內(nèi)存迭代、STORM流處理， 以及華為自研的MPPDB，它是業(yè)內(nèi)唯一的全棧企業(yè) 發(fā)行版，可滿足不同場(chǎng)景的數(shù)據(jù)處理需求。同時(shí)，自 研的 Elk 可支持企業(yè)的 SQL 應(yīng)用無(wú)縫遷移到大數(shù)據(jù)平 臺(tái)；中層的DataFarm是伯樂(lè)，是讓數(shù)據(jù)有效流動(dòng)起來(lái) 的關(guān)鍵所在，支

4、持 lSV 利用平臺(tái)能力進(jìn)行多源數(shù)據(jù)的 實(shí)時(shí)集成，支持各類開(kāi)源的算法庫(kù)，使能客戶和伙伴 的挖掘能力，幫助數(shù)據(jù)分析師不斷地進(jìn)行試錯(cuò)和模型 訓(xùn)練；最上層的行業(yè)增強(qiáng)解決方案是加速器，在 DataOS和DataFarm的基礎(chǔ)上，針對(duì)行業(yè)典型大數(shù)據(jù) 場(chǎng)景（比如金融業(yè)的風(fēng)控） ，有針對(duì)性地優(yōu)化并預(yù)置參 數(shù)、算法、模型和邏輯包，大大縮短了基于大數(shù)據(jù)的 新業(yè)務(wù)上線時(shí)間，滿足了在線應(yīng)用的高要求，填補(bǔ)了 企業(yè)高要求與無(wú)序開(kāi)源的空白，最后聯(lián)合 ISV 開(kāi)發(fā)上 層應(yīng)用，提供關(guān)鍵場(chǎng)景的端到端解決方案。大數(shù)據(jù)：走向企業(yè)生產(chǎn)和關(guān)鍵業(yè)務(wù)FusionInsight 在平臺(tái)水平能力上持續(xù)做厚，支持 多集群統(tǒng)一管理及多租戶、容災(zāi)備

5、份、存儲(chǔ)EC、數(shù)據(jù) 加密、 OMS 支持 HA 等高級(jí)特性，支持全 Web 化的 交互式體驗(yàn)，以及不斷豐富的數(shù)據(jù)治理工具，讓大數(shù) 據(jù)從企業(yè)的實(shí)驗(yàn)平臺(tái)走向生產(chǎn)、走向關(guān)鍵業(yè)務(wù)。金融行業(yè)近年來(lái)受互聯(lián)網(wǎng)沖擊很大，去中介化讓 金融脫媒、客戶脫媒、甚至信息脫媒甚囂塵上，各大 銀行備感壓力。 2014年，隨著以 FusionInsight 為代表 的大數(shù)據(jù)解決方案開(kāi)始走向商用，這一局面開(kāi)始得到 改觀。比如，國(guó)內(nèi)一家領(lǐng)先的商業(yè)銀行在采用了華為 的 FusionInsight 進(jìn)行潛在小微貸款客戶的全量挖掘 后，其名單轉(zhuǎn)化率比采用傳統(tǒng)的數(shù)據(jù)倉(cāng)庫(kù)提升了 40 倍，或有金融資產(chǎn)預(yù)測(cè)誤差率則降低了一倍；另一家 銀行過(guò)

6、去主要通過(guò)批量發(fā)送推薦短信的方式開(kāi)展?fàn)I銷 活動(dòng)，無(wú)法做到個(gè)性化，致使客戶多有抱怨，而采用 FusionInsight 后，理財(cái)推薦的短信發(fā)送量比過(guò)去下降 了 82%，而命中率卻上升到了 95% ，真正實(shí)現(xiàn)了千人 千面的精準(zhǔn)營(yíng)銷；還有一家銀行在信用卡征信采用 FusionInsight 后，其發(fā)卡時(shí)間從 15 天大幅縮減到了立 等可取，在安全性更好的前提下達(dá)到了實(shí)時(shí)體驗(yàn)。交通管理是典型的大數(shù)據(jù)行業(yè)，其數(shù)據(jù)特點(diǎn)也是 非常典型的5V，面臨著新形勢(shì)下的反恐壓力及人均警 力嚴(yán)重不足的困境。華為 FusionInsight 幫助中國(guó)某省 的公安部門實(shí)現(xiàn)了上千個(gè)數(shù)據(jù)庫(kù)的高效集中，形成了 統(tǒng)一的大數(shù)據(jù)平臺(tái)，

7、強(qiáng)大的 SQL 能力幫助交管部門無(wú) 縫遷移了應(yīng)用，支持秒級(jí)發(fā)現(xiàn)套牌車、分鐘級(jí)發(fā)現(xiàn)同 行車、實(shí)時(shí)交互查詢高危車輛、自學(xué)習(xí)優(yōu)化交通網(wǎng)絡(luò) 效率，用智能的方法有效緩解了城市擁堵。在政府行業(yè)，很多政府部門都擁有海量的價(jià)值數(shù) 據(jù)，但這些數(shù)據(jù)高度分散，應(yīng)用也呈現(xiàn)煙囪式分布。 華為通過(guò)將其 FusionInsight 大數(shù)據(jù)平臺(tái)與 FusionSphere云平臺(tái)聯(lián)合，正在為多個(gè)政府部門建設(shè) 統(tǒng)一的大數(shù)據(jù)云數(shù)據(jù)中心，將云計(jì)算和大數(shù)據(jù)結(jié)合， 實(shí)現(xiàn)了大數(shù)據(jù)能力的服務(wù)化，讓數(shù)據(jù)能更加高效地開(kāi) 放，更好地服務(wù)于民生。電信行業(yè)也是數(shù)據(jù)高度密集的行業(yè)，電信運(yùn)營(yíng)商 更是應(yīng)用大數(shù)據(jù)的先行者，華為較早就進(jìn)入了這個(gè)領(lǐng) 域，通過(guò) FusionInsight 平臺(tái)幫助全球多個(gè) TOP 運(yùn)營(yíng)商 構(gòu)筑了融合的大數(shù)據(jù)中心。比如，中國(guó)某省的運(yùn)營(yíng)商 利用 FusionInsight 實(shí)現(xiàn)了 VIP 客戶的預(yù)防性維挽，并 優(yōu)化了基站的投資分布，當(dāng)年就為該客戶節(jié)省了幾百 萬(wàn)元的支出，同時(shí)，通過(guò)開(kāi)放技術(shù)還讓客戶的移動(dòng)位 置數(shù)據(jù)很好地服務(wù)于各級(jí)廣告主，讓數(shù)據(jù)真正變現(xiàn)成 了貨幣。上述成績(jī)的取得，離不開(kāi)華為各級(jí)合作伙伴的大 力支持， FusionInsight 發(fā)布之初就非常注重生態(tài)鏈的