大數(shù)據(jù)與大分析-emchadoop解決方案蘊(yùn)含巨大商機(jī)

1、大數(shù)據(jù)與大分析：EMC Hadoop 處理方案蘊(yùn)含巨大商機(jī)充分發(fā)掘大數(shù)據(jù)價(jià)值第1頁今天議程介紹大數(shù)據(jù)商機(jī)Hadoop 大數(shù)據(jù)分析Hadoop 技術(shù)難題面向企業(yè) EMC Hadoop 處理方案Q+A 第2頁EMC Isilon 概述橫向擴(kuò)展 NAS 存放處理方案領(lǐng)域經(jīng)驗(yàn)證全球領(lǐng)導(dǎo)者無可匹敵產(chǎn)品創(chuàng)新 第六代超出 2,000 個(gè)全球客戶，而且客戶數(shù)量仍在連續(xù)攀升世界一流產(chǎn)品和全球服務(wù)強(qiáng)大技術(shù)合作搭檔體系于 年 12 月 21 日被 EMC 收購第3頁大數(shù)據(jù)商機(jī)第4頁!“大數(shù)據(jù)無關(guān)乎大小，而關(guān)乎自由度” Techcrunch !“發(fā)覺：大數(shù)據(jù)比卷更卓絕” Gartner “大數(shù)據(jù)！ 它真實(shí)存在，實(shí)時(shí)提

2、供，而且正在改變您世界”IDC “總數(shù)據(jù)：比大數(shù)據(jù)更大” 451 Group第5頁!“大數(shù)據(jù)無關(guān)乎大小，而關(guān)乎自由度” Techcrunch !“發(fā)覺：大數(shù)據(jù)比卷更卓絕” Gartner “大數(shù)據(jù)！ 它真實(shí)存在，實(shí)時(shí)提供，而且正在改變您世界”IDC “總數(shù)據(jù)：比大數(shù)據(jù)更大” 451 Group大數(shù)據(jù)時(shí)代已經(jīng)到來第6頁大數(shù)據(jù)在活動(dòng)醫(yī)療保健利用歷史數(shù)據(jù)發(fā)覺更加好治療方式金融服務(wù)數(shù)據(jù)驅(qū)動(dòng)型銀行壓力測(cè)試和風(fēng)險(xiǎn)分析公用事業(yè)機(jī)器學(xué)習(xí)以預(yù)測(cè)服務(wù)中止和預(yù)防能源偷竊第7頁Hadoop 與大數(shù)據(jù)第8頁大數(shù)據(jù)分析遠(yuǎn)大前途利用數(shù)據(jù)資產(chǎn)確定主要趨勢(shì)和新商機(jī) 分析新信息起源以取得競爭優(yōu)勢(shì) 采取靈活分析方法，適應(yīng)業(yè)務(wù)發(fā)展速

3、度擴(kuò)展您存放和分析平臺(tái)，應(yīng)對(duì)大數(shù)據(jù)龐大數(shù)量、快速改變和繁雜種類第9頁創(chuàng)建于 5-6 年前 意在分析海量非結(jié)構(gòu)化數(shù)據(jù)軟件平臺(tái) 兩個(gè)關(guān)鍵組件：Hadoop 分布式文件系統(tǒng) (HDFS)（存放） MapReduce（計(jì)算） 當(dāng)前是大型開放源代碼開發(fā)小區(qū)支持首要 Apache 項(xiàng)目Hadoop 初展鋒芒第10頁為何 Hadoop 很主要面向超大規(guī)模實(shí)用分析方法開創(chuàng)取得洞察看法和發(fā)覺商機(jī)新方法意在應(yīng)對(duì)非結(jié)構(gòu)化數(shù)據(jù)增加在未來 5 年內(nèi)，企業(yè)數(shù)據(jù)將增加到現(xiàn)在 650%此增加中超出 80% 將是非結(jié)構(gòu)化數(shù)據(jù)第11頁Hadoop 早期主流客戶時(shí)間Hadoop 早期采取者Hadoop 市場(chǎng)演變Hadoop 概要信

4、息（迄今為止）先行者和學(xué)術(shù)機(jī)構(gòu)應(yīng)用程序架構(gòu)師有遠(yuǎn)見卓識(shí)開放源代碼/小區(qū)驅(qū)動(dòng)構(gòu)建您自己服務(wù)器、應(yīng)用程序和存放基礎(chǔ)架構(gòu)商用組件Web 2.0大學(xué)生命科學(xué)第12頁Hadoop 早期主流客戶時(shí)間Hadoop 早期采取者Hadoop 市場(chǎng)演變Hadoop 概要信息（迄今為止）先行者和學(xué)術(shù)機(jī)構(gòu)應(yīng)用程序架構(gòu)師有遠(yuǎn)見卓識(shí)開放源代碼/小區(qū)驅(qū)動(dòng)構(gòu)建您自己服務(wù)器、應(yīng)用程序和存放基礎(chǔ)架構(gòu)商用組件Hadoop 概要信息（新興）IT 經(jīng)理和 CIO數(shù)據(jù)科學(xué)家業(yè)務(wù)線商業(yè)公布全包式處理方案端到端數(shù)據(jù)保護(hù)財(cái)富 1000 強(qiáng)金融服務(wù)零售業(yè)Web 2.0大學(xué)生命科學(xué)第13頁Hadoop 技術(shù)難題第14頁Hadoop 技術(shù)難題Had

5、oop DAS 環(huán)境1專用存放基礎(chǔ)架構(gòu)僅用于 Hadoop 一次性架構(gòu)2單點(diǎn)故障NameNode3缺乏企業(yè)數(shù)據(jù)保護(hù)無快照、復(fù)制、備份4存放效率低3 倍鏡像5固定可擴(kuò)展性固定計(jì)算/存放比率6手動(dòng)導(dǎo)入/導(dǎo)出無協(xié)議支持NameNode第15頁Hadoop 技術(shù)難題Hadoop DAS 環(huán)境1專用存放基礎(chǔ)架構(gòu)僅用于 Hadoop 一次性架構(gòu)2單點(diǎn)故障NameNode3缺乏企業(yè)數(shù)據(jù)保護(hù)無快照、復(fù)制、備份4存放效率低3 倍鏡像5固定可擴(kuò)展性固定計(jì)算/存放比率6手動(dòng)導(dǎo)入/導(dǎo)出無協(xié)議支持NameNode第16頁Hadoop 技術(shù)難題Hadoop DAS 環(huán)境1專用存放基礎(chǔ)架構(gòu)僅用于 Hadoop 一次性架構(gòu)2

6、單點(diǎn)故障NameNode3缺乏企業(yè)數(shù)據(jù)保護(hù)無快照、復(fù)制、備份4存放效率低3 倍鏡像5固定可擴(kuò)展性固定計(jì)算/存放比率6手動(dòng)導(dǎo)入/導(dǎo)出無協(xié)議支持1 倍1 倍2 倍2 倍3 倍2 倍3 倍3 倍1 倍NameNode第17頁Hadoop 技術(shù)難題Hadoop DAS 環(huán)境1專用存放基礎(chǔ)架構(gòu)僅用于 Hadoop 一次性架構(gòu)2單點(diǎn)故障NameNode3缺乏企業(yè)數(shù)據(jù)保護(hù)無快照、復(fù)制、備份4存放效率低3 倍鏡像5固定可擴(kuò)展性固定計(jì)算/存放比率6手動(dòng)導(dǎo)入/導(dǎo)出無協(xié)議支持NameNode第18頁1橫向擴(kuò)展存放平臺(tái)多個(gè)應(yīng)用程序和工作流2無單點(diǎn)故障分布式 NameNode3端到端數(shù)據(jù)保護(hù)SnapshotIQ、Syn

7、cIQ、NDMP 備份4行業(yè)領(lǐng)先存放效率80% 以上存放利用率5獨(dú)立可擴(kuò)展性單獨(dú)添加計(jì)算和存放6多協(xié)議行業(yè)標(biāo)準(zhǔn)協(xié)議NFS、CIFS、FTP、HTTP、HDFSHDFS適合用于 Hadoop EMC Isilon 優(yōu)勢(shì)第19頁EMC 可應(yīng)對(duì) Hadoop 難題1專用存放基礎(chǔ)架構(gòu)僅用于 Hadoop 一次性架構(gòu)2單點(diǎn)故障NameNode3缺乏企業(yè)數(shù)據(jù)保護(hù)無快照、復(fù)制、備份4存放效率低3 倍鏡像5固定可擴(kuò)展性固定計(jì)算/存放比率6手動(dòng)導(dǎo)入/導(dǎo)出無協(xié)議支持1橫向擴(kuò)展存放平臺(tái)多個(gè)應(yīng)用程序和工作流2無單點(diǎn)故障分布式 NameNode3端到端數(shù)據(jù)保護(hù)SnapshotIQ、SyncIQ、NDMP 備份4行業(yè)領(lǐng)先

8、存放效率80% 以上存放利用率5獨(dú)立可擴(kuò)展性單獨(dú)添加計(jì)算和存放6多協(xié)議行業(yè)標(biāo)準(zhǔn)協(xié)議NFS、CIFS、FTP、HTTP、HDFS第20頁增強(qiáng) Hadoop 給企業(yè)帶來好處降低風(fēng)險(xiǎn)端到端數(shù)據(jù)保護(hù)組織知識(shí)/經(jīng)驗(yàn)業(yè)界首款也是唯一一款含有本機(jī) Hadoop 集成橫向擴(kuò)展存放處理方案第21頁存放計(jì)算EMC 企業(yè) Hadoop 處理方案Apache Hadoop 經(jīng) Greenplum 認(rèn)證簡單平臺(tái)管理和控制 使用 Greenplum Database 并行分析訪問EMC Greenplum HD 和 EMC Isilon 橫向擴(kuò)展存放HDFS第22頁靈活打包選項(xiàng) Hadoop 軟件 + 存放在商用 x86 硬件上打包 Greenplum HD 軟件Isilon 橫向擴(kuò)展 NASHadoop 應(yīng)用裝置 + 存放Greenplum HD Data Computing ApplianceIsilon 橫向擴(kuò)展 NAS第23頁EMC Greenplum 統(tǒng)一分析平臺(tái)：Greenplum HD 用于非結(jié)構(gòu)化數(shù)據(jù)分析企業(yè) HadoopGreenplum Database 結(jié)構(gòu)化數(shù)據(jù)分析Greenplum Chorus 面向數(shù)據(jù)科學(xué)家生產(chǎn)效率工具數(shù)據(jù)科學(xué)和咨詢服務(wù)重視數(shù)據(jù)科學(xué)實(shí)踐含有廣泛分析專業(yè)知識(shí)行業(yè)特定 PhDGreenplum Analytics Lab 協(xié)定將 Hadoop 提升到