intel analyticsai keynote - big data application congress of cn英特爾分析主題演講大數(shù)據(jù)應(yīng)用峰會(huì)

分析與AI引爆未來KevinHuiskes企業(yè)與政府高級(jí)總監(jiān)英特爾數(shù)據(jù)中心事業(yè)部每一天–數(shù)據(jù)量都在呈爆炸式增長(zhǎng)1預(yù)計(jì)到2020年每天生成的數(shù)據(jù)。請(qǐng)參閱23頁(yè)附錄頁(yè)的腳注內(nèi)容1.5GB1平均每名互聯(lián)網(wǎng)用戶4,000GB3

自動(dòng)駕駛汽車3,000GB2

智能醫(yī)院1MGB2智能工廠40KGB2飛機(jī)數(shù)據(jù)洞察=全新競(jìng)爭(zhēng)優(yōu)勢(shì)資料來源：Gartner2017年對(duì)2,500名首席執(zhí)行官進(jìn)行的調(diào)查。商業(yè)智能與分析

首席執(zhí)行官的首要投資優(yōu)先事項(xiàng)今天的工業(yè)公司，未來將會(huì)轉(zhuǎn)變?yōu)?/p>

軟件與分析公司?！狫effImmelt，通用電氣首席執(zhí)行官分析技術(shù)的演進(jìn)資料來源：ForresterResearchAI

自身即為一個(gè)很大的類別，對(duì)于推動(dòng)數(shù)據(jù)分析達(dá)到更高成熟度和更大規(guī)模有著重要作用描述分析診斷分析預(yù)測(cè)分析指導(dǎo)分析認(rèn)知分析運(yùn)營(yíng)分析高級(jí)

分析新興現(xiàn)在分析曲線分析機(jī)遇遍及各行各業(yè)工業(yè)個(gè)人醫(yī)療金融零售能源交通加速業(yè)務(wù)盈利與競(jìng)爭(zhēng)優(yōu)勢(shì)分析成就智能工廠分析成就智能零售分析成就智能體育分析成就智能醫(yī)療分析挑戰(zhàn)性能可擴(kuò)展性使用面向

優(yōu)化的

易于

靈活性未來TCO使用英特爾采用整體性方法促進(jìn)分析與AI發(fā)展技術(shù)解決方案軟件優(yōu)化社區(qū)用于在從邊緣到數(shù)據(jù)

中心開展訓(xùn)練和推理

等工作常用框架與優(yōu)化水平與垂直

解決方案芯片英特爾?Nervana?Graph軟件解決方案英特爾?Nervana?平臺(tái)

BigDLMLliB英特爾?Nervana?產(chǎn)品組合*其他的名稱和品牌可能是其他所有者的資產(chǎn)。英特爾?至強(qiáng)?可擴(kuò)展平臺(tái)

數(shù)據(jù)中心領(lǐng)域最重大的進(jìn)步業(yè)界十年來推出英特爾?至強(qiáng)?可擴(kuò)展處理器：分析性能最高

2X最高

1.59X最高

1.36X相比前一代英特爾?至強(qiáng)?處理器

E5-2697v4，BigBench性能更高相比前一代英特爾至強(qiáng)處理器

E78890-v4，TPS更高相比前一代英特爾至強(qiáng)處理器

E5-2699v4，處理大型復(fù)雜數(shù)據(jù)集的速度更快結(jié)果基于英特爾和外部評(píng)測(cè)結(jié)果，僅供參考。請(qǐng)參閱

24頁(yè)備用頁(yè)了解詳細(xì)配置信息。英特爾?至強(qiáng)?可擴(kuò)展處理器：最敏捷的AI平臺(tái)固有的ROI使用現(xiàn)有熟悉的基礎(chǔ)設(shè)施立即開始AI征程使用常用的AI框架開展深度學(xué)習(xí)訓(xùn)練與推理

卓越性能相比前一代產(chǎn)品，深度學(xué)習(xí)訓(xùn)練與推理性能提高最高2.2倍優(yōu)化的軟件+硬件：

性能比前一代產(chǎn)品提高113倍生產(chǎn)就緒能夠可靠支持所有AI與分析部署服務(wù)器級(jí)可靠性、安全性與

可管理性結(jié)果基于英特爾內(nèi)部評(píng)測(cè)結(jié)果，僅供參考。請(qǐng)參閱25頁(yè)備用頁(yè)了解詳細(xì)配置信息。軟件示例：“BIGDL”*其他的名稱和品牌可能是其他所有者的資產(chǎn)。Spark內(nèi)核數(shù)據(jù)框SQLStreamingSparkRML管道MLlibGraphXBigDLBIGDL專為英特爾?至強(qiáng)?設(shè)計(jì)Caffe*和Torch*帶來均衡功能通過使用現(xiàn)有

基礎(chǔ)設(shè)施實(shí)現(xiàn)較低

總體擁有成本和出色易于使用性

在大數(shù)據(jù)平臺(tái)上開展深度學(xué)習(xí)，支持高效進(jìn)行橫向擴(kuò)展數(shù)據(jù)

軟件

軟件

最高

4.3X最高

5.6X最高

50%

分析優(yōu)化示例12請(qǐng)參閱26頁(yè)查看優(yōu)化聲明與配置詳細(xì)信息*其他的名稱和品牌可能是其他所有者的資產(chǎn)。糾刪碼顯著降低

HDFS存儲(chǔ)量1HBASEoff-heap

讀取優(yōu)化2基于英特爾?數(shù)學(xué)核心函數(shù)庫(kù)的MLLIB*2優(yōu)化優(yōu)化優(yōu)化基礎(chǔ)設(shè)施解決方案示例：用于基因組學(xué)的“Bigstack”*其他的名稱和品牌可能是其他所有者的資產(chǎn)。**BIGstack的條件是解決方案在應(yīng)用層預(yù)集成GATK，并且堆棧通過BroadInstitute驗(yàn)證

應(yīng)用預(yù)打包基因組學(xué)應(yīng)用BWA平臺(tái)GenomicsDB優(yōu)化的基因組學(xué)內(nèi)核函數(shù)庫(kù)￥Cromwell工作流執(zhí)行硬件英特爾?

全路徑架構(gòu)英特爾基因組學(xué)參考設(shè)計(jì)優(yōu)化的解決方案大幅提升

基因組學(xué)應(yīng)用的性能

BIGstack**采用包括：培訓(xùn)專家授課的培訓(xùn)、動(dòng)手

實(shí)踐研討會(huì)、獨(dú)家遠(yuǎn)程

訪問等工具來自英特爾的最新庫(kù)、

框架、工具和技術(shù)英特爾?Nervana?人工智能研究院

提升技能，開創(chuàng)AI未來社區(qū)與行業(yè)精英、開發(fā)人員和英特爾工程師緊密協(xié)作數(shù)據(jù)洞察創(chuàng)新收入英特爾?至強(qiáng)?可擴(kuò)展處理器

出色敏捷性、卓越可擴(kuò)展性與優(yōu)異性能全面滿足您的分析需求讓我們攜手并進(jìn)

加速駛向未來法律聲明英特爾技術(shù)的特性和優(yōu)勢(shì)取決于系統(tǒng)配置，并需要借助硬件、軟件或服務(wù)來實(shí)現(xiàn)。實(shí)際性能會(huì)因您使用的具體系統(tǒng)配置的不同而有所差異。請(qǐng)聯(lián)系您的系統(tǒng)制造商或零售商，或訪問，了解更多信息。任何計(jì)算機(jī)系統(tǒng)都無法提供絕對(duì)的安全性。在特定系統(tǒng)中對(duì)組件性能進(jìn)行特定測(cè)試。硬件、軟件或配置的任何差異都可能影響實(shí)際性能。請(qǐng)進(jìn)行多方咨詢，以評(píng)估您考慮購(gòu)買的系統(tǒng)或組件的性能。如欲了解有關(guān)性能和性能指標(biāo)評(píng)測(cè)結(jié)果的完整信息，請(qǐng)?jiān)L問：。

在性能檢測(cè)過程中涉及的軟件及其性能只有在英特爾微處理器的架構(gòu)下方能得到優(yōu)化。諸如SYSmark和MobileMark等測(cè)試均系基于特定計(jì)算機(jī)系統(tǒng)、硬件、軟件、操作系統(tǒng)及功能，上述任何要素的變動(dòng)都有可能導(dǎo)致測(cè)試結(jié)果的變化。請(qǐng)參考其他信息及性能測(cè)試（包括結(jié)合其他產(chǎn)品使用時(shí)的運(yùn)行性能）以對(duì)目標(biāo)產(chǎn)品進(jìn)行全面評(píng)估。如欲了解更多信息，請(qǐng)?jiān)L問：。

英特爾編譯器針對(duì)非英特爾微處理器的優(yōu)化程度可能與英特爾微處理器相同（或不同）。這些優(yōu)化包括SSE2?、SSE3和SSSE3指令集以及其它優(yōu)化。對(duì)于在非英特爾制造的微處理器上進(jìn)行的優(yōu)化，英特爾不對(duì)相應(yīng)的可用性、功能或有效性提供擔(dān)保。此產(chǎn)品中依賴于處理器的優(yōu)化僅適用于英特爾微處理器。某些不是專門面向英特爾微體系結(jié)構(gòu)的優(yōu)化保留專供英特爾微處理器使用。請(qǐng)參閱相應(yīng)的產(chǎn)品用戶和參考指南，以了解關(guān)于本通知涉及的特定指令集的更多信息。描述的成本降低方案旨在作為舉例，說明指定的英特爾架構(gòu)產(chǎn)品在特定環(huán)境和配置下，可能如何影響未來的成本和提供成本節(jié)省。環(huán)境將有所不同。英特爾不保證任何成本或成本降低。英特爾不對(duì)本文中引用的第三方基準(zhǔn)數(shù)據(jù)或網(wǎng)站承擔(dān)任何控制或?qū)徲?jì)的責(zé)任。您需要訪問參考網(wǎng)站以確認(rèn)所引用數(shù)據(jù)是否準(zhǔn)確。英特爾公司?2017年。英特爾、Intel標(biāo)識(shí)、英特爾至強(qiáng)和IntelXeon是英特爾在美國(guó)和/或其他國(guó)家的商標(biāo)。*其它品牌和名稱可能是其他公司的財(cái)產(chǎn)。附錄–數(shù)據(jù)增長(zhǎng)來源所有數(shù)字均為預(yù)估結(jié)果

分析性能配置詳細(xì)信息本結(jié)果基于英特爾內(nèi)部分析估算得出，僅作參考之用。任何系統(tǒng)硬件、軟件的設(shè)計(jì)或配置的不同均可能影響實(shí)際性能。在性能檢測(cè)過程中涉及的軟件及其性能只有在英特爾微處理器的架構(gòu)下方能得到優(yōu)化。諸如SYSmark和MobileMark等測(cè)試均系基于特定計(jì)算機(jī)系統(tǒng)、硬件、軟件、操作系統(tǒng)及功能，上述任何要素的變動(dòng)都有可能導(dǎo)致測(cè)試結(jié)果的變化。請(qǐng)參考其他信息及性能測(cè)試（包括結(jié)合其他產(chǎn)品使用時(shí)的運(yùn)行性能）以對(duì)目標(biāo)產(chǎn)品進(jìn)行全面評(píng)估。更多信息敬請(qǐng)登錄。配置：請(qǐng)見下一頁(yè)。最高1.36倍提升聲明基于TCP-BB(BigBench)性能指標(biāo)評(píng)測(cè)工作負(fù)載：8節(jié)點(diǎn)到8節(jié)點(diǎn)：雙路英特爾至強(qiáng)處理器E5-2697v4，采用24x32GBDIMM、2x2TB+2x1TBSATAA3固態(tài)盤、萬兆位以太網(wǎng)單端口，對(duì)比英特爾至強(qiáng)可擴(kuò)展處理器Platinum8168，采用12*64GBDIMM、2x2TB+2x1TBSATA固態(tài)盤、萬兆位單端口。qpm@10TB結(jié)果：Broadwell467/Skylake637最高1.59倍提升聲明基于面向SAPHANA工作負(fù)載的SAP*BW版本：1節(jié)點(diǎn)，四路英特爾?至強(qiáng)?處理器E7-8890v4，基于Grantley-EX的平臺(tái)，采用1024GB總內(nèi)存，運(yùn)行SLES12SP1，對(duì)比SAP內(nèi)部測(cè)試預(yù)計(jì)結(jié)果，1節(jié)點(diǎn)，四路英特爾?至強(qiáng)?可擴(kuò)展處理器產(chǎn)品家族（代號(hào)Skylake-SP）系統(tǒng)。最高2倍提升聲明基于SASBusinessAnalytics*：SAS9.4m4應(yīng)用，和運(yùn)行30個(gè)會(huì)話SAS混合分析工作負(fù)載。操作系統(tǒng)：CentOS7.2kernel3.10.0。測(cè)試由英特爾和SAS于2017年5月實(shí)施?；鶞?zhǔn)：四路英特爾?至強(qiáng)?處理器E7-2699v4，2.2GHz，24核，啟用睿頻加速，禁用超線程，BIOS275.R01.1603300531，256GB總內(nèi)存，16個(gè)插槽/16GB/2133MT/秒/DDR4LRDIMM，7塊800GB英特爾?固態(tài)盤DCS3700+1塊2TB基于NVMe的英特爾固態(tài)盤DCP3700，CentOS*7.2內(nèi)核3.10.0。新：雙路英特爾?至強(qiáng)?Platinum處理器8180，2.5GHz，28核，啟用睿頻加速，禁用超線程，BIOS01.00.0412.，384GB總內(nèi)存，24個(gè)插槽/16GB/2666MT/秒/DDR4LRDIMM，4塊800GB英特爾固態(tài)盤DCS3710+4塊375GB英特爾傲騰固態(tài)盤P4800X，CentOS*7.2內(nèi)核3.10.0。英特爾?至強(qiáng)?Platinum處理器8180與英特爾?至強(qiáng)?E5-2699v4對(duì)比時(shí)，在NeonResNet-18上推導(dǎo)吞吐率提高最高2.4倍；推導(dǎo)吞吐率批處理大?。?；訓(xùn)練：不同代比較：英特爾?至強(qiáng)?Platinum8180處理器與英特爾?至強(qiáng)?E52699v4對(duì)比時(shí)，在NeonResNet-8上訓(xùn)練吞吐率提高最高2.4倍；訓(xùn)練吞吐率批處理大小：256平臺(tái)：雙路英特爾?至強(qiáng)?Platinum8180CPU@2.50GHz（28核），禁用超線程，禁用睿頻加速，通過intel_pstate驅(qū)動(dòng)程序擴(kuò)展governorset到“performance”，384GBDDR4-2666ECCRAM。CentOSLinux7.3.1611版(Core)，Linux內(nèi)核3.10.0-514.10.2.el7.x86_64。固態(tài)盤：英特爾?固態(tài)盤DCS3700系列（800GB，2.5英寸SATA6Gb/秒，25納米，MLC）：性能測(cè)量配置：環(huán)境變量：KMP_AFFINITY='granularity=fine,compact‘，OMP_NUM_THREADS=56，CPU頻率設(shè)置為cpupowerfrequency-set-d2.5G-u3.8G-gperformance平臺(tái)：雙路英特爾?至強(qiáng)?CPUE5-2699v4@2.20GHz（22核），啟用超線程，禁用睿頻加速，通過acpi-cpufreq驅(qū)動(dòng)程序擴(kuò)展governorset到“performance”，256GBDDR4-2133ECCRAM。CentOSLinux7.3.1611版(Core)，Linux內(nèi)核3.10.0-514.10.2.el7.x86_64。固態(tài)盤：英特爾?固態(tài)盤DCS3500系列

（480GB，2.5英寸SATA6Gb/秒，20納米，MLC）性能測(cè)量配置：環(huán)境變量：KMP_AFFINITY='granularity=fine,compact,1,0‘，OMP_NUM_THREADS=44，CPU頻率設(shè)置為cpupowerfrequency-set-d2.2G-u2.2G-gperformanceNeon：ZP/MKL_CHWNbranchcommitid:52bd02acb947a2adabb8a227166a7da5d9123b6d。使用空數(shù)據(jù)。使用main.py腳本在mkl模式下進(jìn)行評(píng)測(cè)。使用的ICC版本：17.0.320170404，英特爾MKL小型函數(shù)庫(kù)版本2018.0.20170425；推導(dǎo)和訓(xùn)練吞吐率使用FP32指令；推導(dǎo)：在英特爾?至強(qiáng)?Platinum8180處理器上使用英特爾優(yōu)化的Caffe框架和英特爾?MKL函數(shù)庫(kù)，相比在英特爾?至強(qiáng)?E5-2699v3上運(yùn)行未經(jīng)優(yōu)化的BVLCCaffe，推導(dǎo)吞吐率性能提升最高138倍；推導(dǎo)吞吐率CaffeGoogleNetv1批處理大小256；訓(xùn)練：在英特爾?至強(qiáng)?Platinum8180處理器上使用英特爾優(yōu)化的Caffe框架和英特爾?MKL函數(shù)庫(kù)，相比在英特爾?至強(qiáng)?E5-2699v3上運(yùn)行未經(jīng)優(yōu)化的BVLCCaffe，訓(xùn)練吞吐率性能提升最高113倍；訓(xùn)練吞吐率AlexNet批處理大小256；平臺(tái)：雙路英特爾?至強(qiáng)?Platinum8180CPU@2.50GHz（28核），禁用超線程，禁用睿頻加速，通過intel_pstate驅(qū)動(dòng)程序擴(kuò)展governorset到“performance”，384GBDDR4-2666ECCRAM。CentOSLinux7.3.1611版(Core)，Linux內(nèi)核3.10.0-514.10.2.el7.x86_64。固態(tài)盤：英特爾?固態(tài)盤DCS3700系列（800GB，2.5英寸SATA6Gb/秒，25納米，MLC）：性能測(cè)量配置：環(huán)境變量：KMP_AFFINITY='granularity=fine,compact‘，OMP_NUM_THREADS=56，CPU頻率設(shè)置為cpupowerfrequency-set-d2.5G-u3.8G-gperformance平臺(tái)：雙路英特爾?至強(qiáng)?CPUE5-2699v3@2.30GHz（18核），啟用超線程，禁用睿頻加速，通過intel_pstate驅(qū)動(dòng)程序擴(kuò)展governorset到“performance”，256GBDDR4-2133ECCRAM。CentOSLinux7.3.1611版(Core)，Linux內(nèi)核3.10.0-514.el7.x86_64。操作系統(tǒng)盤：Seagate*EnterpriseST2000NX02532TB2.5英寸內(nèi)置機(jī)械硬盤。性能測(cè)量配置：環(huán)境變量：KMP_AFFINITY='granularity=fine,compact,1,0‘，OMP_NUM_THREADS=36，CPU頻率設(shè)置為cpupowerfrequency-set-d2.3G-u2.3G-gperformance英特爾Caffe：()，revisionb0ef3236528a2c7d2988f249d347d5fdae831236.推導(dǎo)使用“caffetime--forward_only”命令測(cè)量；訓(xùn)練使用“caffetime”命令測(cè)量。對(duì)于“ConvNet”拓?fù)洌褂昧丝諗?shù)據(jù)集。對(duì)于其他拓?fù)?，在?xùn)練前數(shù)據(jù)存儲(chǔ)在本地存儲(chǔ)，并緩存在內(nèi)存中。拓?fù)湟?guī)范：(GoogLeNet,AlexNet,andResNet-50)，(VGG-19)，以及（ConvNet性能指標(biāo)評(píng)測(cè)，文件進(jìn)行了更新以使用較新的Caffeprototxt格式，但功能相同）。GCC4.8.5，MKLML版本2017.0.2.20170110。BVLC-Caffe:，推導(dǎo)與訓(xùn)練使用“caffetime”命令測(cè)量。對(duì)于“ConvNet”拓?fù)?，使用了空?shù)據(jù)集。對(duì)于其他拓?fù)洌谟?xùn)練前數(shù)據(jù)存儲(chǔ)在本地存儲(chǔ)，并緩存在內(nèi)存中。BVLCCaffe()，revision91b09280f5233cafc62954c98ce8bc4c204e7475(commitdate5/14/2017)。BLAS：atlasver.3.10.1.在性能檢測(cè)過程中涉及的軟件及其性能只有在英特爾微處理器的架構(gòu)下方能得到優(yōu)化。諸如SYSmark和MobileMark等測(cè)試均系基于特定計(jì)算機(jī)系統(tǒng)、硬件、軟件、操作系統(tǒng)及功能，上述任何要素的變動(dòng)