【大數(shù)據(jù)實(shí)訓(xùn)】聯(lián)想實(shí)訓(xùn)平臺(tái)介紹課件(PPT 29頁)

1、大數(shù)據(jù)實(shí)戰(zhàn)實(shí)訓(xùn)平臺(tái)大數(shù)據(jù)授課與實(shí)驗(yàn)教學(xué)平臺(tái)2018 Lenovo Internal. All rights reserved.1第1頁，共29頁。聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)產(chǎn)品概念聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)市場(chǎng)分析聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)產(chǎn)品介紹聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)案例Agenda第2頁，共29頁。聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)是什么：教學(xué)及科研平臺(tái)大數(shù)據(jù)教學(xué)平臺(tái)概念：利用虛擬化教學(xué)資源，搭建教學(xué)系統(tǒng)和集群平臺(tái)，將理論學(xué)習(xí)、實(shí)踐教學(xué)和大數(shù)據(jù)項(xiàng)目實(shí)戰(zhàn)融為一體，循序漸進(jìn)逐步提高學(xué)生的學(xué)習(xí)技能和實(shí)踐水平。大數(shù)據(jù)教學(xué)平臺(tái)價(jià)值：全面落實(shí)“產(chǎn)、學(xué)、研、用”一體化的思想和模式，從教學(xué)、實(shí)踐、科研和使用多方面注重專業(yè)人才和特殊人才的培養(yǎng)，減輕師

2、生教、學(xué)壓力，增加學(xué)生就業(yè)競(jìng)爭(zhēng)力，加快大數(shù)據(jù)人才的培養(yǎng)與補(bǔ)充。第3頁，共29頁。聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)產(chǎn)品概念聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)市場(chǎng)分析聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)產(chǎn)品介紹聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)案例Agenda第4頁，共29頁。大數(shù)據(jù)人才培養(yǎng)加速2016年2月，教育部公布新增“數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)”專業(yè)，北京大學(xué)、對(duì)外經(jīng)濟(jì)貿(mào)易大學(xué)、中南大學(xué)成為首家獲批高校。2017年3月，上海工程技術(shù)大學(xué)、北京信息科技大學(xué)、中北大學(xué)等32所高校獲批，2018年3月，中國(guó)農(nóng)業(yè)大學(xué)、中國(guó)石油大學(xué)、齊魯工業(yè)大學(xué)等248所高校獲批。2019年新增獲批院校至少300+，普教、高職院校大數(shù)據(jù)教學(xué)需求同樣旺盛。第5頁，共29頁。痛點(diǎn)：計(jì)算機(jī)

3、領(lǐng)域，特別是互聯(lián)網(wǎng)、云計(jì)算、大數(shù)據(jù)發(fā)展迅猛，很多學(xué)校在課程體系、實(shí)踐環(huán)境、及師資上都跟不上；高校人才的培養(yǎng)目標(biāo)與一般企業(yè)的用人要求是不一致的；高校人才培養(yǎng)的環(huán)境，缺乏真實(shí)的業(yè)務(wù)場(chǎng)景，一無真正的業(yè)務(wù)需求、二無真正的數(shù)據(jù)、三無真正的軟硬件環(huán)境；傳統(tǒng)的實(shí)驗(yàn)、實(shí)踐體系變革、提升空間大高校開展大數(shù)據(jù)教學(xué)必備的3個(gè)條件（1，師資、2，教材及培養(yǎng)方案、3，實(shí)驗(yàn)、實(shí)踐環(huán)境）第6頁，共29頁。Agenda聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)產(chǎn)品概念聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)市場(chǎng)分析聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)產(chǎn)品介紹聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)案例第7頁，共29頁。聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)建設(shè)方案系統(tǒng)說明第8頁，共29頁。實(shí)訓(xùn)平臺(tái)實(shí)戰(zhàn)平臺(tái)VMVMVMVMVM管理

4、VM媒體VM試驗(yàn)機(jī)VM（Docker）MRStreamingSparkKafkaHDFS數(shù)據(jù)處理數(shù)據(jù)采集數(shù)據(jù)存儲(chǔ)大數(shù)據(jù)教學(xué)實(shí)訓(xùn)平臺(tái)（含課程和試驗(yàn)）大數(shù)據(jù)科研實(shí)戰(zhàn)平臺(tái)（Leap HD大數(shù)據(jù)） 大數(shù)據(jù)教學(xué)實(shí)訓(xùn)平臺(tái)+科研實(shí)戰(zhàn)平臺(tái)登錄門戶-3節(jié)點(diǎn)HX1320( xeon 4116*2, 256G, 480G*2, 4T*2)-1臺(tái)萬兆交換機(jī)NE1032-實(shí)訓(xùn)管理及試驗(yàn)license-60并發(fā)用戶-60臺(tái)實(shí)訓(xùn)終端（PC或云桌面）-6節(jié)點(diǎn)SR650( xeon 4116*2, 128G, 240G*2, 2T*3)-1臺(tái)萬兆交換機(jī)NE1032-Leap大數(shù)據(jù)平臺(tái)license大數(shù)據(jù)實(shí)訓(xùn)+科研平臺(tái)第9頁，共

5、29頁。大數(shù)據(jù)實(shí)訓(xùn)平臺(tái)介紹實(shí)訓(xùn)教學(xué)平臺(tái)視頻習(xí)題與測(cè)驗(yàn)在線編程實(shí)驗(yàn)操作大數(shù)據(jù)科研實(shí)戰(zhàn)平臺(tái)行業(yè)數(shù)據(jù)DATA第10頁，共29頁。聯(lián)想大數(shù)據(jù)實(shí)訓(xùn)平臺(tái)功能視頻任務(wù)，包括：300小時(shí)的認(rèn)知、通識(shí)課程，150小時(shí)的大數(shù)據(jù)專業(yè)課程，450小時(shí)的實(shí)驗(yàn)、實(shí)踐操作視頻。習(xí)題與測(cè)驗(yàn)任務(wù)，以判斷題、選擇題為主的客觀題，目前各類習(xí)題共有500多道。在線編程任務(wù)，以Java與Python為主的語法、算法編程練習(xí)，收錄了語言基礎(chǔ)、金典算法，以及BATJ等知名公司面試題。實(shí)驗(yàn)操作任務(wù)，覆蓋Java、Linux、Python基礎(chǔ)，以及大數(shù)據(jù)相關(guān)生態(tài)系統(tǒng)所有框架組件，乃致數(shù)據(jù)分析、可視化技術(shù)等，共480+個(gè)實(shí)驗(yàn)，實(shí)驗(yàn)時(shí)長(zhǎng)累計(jì)超過1

6、000小時(shí)。視頻習(xí)題與測(cè)驗(yàn)在線編程實(shí)驗(yàn)操作第11頁，共29頁。聯(lián)想大數(shù)據(jù)實(shí)訓(xùn)平臺(tái)豐富的課程認(rèn)識(shí)大數(shù)據(jù)(10講)大數(shù)據(jù)與政府治理（10講）醫(yī)療健康大數(shù)據(jù)(10講）房產(chǎn)建筑大數(shù)據(jù)(6講）現(xiàn)代金融大數(shù)據(jù)（5講）城市規(guī)劃大數(shù)據(jù)（10講）城市交通大數(shù)據(jù)（4講）社會(huì)關(guān)系網(wǎng)絡(luò)大數(shù)據(jù)（9講）大數(shù)據(jù)認(rèn)知統(tǒng)計(jì)與分析技術(shù)開發(fā)實(shí)戰(zhàn)案例SPSS統(tǒng)計(jì)分析R語言基礎(chǔ)SAS數(shù)據(jù)統(tǒng)計(jì)分析案例分析及業(yè)務(wù)應(yīng)用建模分析師數(shù)據(jù)分析概述產(chǎn)品需求的挖掘與分析大數(shù)據(jù)產(chǎn)品有計(jì)劃的不斷迭代與優(yōu)化Linux基礎(chǔ)Java編程基礎(chǔ)Hadoop基礎(chǔ)Hive數(shù)據(jù)倉(cāng)庫MapReduce編程進(jìn)階數(shù)據(jù)庫Hbase數(shù)據(jù)遷移工具SqoopFlume日志框架Kafk

7、a流式數(shù)據(jù)采集Storm實(shí)時(shí)數(shù)據(jù)處理Zookeeper開發(fā)Spark基礎(chǔ)Scala編程語言Spark實(shí)時(shí)計(jì)算Spark SQL編程Spark MLlib機(jī)器學(xué)習(xí)數(shù)據(jù)處理實(shí)用案例海量網(wǎng)站日志分析搜索引擎搜索數(shù)據(jù)統(tǒng)計(jì)分析電商商品統(tǒng)計(jì)分析及可視化展現(xiàn)Spark MLlib推薦算法應(yīng)用企業(yè)大數(shù)據(jù)處理綜合平臺(tái)北京市二手房及租房?jī)r(jià)格分析案例汽車品牌口碑情感分析醫(yī)療咨詢與疾病預(yù)測(cè)第12頁，共29頁。包含音視頻、講義大綱的富媒體課堂第13頁，共29頁。 習(xí)題 以判斷題、選擇題為主的客觀題，并以小節(jié)習(xí)題，單元測(cè)驗(yàn)的形式考核學(xué)生。第14頁，共29頁。 在線編程在線的判題系統(tǒng)（Online Judge），用戶可以在

8、線提交程序（如Java、Python）源代碼，系統(tǒng)對(duì)源代碼進(jìn)行編譯和執(zhí)行，并通過預(yù)先設(shè)計(jì)的測(cè)試數(shù)據(jù)來檢驗(yàn)程序源代碼的正確性。第15頁，共29頁。實(shí)驗(yàn)操作覆蓋Java、Linux、Python基礎(chǔ)，以及大數(shù)據(jù)相關(guān)生態(tài)系統(tǒng)所有框架組件，并且包括數(shù)據(jù)分析、可視化技術(shù)等工具、平臺(tái)的應(yīng)用操作實(shí)驗(yàn)。第16頁，共29頁。實(shí)驗(yàn)任務(wù)及環(huán)境（480+）Hadoop偽分布模式安裝Hadoop完全分布模式安裝Hadoop開發(fā)插件安裝HDFS JAVA API操作Mapreduce實(shí)例wordcountMapreduce實(shí)例去重Mapreduce實(shí)例排序Mapreduce實(shí)例求平均值Mapreduce實(shí)例Map端Joi

9、nMapreduce實(shí)例Reduce端JoinMapreduce實(shí)例單表JoinMapreduce實(shí)例二次排序Mapreduce實(shí)例倒排索引Mapreduce實(shí)例Chainmapper&ChainreducerMapreduce實(shí)例MapReduce自定義輸入、輸出格式Hive安裝Hive基本操作Hive查詢Hive 各種排序之間的區(qū)別zookeeper安裝HBase安裝HBase JAVA API讀寫數(shù)據(jù)HBase的過濾器綜合案例：MapReduce讀HBase綜合案例：MapReduce寫HBase綜合案例：Mapreduce讀HBase并寫入HBase第17頁，共29頁。 作為教師講授專

10、業(yè)課的輔助，為課后提供各種實(shí)驗(yàn)環(huán)境與實(shí)驗(yàn)任務(wù)指導(dǎo)書，減輕老師的負(fù)擔(dān)。應(yīng)用場(chǎng)景（一）課后教學(xué)輔助功能第18頁，共29頁。應(yīng)用場(chǎng)景（二） 實(shí)訓(xùn)課程作為輔助教學(xué)，為老師開設(shè)的大數(shù)據(jù)專來課程提供從理論講解、課后習(xí)題、上機(jī)實(shí)驗(yàn)等一系列內(nèi)容，前、后成體系貫穿，解決學(xué)校無法開展新工科教學(xué)的痛點(diǎn)。第19頁，共29頁。應(yīng)用場(chǎng)景（三） 就業(yè)培訓(xùn)根據(jù)就業(yè)崗位的能力模型及須掌握的知識(shí)體系，以項(xiàng)目教學(xué)法，設(shè)計(jì)成以知識(shí)點(diǎn)為單元的任務(wù)，通過任務(wù)驅(qū)動(dòng)引擎引導(dǎo)學(xué)生完成一個(gè)個(gè)任務(wù)，最終完成真實(shí)的項(xiàng)目。崗位包括：大數(shù)據(jù)開發(fā)工程師、大數(shù)據(jù)分析師、大數(shù)據(jù)產(chǎn)品經(jīng)理等。第20頁，共29頁。大數(shù)據(jù)實(shí)訓(xùn)平臺(tái)-提供面向培訓(xùn)目標(biāo)的課程21大數(shù)據(jù)開

11、發(fā)工程師大數(shù)據(jù)分析師大數(shù)據(jù)產(chǎn)品經(jīng)理認(rèn)識(shí)大數(shù)據(jù)(10講)Linux基礎(chǔ)Java編程基礎(chǔ)Hadoop基礎(chǔ)Hive數(shù)據(jù)倉(cāng)庫MapReduce編程進(jìn)階數(shù)據(jù)庫Hbase數(shù)據(jù)處理實(shí)用案例企業(yè)大數(shù)據(jù)處理綜合平臺(tái)認(rèn)識(shí)大數(shù)據(jù)(10講)SPSS統(tǒng)計(jì)分析R語言基礎(chǔ)案例分析及業(yè)務(wù)應(yīng)用數(shù)據(jù)分析概述北京市二手房及租房?jī)r(jià)格分析案例認(rèn)識(shí)大數(shù)據(jù)(10講)數(shù)據(jù)分析概述北京市二手房及租房?jī)r(jià)格分析案例產(chǎn)品需求的挖掘與分析大數(shù)據(jù)產(chǎn)品有計(jì)劃的迭代與優(yōu)化Hadoop基礎(chǔ)企業(yè)大數(shù)據(jù)處理綜合平臺(tái).第21頁，共29頁。聯(lián)想大數(shù)據(jù)科研實(shí)戰(zhàn)平臺(tái)第22頁，共29頁。行業(yè)數(shù)據(jù)地區(qū)房產(chǎn)法律咨詢股票基金交易汽車數(shù)據(jù)疾病問答天氣氣象電商評(píng)價(jià)全球影評(píng)全球書評(píng)農(nóng)

12、業(yè)生鮮食品價(jià)格搜索引擎訪問日志更多040206081011120907050301第23頁，共29頁。Agenda聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)產(chǎn)品概念聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)市場(chǎng)分析聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)產(chǎn)品介紹聯(lián)想大數(shù)據(jù)教學(xué)平臺(tái)案例第24頁，共29頁。部分案例25齊魯工業(yè)大學(xué)“大數(shù)據(jù)實(shí)訓(xùn)項(xiàng)目”：為學(xué)校提供主流的技術(shù)路線和大數(shù)據(jù)平臺(tái)，滿足學(xué)生教學(xué)實(shí)訓(xùn)和教師科研實(shí)戰(zhàn)的需求，提供豐富的工業(yè)數(shù)據(jù)集真實(shí)模擬實(shí)戰(zhàn)訓(xùn)練山西中北大學(xué)“大數(shù)據(jù)實(shí)訓(xùn)基地”：支持120名學(xué)生同時(shí)登錄平臺(tái)學(xué)習(xí)教學(xué)視頻、答題練習(xí)、完成老師布置的實(shí)驗(yàn)任務(wù)；老師及學(xué)生可以應(yīng)用實(shí)戰(zhàn)平臺(tái)進(jìn)行科研、畢業(yè)項(xiàng)目設(shè)計(jì)北京信息科技大學(xué)計(jì)算機(jī)學(xué)院案例一個(gè)班的學(xué)生利用平臺(tái)進(jìn)行

13、為期4個(gè)月的實(shí)訓(xùn)，同學(xué)們可以在平臺(tái)上學(xué)習(xí)教學(xué)視頻、答題練習(xí)、完成老師布置的實(shí)驗(yàn)任務(wù)，最得非常好的學(xué)習(xí)效果。大數(shù)據(jù)實(shí)訓(xùn)落地院校清華大學(xué)桂林電子科技大學(xué)中國(guó)農(nóng)業(yè)大學(xué)武夷學(xué)院廣西師范大學(xué)大連海事大學(xué)齊魯工業(yè)大學(xué)大連外國(guó)語大學(xué)合肥工業(yè)大學(xué)華北理工大學(xué)北京信息科技大學(xué)上饒師范學(xué)院齊齊哈爾大學(xué)東北大學(xué)秦皇島分校中國(guó)石油大學(xué)陸軍工程大學(xué)中北大學(xué)山東農(nóng)業(yè)大學(xué)北京郵電大學(xué)蚌埠學(xué)院北京工業(yè)大學(xué)沈陽化工學(xué)院保定學(xué)院河北農(nóng)業(yè)大學(xué)南昌航空大學(xué)浙江財(cái)經(jīng)大學(xué)第25頁，共29頁。具有工信部/人社部認(rèn)證資格：大數(shù)據(jù)分析員/分析師認(rèn)證培訓(xùn)第26頁，共29頁。2018 Lenovo. All rights reserved.商機(jī)及

14、銷售流程 DCG教育行業(yè)經(jīng)理?xiàng)铙K LDP教育行業(yè)BDDCG中央行業(yè)銷售DCG分區(qū)銷售系統(tǒng)下單中國(guó)區(qū)中央業(yè)務(wù)拓展團(tuán)隊(duì)BD對(duì)接DCG中央銷售。BD團(tuán)隊(duì)獲取中央?yún)^(qū)的商機(jī)后，教育行業(yè)經(jīng)理將商機(jī)傳遞給分區(qū)銷售。教育行業(yè)經(jīng)理對(duì)接DCG分區(qū)銷售，并調(diào)用售前資源支持。BD及行業(yè)經(jīng)理會(huì)從產(chǎn)品角度支持銷售，同時(shí)教育行業(yè)經(jīng)理輔助銷售進(jìn)行下單BD提供物料號(hào)推廣商機(jī)下單商機(jī)轉(zhuǎn)化后物料編號(hào)產(chǎn)品描述產(chǎn)品規(guī)格JSW0T04541聯(lián)想Leap大數(shù)據(jù)實(shí)訓(xùn)實(shí)戰(zhàn)平臺(tái)聯(lián)想Leap大數(shù)據(jù)實(shí)訓(xùn)實(shí)戰(zhàn)平臺(tái)標(biāo)準(zhǔn)版授權(quán)（支持60并發(fā)，含第一年技術(shù)支持與服務(wù)），包含五個(gè)大數(shù)據(jù)Leap節(jié)點(diǎn)JSW0R40241聯(lián)想LEAP大數(shù)據(jù)平臺(tái)標(biāo)準(zhǔn)版聯(lián)想LEAP大數(shù)據(jù)平臺(tái)