【大數(shù)據(jù)實訓】聯(lián)想實訓平臺介紹課件(PPT 29頁)

1、大數(shù)據(jù)實戰(zhàn)實訓平臺大數(shù)據(jù)授課與實驗教學平臺2018 Lenovo Internal. All rights reserved.1第1頁，共29頁。聯(lián)想大數(shù)據(jù)教學平臺產(chǎn)品概念聯(lián)想大數(shù)據(jù)教學平臺市場分析聯(lián)想大數(shù)據(jù)教學平臺產(chǎn)品介紹聯(lián)想大數(shù)據(jù)教學平臺案例Agenda第2頁，共29頁。聯(lián)想大數(shù)據(jù)教學平臺是什么：教學及科研平臺大數(shù)據(jù)教學平臺概念：利用虛擬化教學資源，搭建教學系統(tǒng)和集群平臺，將理論學習、實踐教學和大數(shù)據(jù)項目實戰(zhàn)融為一體，循序漸進逐步提高學生的學習技能和實踐水平。大數(shù)據(jù)教學平臺價值：全面落實“產(chǎn)、學、研、用”一體化的思想和模式，從教學、實踐、科研和使用多方面注重專業(yè)人才和特殊人才的培養(yǎng)，減輕師

2、生教、學壓力，增加學生就業(yè)競爭力，加快大數(shù)據(jù)人才的培養(yǎng)與補充。第3頁，共29頁。聯(lián)想大數(shù)據(jù)教學平臺產(chǎn)品概念聯(lián)想大數(shù)據(jù)教學平臺市場分析聯(lián)想大數(shù)據(jù)教學平臺產(chǎn)品介紹聯(lián)想大數(shù)據(jù)教學平臺案例Agenda第4頁，共29頁。大數(shù)據(jù)人才培養(yǎng)加速2016年2月，教育部公布新增“數(shù)據(jù)科學與大數(shù)據(jù)技術”專業(yè)，北京大學、對外經(jīng)濟貿(mào)易大學、中南大學成為首家獲批高校。2017年3月，上海工程技術大學、北京信息科技大學、中北大學等32所高校獲批，2018年3月，中國農(nóng)業(yè)大學、中國石油大學、齊魯工業(yè)大學等248所高校獲批。2019年新增獲批院校至少300+，普教、高職院校大數(shù)據(jù)教學需求同樣旺盛。第5頁，共29頁。痛點：計算機

3、領域，特別是互聯(lián)網(wǎng)、云計算、大數(shù)據(jù)發(fā)展迅猛，很多學校在課程體系、實踐環(huán)境、及師資上都跟不上；高校人才的培養(yǎng)目標與一般企業(yè)的用人要求是不一致的；高校人才培養(yǎng)的環(huán)境，缺乏真實的業(yè)務場景，一無真正的業(yè)務需求、二無真正的數(shù)據(jù)、三無真正的軟硬件環(huán)境；傳統(tǒng)的實驗、實踐體系變革、提升空間大高校開展大數(shù)據(jù)教學必備的3個條件（1，師資、2，教材及培養(yǎng)方案、3，實驗、實踐環(huán)境）第6頁，共29頁。Agenda聯(lián)想大數(shù)據(jù)教學平臺產(chǎn)品概念聯(lián)想大數(shù)據(jù)教學平臺市場分析聯(lián)想大數(shù)據(jù)教學平臺產(chǎn)品介紹聯(lián)想大數(shù)據(jù)教學平臺案例第7頁，共29頁。聯(lián)想大數(shù)據(jù)教學平臺建設方案系統(tǒng)說明第8頁，共29頁。實訓平臺實戰(zhàn)平臺VMVMVMVMVM管理

4、VM媒體VM試驗機VM（Docker）MRStreamingSparkKafkaHDFS數(shù)據(jù)處理數(shù)據(jù)采集數(shù)據(jù)存儲大數(shù)據(jù)教學實訓平臺（含課程和試驗）大數(shù)據(jù)科研實戰(zhàn)平臺（Leap HD大數(shù)據(jù)） 大數(shù)據(jù)教學實訓平臺+科研實戰(zhàn)平臺登錄門戶-3節(jié)點HX1320( xeon 4116*2, 256G, 480G*2, 4T*2)-1臺萬兆交換機NE1032-實訓管理及試驗license-60并發(fā)用戶-60臺實訓終端（PC或云桌面）-6節(jié)點SR650( xeon 4116*2, 128G, 240G*2, 2T*3)-1臺萬兆交換機NE1032-Leap大數(shù)據(jù)平臺license大數(shù)據(jù)實訓+科研平臺第9頁，共

5、29頁。大數(shù)據(jù)實訓平臺介紹實訓教學平臺視頻習題與測驗在線編程實驗操作大數(shù)據(jù)科研實戰(zhàn)平臺行業(yè)數(shù)據(jù)DATA第10頁，共29頁。聯(lián)想大數(shù)據(jù)實訓平臺功能視頻任務，包括：300小時的認知、通識課程，150小時的大數(shù)據(jù)專業(yè)課程，450小時的實驗、實踐操作視頻。習題與測驗任務，以判斷題、選擇題為主的客觀題，目前各類習題共有500多道。在線編程任務，以Java與Python為主的語法、算法編程練習，收錄了語言基礎、金典算法，以及BATJ等知名公司面試題。實驗操作任務，覆蓋Java、Linux、Python基礎，以及大數(shù)據(jù)相關生態(tài)系統(tǒng)所有框架組件，乃致數(shù)據(jù)分析、可視化技術等，共480+個實驗，實驗時長累計超過1

6、000小時。視頻習題與測驗在線編程實驗操作第11頁，共29頁。聯(lián)想大數(shù)據(jù)實訓平臺豐富的課程認識大數(shù)據(jù)(10講)大數(shù)據(jù)與政府治理（10講）醫(yī)療健康大數(shù)據(jù)(10講）房產(chǎn)建筑大數(shù)據(jù)(6講）現(xiàn)代金融大數(shù)據(jù)（5講）城市規(guī)劃大數(shù)據(jù)（10講）城市交通大數(shù)據(jù)（4講）社會關系網(wǎng)絡大數(shù)據(jù)（9講）大數(shù)據(jù)認知統(tǒng)計與分析技術開發(fā)實戰(zhàn)案例SPSS統(tǒng)計分析R語言基礎SAS數(shù)據(jù)統(tǒng)計分析案例分析及業(yè)務應用建模分析師數(shù)據(jù)分析概述產(chǎn)品需求的挖掘與分析大數(shù)據(jù)產(chǎn)品有計劃的不斷迭代與優(yōu)化Linux基礎Java編程基礎Hadoop基礎Hive數(shù)據(jù)倉庫MapReduce編程進階數(shù)據(jù)庫Hbase數(shù)據(jù)遷移工具SqoopFlume日志框架Kafk

7、a流式數(shù)據(jù)采集Storm實時數(shù)據(jù)處理Zookeeper開發(fā)Spark基礎Scala編程語言Spark實時計算Spark SQL編程Spark MLlib機器學習數(shù)據(jù)處理實用案例海量網(wǎng)站日志分析搜索引擎搜索數(shù)據(jù)統(tǒng)計分析電商商品統(tǒng)計分析及可視化展現(xiàn)Spark MLlib推薦算法應用企業(yè)大數(shù)據(jù)處理綜合平臺北京市二手房及租房價格分析案例汽車品牌口碑情感分析醫(yī)療咨詢與疾病預測第12頁，共29頁。包含音視頻、講義大綱的富媒體課堂第13頁，共29頁。 習題 以判斷題、選擇題為主的客觀題，并以小節(jié)習題，單元測驗的形式考核學生。第14頁，共29頁。 在線編程在線的判題系統(tǒng)（Online Judge），用戶可以在

8、線提交程序（如Java、Python）源代碼，系統(tǒng)對源代碼進行編譯和執(zhí)行，并通過預先設計的測試數(shù)據(jù)來檢驗程序源代碼的正確性。第15頁，共29頁。實驗操作覆蓋Java、Linux、Python基礎，以及大數(shù)據(jù)相關生態(tài)系統(tǒng)所有框架組件，并且包括數(shù)據(jù)分析、可視化技術等工具、平臺的應用操作實驗。第16頁，共29頁。實驗任務及環(huán)境（480+）Hadoop偽分布模式安裝Hadoop完全分布模式安裝Hadoop開發(fā)插件安裝HDFS JAVA API操作Mapreduce實例wordcountMapreduce實例去重Mapreduce實例排序Mapreduce實例求平均值Mapreduce實例Map端Joi

9、nMapreduce實例Reduce端JoinMapreduce實例單表JoinMapreduce實例二次排序Mapreduce實例倒排索引Mapreduce實例Chainmapper&ChainreducerMapreduce實例MapReduce自定義輸入、輸出格式Hive安裝Hive基本操作Hive查詢Hive 各種排序之間的區(qū)別zookeeper安裝HBase安裝HBase JAVA API讀寫數(shù)據(jù)HBase的過濾器綜合案例：MapReduce讀HBase綜合案例：MapReduce寫HBase綜合案例：Mapreduce讀HBase并寫入HBase第17頁，共29頁。 作為教師講授專

10、業(yè)課的輔助，為課后提供各種實驗環(huán)境與實驗任務指導書，減輕老師的負擔。應用場景（一）課后教學輔助功能第18頁，共29頁。應用場景（二） 實訓課程作為輔助教學，為老師開設的大數(shù)據(jù)專來課程提供從理論講解、課后習題、上機實驗等一系列內(nèi)容，前、后成體系貫穿，解決學校無法開展新工科教學的痛點。第19頁，共29頁。應用場景（三） 就業(yè)培訓根據(jù)就業(yè)崗位的能力模型及須掌握的知識體系，以項目教學法，設計成以知識點為單元的任務，通過任務驅動引擎引導學生完成一個個任務，最終完成真實的項目。崗位包括：大數(shù)據(jù)開發(fā)工程師、大數(shù)據(jù)分析師、大數(shù)據(jù)產(chǎn)品經(jīng)理等。第20頁，共29頁。大數(shù)據(jù)實訓平臺-提供面向培訓目標的課程21大數(shù)據(jù)開

11、發(fā)工程師大數(shù)據(jù)分析師大數(shù)據(jù)產(chǎn)品經(jīng)理認識大數(shù)據(jù)(10講)Linux基礎Java編程基礎Hadoop基礎Hive數(shù)據(jù)倉庫MapReduce編程進階數(shù)據(jù)庫Hbase數(shù)據(jù)處理實用案例企業(yè)大數(shù)據(jù)處理綜合平臺認識大數(shù)據(jù)(10講)SPSS統(tǒng)計分析R語言基礎案例分析及業(yè)務應用數(shù)據(jù)分析概述北京市二手房及租房價格分析案例認識大數(shù)據(jù)(10講)數(shù)據(jù)分析概述北京市二手房及租房價格分析案例產(chǎn)品需求的挖掘與分析大數(shù)據(jù)產(chǎn)品有計劃的迭代與優(yōu)化Hadoop基礎企業(yè)大數(shù)據(jù)處理綜合平臺.第21頁，共29頁。聯(lián)想大數(shù)據(jù)科研實戰(zhàn)平臺第22頁，共29頁。行業(yè)數(shù)據(jù)地區(qū)房產(chǎn)法律咨詢股票基金交易汽車數(shù)據(jù)疾病問答天氣氣象電商評價全球影評全球書評農(nóng)

12、業(yè)生鮮食品價格搜索引擎訪問日志更多040206081011120907050301第23頁，共29頁。Agenda聯(lián)想大數(shù)據(jù)教學平臺產(chǎn)品概念聯(lián)想大數(shù)據(jù)教學平臺市場分析聯(lián)想大數(shù)據(jù)教學平臺產(chǎn)品介紹聯(lián)想大數(shù)據(jù)教學平臺案例第24頁，共29頁。部分案例25齊魯工業(yè)大學“大數(shù)據(jù)實訓項目”：為學校提供主流的技術路線和大數(shù)據(jù)平臺，滿足學生教學實訓和教師科研實戰(zhàn)的需求，提供豐富的工業(yè)數(shù)據(jù)集真實模擬實戰(zhàn)訓練山西中北大學“大數(shù)據(jù)實訓基地”：支持120名學生同時登錄平臺學習教學視頻、答題練習、完成老師布置的實驗任務；老師及學生可以應用實戰(zhàn)平臺進行科研、畢業(yè)項目設計北京信息科技大學計算機學院案例一個班的學生利用平臺進行

13、為期4個月的實訓，同學們可以在平臺上學習教學視頻、答題練習、完成老師布置的實驗任務，最得非常好的學習效果。大數(shù)據(jù)實訓落地院校清華大學桂林電子科技大學中國農(nóng)業(yè)大學武夷學院廣西師范大學大連海事大學齊魯工業(yè)大學大連外國語大學合肥工業(yè)大學華北理工大學北京信息科技大學上饒師范學院齊齊哈爾大學東北大學秦皇島分校中國石油大學陸軍工程大學中北大學山東農(nóng)業(yè)大學北京郵電大學蚌埠學院北京工業(yè)大學沈陽化工學院保定學院河北農(nóng)業(yè)大學南昌航空大學浙江財經(jīng)大學第25頁，共29頁。具有工信部/人社部認證資格：大數(shù)據(jù)分析員/分析師認證培訓第26頁，共29頁。2018 Lenovo. All rights reserved.商機及

14、銷售流程 DCG教育行業(yè)經(jīng)理楊驥 LDP教育行業(yè)BDDCG中央行業(yè)銷售DCG分區(qū)銷售系統(tǒng)下單中國區(qū)中央業(yè)務拓展團隊BD對接DCG中央銷售。BD團隊獲取中央?yún)^(qū)的商機后，教育行業(yè)經(jīng)理將商機傳遞給分區(qū)銷售。教育行業(yè)經(jīng)理對接DCG分區(qū)銷售，并調(diào)用售前資源支持。BD及行業(yè)經(jīng)理會從產(chǎn)品角度支持銷售，同時教育行業(yè)經(jīng)理輔助銷售進行下單BD提供物料號推廣商機下單商機轉化后物料編號產(chǎn)品描述產(chǎn)品規(guī)格JSW0T04541聯(lián)想Leap大數(shù)據(jù)實訓實戰(zhàn)平臺聯(lián)想Leap大數(shù)據(jù)實訓實戰(zhàn)平臺標準版授權（支持60并發(fā)，含第一年技術支持與服務），包含五個大數(shù)據(jù)Leap節(jié)點JSW0R40241聯(lián)想LEAP大數(shù)據(jù)平臺標準版聯(lián)想LEAP大數(shù)據(jù)平臺