大數(shù)據(jù)課程體系、實訓課程以及實訓環(huán)境建設(shè)與創(chuàng)新能課件

大數(shù)據(jù)課程體系、實訓課程以及實訓環(huán)境建設(shè)與創(chuàng)新能力培養(yǎng)大數(shù)據(jù)課程體系、實訓課程1大數(shù)據(jù)課程建設(shè)與創(chuàng)新能力培養(yǎng)實訓與創(chuàng)新能力課程體系構(gòu)建聯(lián)盟的工作技術(shù)架構(gòu)和實訓平臺大數(shù)據(jù)課程建設(shè)與創(chuàng)新能力培養(yǎng)實訓與創(chuàng)新能力課程體系構(gòu)建聯(lián)盟的2大數(shù)據(jù)人才需求大數(shù)據(jù)人才需求3國家戰(zhàn)略加強專業(yè)人才培養(yǎng)，建立健全多層次、多類型的大數(shù)據(jù)人才培養(yǎng)體系。61電子信息大類6102計算機類610215大數(shù)據(jù)技術(shù)及應(yīng)用

63財經(jīng)商貿(mào)大類6308電子商務(wù)630804商務(wù)數(shù)據(jù)分析與應(yīng)用國家戰(zhàn)略加強專業(yè)人才培養(yǎng)，建立健全多層次、多類型的大數(shù)據(jù)人才4大數(shù)據(jù)課程體系、實訓課程以及實訓環(huán)境建設(shè)與創(chuàng)新能課件5職業(yè)崗位專業(yè)定位大數(shù)據(jù)運維工程師ETL工程師大數(shù)據(jù)可視化工程師大數(shù)據(jù)應(yīng)用開發(fā)大數(shù)據(jù)售后/技術(shù)支持工程師大數(shù)據(jù)實施工程師職業(yè)崗位專業(yè)定位大數(shù)據(jù)運維工程師6課程體系構(gòu)建課程體系構(gòu)建7課程體系構(gòu)建課程體系構(gòu)建8考核任務(wù)考核知識點和技能點描述Hadoop平臺安裝部署Hadoop平臺安裝部署和基本配置考察Hadoop平臺環(huán)境理解和部署能力，掌握常用的基本配置和命令，能夠管理和維護Hadoop集群。HDFS常用操作命令Hadoop集群節(jié)點的動態(tài)增加與刪除Hadoop集群的負載均衡數(shù)據(jù)抓取規(guī)則文件數(shù)據(jù)和關(guān)系型數(shù)據(jù)庫數(shù)據(jù)抓取以及數(shù)據(jù)同步（同Hadoop/Hive數(shù)據(jù)同步）考察學生對Hadoop平臺下的各種應(yīng)用類型數(shù)據(jù)的抓取和收集日志類數(shù)據(jù)抓取流數(shù)據(jù)抓取能夠通過Python編程語言網(wǎng)絡(luò)爬蟲抓取工具，實現(xiàn)網(wǎng)絡(luò)數(shù)據(jù)抓取數(shù)據(jù)清洗、整理、計算和

表達基于MapReduce的Hive數(shù)據(jù)倉庫的離線數(shù)據(jù)的數(shù)據(jù)整理和計算考察學生對數(shù)據(jù)進行整理、計算，通過Pythonapi接口，對計算分析結(jié)果導出到Hdfs中，供報表，日志分析等需求使用等技能。利用分類、聚類、頻繁模式挖掘等數(shù)據(jù)挖掘算法，結(jié)合Hive數(shù)據(jù)庫技術(shù)實現(xiàn)對數(shù)據(jù)的分析和展現(xiàn)。綜合分析通過知識技能，實現(xiàn)對提供數(shù)據(jù)源的分析，通過Python實現(xiàn)數(shù)據(jù)的展現(xiàn)，并根據(jù)展現(xiàn)結(jié)果提出結(jié)論，然后對結(jié)論進行分析，作出分析報告?？疾鞂W生對大數(shù)據(jù)技術(shù)與分析的綜合操作能力和分析能力課程體系構(gòu)建考核任務(wù)考核知識點和技能點描述Hadoop平臺安裝部署Had9課程體系構(gòu)建課程體系構(gòu)建10課程體系構(gòu)建課程體系構(gòu)建11實訓與創(chuàng)新能力大數(shù)據(jù)和人工智能課程是計算機技術(shù)發(fā)展方向，通常認為計算機技術(shù)發(fā)展有三個階段（霍普費爾德）：

程序語言、編譯技術(shù)、操作系統(tǒng)，以及支撐理論

算法和數(shù)據(jù)結(jié)構(gòu)

概率和統(tǒng)計（大數(shù)據(jù)）

實訓與創(chuàng)新能力大數(shù)據(jù)和人工智能課程是計算機技術(shù)發(fā)展方向，12實訓與創(chuàng)新能力大數(shù)據(jù)課程本身有很強的科技創(chuàng)新氛圍，有“亂花漸欲迷人眼”的各種“神奇”案例但是看著高科技的熱鬧，不一定就會用高科技創(chuàng)新。過多一味的“神奇展示”，有可能使學生增加了神秘感，距離感，反而減少了探究的信心。

理解規(guī)律熟悉特點實踐應(yīng)用解放思維實訓與創(chuàng)新能力大數(shù)據(jù)課程本身有很強的科技創(chuàng)新氛圍，有“亂花漸13創(chuàng)新能力理解規(guī)律“授人以漁”，一直是教育的宗旨，挖掘規(guī)律，展示規(guī)律，使學生能夠理解規(guī)律是學校教育的優(yōu)勢，是我們有別于社會培訓機構(gòu)的一個重要因素。缺失規(guī)律的理解，機械的技能，會怎么樣？

阿布扎比國際技能大賽，賽項中有一個砌墻賽項，選手獲得了金獎，數(shù)天后另一則新聞：澳洲發(fā)明砌墻機器人。職業(yè)危機如何應(yīng)對？

創(chuàng)新能力理解規(guī)律“授人以漁”，一直是教育的宗旨，挖掘規(guī)律，展14創(chuàng)新能力理解規(guī)律

課程，應(yīng)當讓學生明白從哪里來，想到哪里離去，不能“亂花終究迷人眼”，我們認為應(yīng)當在校企合作的基礎(chǔ)上發(fā)揮各自優(yōu)勢，學校教師為學生揭示繁雜案例中不變的規(guī)律。

這點，協(xié)會的Android師資培訓就做了示范，即介紹了技術(shù)，也從師資培養(yǎng)上強調(diào)了對Andriod開發(fā)規(guī)律的理解，使得學生即會用藍牙通信，又會選擇別的通信方式。觸類旁通，前兩天的教學成果展，很好的證明了這點。創(chuàng)新能力理解規(guī)律課程，應(yīng)當讓學生明白從哪里來，想到哪里15創(chuàng)新能力理解規(guī)律

下圖展示了大數(shù)據(jù)課程體系中，從“線性回歸”到“深度神經(jīng)網(wǎng)絡(luò)”演進路徑的一部分

，讓學生明白所謂機器學習并不神秘，和“一條直線由斜率和截距確定”有必然和自然的聯(lián)系，這讓才能給學生和教育一個堅實的出發(fā)點。“砌墻機器人”只會人類已經(jīng)有的砌墻方法，新的，更好的砌墻方法還需要金獎選手總結(jié)規(guī)律，傳授給機器人，發(fā)揮創(chuàng)新作用。創(chuàng)新能力理解規(guī)律下圖展示了大數(shù)據(jù)課程體系中，從“16創(chuàng)新能力熟悉特點

大數(shù)據(jù)以及人工智能專業(yè)與計算機應(yīng)用，計算機網(wǎng)絡(luò)，計算機軟件專業(yè)非常接近。但也有些特殊之處。比如由于數(shù)據(jù)量巨大，非常強調(diào)計算的效率。

那么這些特殊之處就是教學的重點，這些應(yīng)當體現(xiàn)在教學案例中，這些特殊的技術(shù)體現(xiàn)了最終應(yīng)用是否能成功。例如：創(chuàng)新能力熟悉特點大數(shù)據(jù)以及人工智能專業(yè)與計算機17創(chuàng)新能力實踐應(yīng)用以實際應(yīng)用為核心，在實踐中應(yīng)用理論和熟練技術(shù)加深理解，達到熟練應(yīng)用的程度，是高職教育的特點。例如下面tensorflow課程的實訓項目：創(chuàng)新能力實踐應(yīng)用以實際應(yīng)用為核心，在實踐中應(yīng)用理論和熟練技術(shù)18創(chuàng)新能力解放思維能熟練應(yīng)用已有技術(shù)，想辦法滿足新需求，供給端需求的不斷滿足，會需求更多的創(chuàng)新，創(chuàng)新方面無論大小，需要解放思維，比如學生自己的“爬蟲”應(yīng)用：學生利用爬蟲自己分析了該找什么工作，這就是創(chuàng)新。創(chuàng)新能力解放思維能熟練應(yīng)用已有技術(shù)，想辦法滿足19技術(shù)架構(gòu)和實訓平臺我們的建議是，側(cè)重基礎(chǔ)，不針對某些領(lǐng)域的專門應(yīng)用用戶廣泛，例如TensorFlow入門簡單，例如Python，c、Java、Python資源能體現(xiàn)高職特點

含配套課程，課程體系科學，適應(yīng)范圍廣，能體現(xiàn)大數(shù)據(jù)技術(shù)特點，能體現(xiàn)高職教學特點。運用新技術(shù)，降低成本，維護簡單：把精力用于教學而不是紛繁的配置。技術(shù)架構(gòu)和實訓平臺我們的建議是，20技術(shù)架構(gòu)和實訓平臺技術(shù)架構(gòu)和實訓平臺21大數(shù)據(jù)聯(lián)盟的工作“大數(shù)據(jù)聯(lián)盟”愿意在“高等院校計算機基礎(chǔ)教育研究會高職高專專業(yè)委員會”領(lǐng)導下，促進大數(shù)據(jù)課程體系、課程、教學實訓項目的研發(fā)、以及