云計算與大數(shù)據(jù)技術課程教學大綱

云計算與大數(shù)據(jù)技術課程教學大綱課程編號：08122730課程名稱：云計算與大數(shù)據(jù)技術/Cloudcomputingandbigdatatechnology總學時/學分：48/3.0（其中理論40學時，實驗8學時）適用專業(yè)：物聯(lián)網(wǎng)工程一、課程目標通過本課程學習，學生應達到如下目標：目標1系統(tǒng)的類型、結構、數(shù)據(jù)獨立性目標2：理解云存儲基本概念和技術、應用系統(tǒng)提供的hdfs管理方法和shell命令功能Mapreducemapreduce解決方案，包括輸入輸出定義、keyvalue和處理流程等目標4：針對計算機工程問題，綜合運用云計算設計知識，設計規(guī)范的云計算解決方案。二、課程目標能力要求及權重課程目標權重(∑=1)初始程度要求程度目標10.1L1L2目標20.1L1L2目標30.1L1L2目標10.1L1L2目標20.1L1L3目標30.1L1L4目標40.4L1L5L1(認知)L2(理解)L3(應用L4(分析)L5(綜合)L6(創(chuàng)造)來表示對此項能力要求達到的程度，無要求則留空。三、教學過程安排序號知識模塊教學內容課時課程目標教學方法1物聯(lián)網(wǎng)和云計算物聯(lián)網(wǎng)的體系結構物聯(lián)網(wǎng)和互聯(lián)網(wǎng)的關系云計算是物聯(lián)網(wǎng)的核心環(huán)節(jié)4目標1課堂講授2102102海量數(shù)據(jù)分布式處理軟件框架Hadoop的發(fā)展簡史Hadoop分布式文件系統(tǒng)MapReduceHBase4目標3課堂講授+作業(yè)3Hadoop的安裝與配置Linux上安裝與配置HadoopMacOSX上安裝與配置HadoopWindows上安裝與配置HadoopHadoop集群8目標4課堂講授+演示+測驗+作業(yè)4MapReduce計算模型MapReduceMapReduce計算模型MapReduce任務的優(yōu)化Hadoop流3.5HadoopPipes8目標5課堂講授5開發(fā)MapReduce應用程序需求分析集群的實施和維護8目標5課堂講授+大作業(yè)+討論6MapReduce應用案例單詞計數(shù)數(shù)據(jù)去重排序單表關聯(lián)多表關聯(lián)8目標2課堂講授+測驗7課內實驗實驗1.Hadoop安裝與配置實驗2.Hdfsjava接口開發(fā)實驗3.Rpc通信開發(fā)實驗4.單詞計數(shù)8目標4學生操作教師指導實驗報告8課外實驗實驗1.流量統(tǒng)計實驗2.分區(qū)和排序目標4網(wǎng)絡輔導實驗報告四、實驗或上機內容序號實驗項目名稱實驗目的和任務實驗學時實驗類型開出要求1Hadoop安裝與配置目的：通過實驗，熟練掌握hadoop的安裝與配置等操作；任務：使用虛擬機、winscp、secureCRT等工具實現(xiàn)以上功能等。2設計型必做2Hdfsjava 口開發(fā)目的：掌握使用eclipse開發(fā)調用hdfs的java接口等。hadoopjarhdfs的文件。2設計型必做3Rpc通信開發(fā)目的：掌握hadoop的通信機制等。rpchadoop的調用通信機制。2設計型必做4單詞計數(shù)目的：掌握使用java來開發(fā)一個簡單的mapreduce程序的開發(fā)方法。2設計型必做PAGEPAGE220任務：開發(fā)map和reduce函數(shù)，并且設計好main函數(shù)實現(xiàn)以上功能。5流量統(tǒng)計目的：針對基站的手機上網(wǎng)日志，實現(xiàn)一段時間內用戶的流量統(tǒng)計功能。任務：開發(fā)map和reduce函數(shù)，并且設計好main函數(shù)實現(xiàn)以上功能。2操作型課外必做6分區(qū)和排序目的：針對基站的手機上網(wǎng)日志，實現(xiàn)一段時間內用戶的流量的分區(qū)功能和排序功能。任務：開發(fā)map和reduce函數(shù)，并且設計好main函數(shù)實現(xiàn)以上功能。2驗證型課外必做五、課程目標達成方法教學目標課時評價方法評價依據(jù)達成標準(分)目標16考試試卷68目標24考試（80%）+測驗（20%）試卷+測驗68目標36考試（80%）+作業(yè)（20%）試卷+作業(yè)68目標416（40%）試卷+測驗+操作+實驗報告68目標516考試（40%）+大作業(yè)（30%）+討論（30%）試卷+大作業(yè)+討論68合計48六、考核標準本門課程考核包括6個部分，分別為考試、作業(yè)、實驗、大作業(yè)、討論、測驗。具體要求及評分方法如下：1、考試試卷知識點要求序號知識模塊考核內容試題比例目標1物聯(lián)網(wǎng)和云計算物聯(lián)網(wǎng)的體系結構物聯(lián)網(wǎng)和互聯(lián)網(wǎng)的關系云計算是物聯(lián)網(wǎng)的核心環(huán)節(jié)15%目標2海量數(shù)據(jù)分布式處理軟件框架Hadoop的發(fā)展簡史Hadoop分布式文件系統(tǒng)MapReduceHBase15%目標3Hadoop的安裝與配置LinuxHadoopMacOSXHadoopWindowsHadoopHadoop集群15%目標4MapReduce計算模型MapReduceMapReduce計算模型MapReduce任務的優(yōu)化Hadoop流3.5HadoopPipes20%5.1需求分析5.2概念結構設計開發(fā)MapReduce應用程序5.3邏輯結構設計15%5.4物理結構設計目標55.5集群的實施和維護5.1單詞計數(shù)5.2數(shù)據(jù)去重MapReduce應用案例5.3排序20%5.4單表關聯(lián)5.5多表關聯(lián)2、作業(yè)優(yōu)秀（90‐100分）良好（80‐89分）中等（70‐79分）及格（60‐69分）不及格（<60分）同的解決方案，并按時完成，方案能解決80%以上的主要問題。能針對某延時3天內完成，方案能解決60%主要問題。不能提出延時一周內完成。方案能解決40%以上問題。只能提出延時一周以上完成。僅能解答以下的主要問題。對不同的解決方案些問題提出一種或多種解決方案。一種解決方案，有不能提出完整解決進行比較分析。多種解決方案。效性不足。方案。有抄襲（雷同）現(xiàn)象。3、實驗優(yōu)秀（90‐100分）良好（80‐89分）中等（70‐79分）及格（60‐69分）不及格（<60分）方法操作熟練，能提前完成任務操作較熟練，能按時完成任務操作基本熟練，基本按時完成任務操作基本熟練，延遲1天完成任務操作生疏，延遲>1按時完成，方案按時完成，方案延時3天內完成，方案能解決60%以上的主要問題。能提出多種解決方案，且有效性不足。延時一周內完大于一周按時完實驗能解決90%以上提出多種不同的能解決80%以上能提出一種解決成。按時完成，方案能解決40%以上的主要問成。方案能解決40%以下的主要報告解決方案，各種方案，且比較有題。只能提出一解決方案。有抄方案基于的原理效。種解決方案，且（雷同并不相同，且比有效性不足。較有效。4、大作業(yè)優(yōu)秀（90‐100分）良好（80‐89分）（70‐79分）及格（60‐69分）不及格（<60分）決90%以上的主要問能解決80%以上能提出一種解決延時3天內完以上的主要延時一周內完成。按時完成，方案能解決40%以上的主要問題。只能提出案能解決40%以下的（雷同案基于的原理并不方案，且比較有種解決方案，且一種解決方案，且現(xiàn)象。相同，且比較有效。效。有效性不足。有效性不足。5、課堂討論要求學生須事先按照討論題目分組查閱資料，歸納總結，課堂匯報。（90‐100分）良好（80‐89分）中等（70‐79分）及格（60‐69分）不及格（<60分）匯報和回答問題講述清楚，內容符合要求，回答問題準確講述清楚，內容符合要求，回答問題較準確容基本符合要本準確講述基本清楚，內容基本符合要求，回答問題基本準確講述不清楚，內容不符合要求，回答問題不準確6、測驗隨堂測驗，老師給出題目，學生回答。