《大數(shù)據(jù)應(yīng)用課程設(shè)計》課程教學(xué)大綱

PAGEPAGE100《大數(shù)據(jù)應(yīng)用課程設(shè)計》教學(xué)大綱周 數(shù)：2學(xué) 分：2適用專業(yè)：數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)專業(yè)一、目的和要求：本課程為數(shù)據(jù)科學(xué)與大數(shù)據(jù)專業(yè)集中性實(shí)踐環(huán)節(jié)，課程設(shè)計是教學(xué)中的重要組成部分，要求達(dá)到熟練掌握大數(shù)據(jù)分析應(yīng)用的基本知識和技能；掌握大數(shù)據(jù)分析應(yīng)用的基本思路和方法；掌握大數(shù)據(jù)分析應(yīng)用解決具體實(shí)際問題的基本流程；具有利用所學(xué)大數(shù)據(jù)分析應(yīng)用的基本知識和技能，解決具體實(shí)際問題的綜合能力。二、主要內(nèi)容：（一（二）本課程設(shè)計相關(guān)要求：選取項目，獲取實(shí)際數(shù)據(jù)；設(shè)計項目源程序代碼；上機(jī)調(diào)試；書寫課程設(shè)計報告與答辯演示；（三）題目項目一：基于云平臺和用戶日志的推薦系統(tǒng)本項目主要內(nèi)容：構(gòu)建系統(tǒng)架構(gòu)；數(shù)據(jù)收集與預(yù)處理；SparkStreamingMLlib本項目具體要求：熟悉情感分析的方法；掌握分析熱點(diǎn)并進(jìn)行情感分析的原理。本項目主要內(nèi)容：構(gòu)建系統(tǒng)架構(gòu)；TwitterCassandraSparkStreamingTwitterSparkStreamingSparkSQLTwitter項目三：熱點(diǎn)新聞分析系統(tǒng)SparkSpark本項目主要內(nèi)容：構(gòu)建系統(tǒng)架構(gòu)；爬蟲抓取網(wǎng)絡(luò)信息；新聞文本數(shù)據(jù)預(yù)處理；新聞聚類。項目四：構(gòu)建分布式的協(xié)同過濾推薦系統(tǒng)Spark本項目主要內(nèi)容：SparkSparkMLlibMLlibSparkSpark本項目主要內(nèi)容：社交網(wǎng)絡(luò)中社團(tuán)挖掘算法；SparkKSparkFacebook社交網(wǎng)絡(luò)中的鏈路預(yù)測算法；SparkSparkSparkLDA；SparkLDANewsgroups（四）系統(tǒng)實(shí)現(xiàn)與調(diào)試在項目設(shè)計的基礎(chǔ)上與特定的軟件環(huán)境下，給出項目實(shí)現(xiàn)：提取項目數(shù)據(jù)；設(shè)計項目開發(fā)流程；項目的運(yùn)行和調(diào)試；（五）總結(jié)小組成員應(yīng)該詳細(xì)、客觀地給出自己對課程設(shè)計的個人總結(jié)，大致包括以下內(nèi)容：在項目小組中所承擔(dān)的工作任務(wù)。所選課題的課程設(shè)計是否達(dá)到預(yù)定的目標(biāo)。課程設(shè)計中尚存在哪些不足。通過本課程設(shè)計有哪些收獲。本課程設(shè)計對今后學(xué)習(xí)和工作的影響等。三、教學(xué)方式和時間安排：教學(xué)方式：學(xué)生應(yīng)按照課程設(shè)計的內(nèi)容和要求，上機(jī)實(shí)踐操作完成，要求計算機(jī)安3人，選定某個實(shí)際的課題完成項目的需求、設(shè)計、開發(fā)和測試。時間安排：2周。四、場所安排：五、考核方式：以項目小組為單位提交應(yīng)用系統(tǒng)的完整程序，程序要求書寫規(guī)范、操作簡便、無明顯錯誤且能夠執(zhí)行；以項目小組為單位提交課程設(shè)計報告一份，課程設(shè)計報告的內(nèi)容及組織按《大數(shù)據(jù)應(yīng)用》指導(dǎo)書中要求的主要內(nèi)容來編排，要求格式統(tǒng)一、書寫規(guī)范、文字通順、圖表清晰、數(shù)據(jù)完整、結(jié)論正確；課程設(shè)計報告最后附上每個小組成員的個人總結(jié)。對于課題驗收環(huán)節(jié)，讓學(xué)生上講臺講述系統(tǒng)的功能模塊、算法的設(shè)計思路、項目創(chuàng)新點(diǎn)六、成績評定：（25%；以所選課題的