《大數(shù)據(jù)技術(shù)原理與應(yīng)用實驗》課程教學(xué)大綱

ADDINCNKISM.UserStyle《大數(shù)據(jù)技術(shù)原理與應(yīng)用實驗》課程教學(xué)大綱（實驗課程）一、課程基本信息課程號3023S04018開課單位國際學(xué)院課程名稱（中文）大數(shù)據(jù)技術(shù)原理與應(yīng)用實驗（英文）BigDataTechnologyPrincipleandApplicationExperiment課程性質(zhì)選修考核類型考查課程學(xué)分1課程學(xué)時34課程類別專業(yè)發(fā)展課程（專業(yè)拓展課）適用專業(yè)（類）信息管理與信息系統(tǒng)二、課程描述及目標(biāo)（一）課程簡介《大數(shù)據(jù)技術(shù)原理與應(yīng)用》課程是本專業(yè)（類）的一門專業(yè)發(fā)展課程，從解析數(shù)據(jù)、大數(shù)據(jù)基礎(chǔ)理論入手，講述大數(shù)據(jù)應(yīng)用的多側(cè)面場景，講解大數(shù)據(jù)的存儲與管理工具，大數(shù)據(jù)分析的基本方法，以及大數(shù)據(jù)可視化等相關(guān)知識。本課程旨在通過理論教學(xué)，使學(xué)生掌握大數(shù)據(jù)相關(guān)的基本知識、原理和關(guān)鍵技術(shù)等，具備運用大數(shù)據(jù)技術(shù)基本原理進行初級實踐的基本能力，了解大數(shù)據(jù)處理架構(gòu)Hadoop、分布式文件系統(tǒng)HDFS、分布式數(shù)據(jù)庫HBase、NoSQL數(shù)據(jù)庫、云數(shù)據(jù)庫、MapReduce、數(shù)據(jù)倉庫Hive、Spark、流計算、Flink、圖計算以及大數(shù)據(jù)在互聯(lián)網(wǎng)和其他行業(yè)的應(yīng)用，為學(xué)生形成大數(shù)據(jù)知識體系及其應(yīng)用領(lǐng)域的輪廓性認(rèn)識提供了方向引導(dǎo)。教學(xué)目標(biāo)通過本課程，學(xué)生將掌握大數(shù)據(jù)技術(shù)的基本概念、大數(shù)據(jù)存儲、處理與分析關(guān)鍵技術(shù)的基本原理等相關(guān)理論知識，了解大數(shù)據(jù)基本架構(gòu)及大數(shù)據(jù)技術(shù)在不同領(lǐng)域的應(yīng)用場景，培養(yǎng)學(xué)生的創(chuàng)新意識和實踐能力。課程目標(biāo)1：培養(yǎng)學(xué)生認(rèn)真嚴(yán)謹(jǐn)?shù)难芯繎B(tài)度，掌握大數(shù)據(jù)技術(shù)的基本理論和相關(guān)技術(shù)，拓寬對大數(shù)據(jù)技術(shù)的認(rèn)識和理解。課程目標(biāo)2：熟練運用大數(shù)據(jù)中Hadoop平臺、分布式文件系統(tǒng)HDFS、分布式數(shù)據(jù)庫HBase等系統(tǒng)的基本知識和使用方法。課程目標(biāo)3：學(xué)生了解關(guān)鍵技術(shù)的基本原理和實現(xiàn)過程，通過課程的理論和實踐教學(xué)，能夠掌握大數(shù)據(jù)技術(shù)的基本操作；課程目標(biāo)4：經(jīng)過對大數(shù)據(jù)領(lǐng)域的探索，培養(yǎng)學(xué)生具有大數(shù)據(jù)思維，學(xué)會用大數(shù)據(jù)思維認(rèn)識、分析和解決問題的能力。三、課程目標(biāo)對畢業(yè)要求的支撐關(guān)系畢業(yè)要求指標(biāo)點課程目標(biāo)權(quán)重1-1：掌握人文社科基礎(chǔ)：了解自然科學(xué)、社會科學(xué)、人文科學(xué)等基礎(chǔ)知識；1-2：培養(yǎng)職業(yè)與道德修養(yǎng)：具備較強的法律意識，高度的社會責(zé)任感，良好的職業(yè)道德、團隊合作和社會適應(yīng)能力；1-3：提升專業(yè)素質(zhì)：具有較強的系統(tǒng)思維和專業(yè)意識，信息系統(tǒng)頂層設(shè)計、開發(fā)的能力。課程目標(biāo)10.32-1：掌握專業(yè)基礎(chǔ)理論：具備良好的數(shù)理基礎(chǔ)，掌握管理學(xué)、信息管理與信息系統(tǒng)的基本理論和知識；2-2：培養(yǎng)數(shù)據(jù)挖掘與管理能力：具備統(tǒng)計分析、數(shù)據(jù)挖掘、信息可視化等基本的信息分析與數(shù)據(jù)管理能力.課程目標(biāo)20.33-1：掌握學(xué)科前沿：了解本專業(yè)的前沿問題及相關(guān)領(lǐng)域發(fā)展動態(tài)。課程目標(biāo)30.14-1：培養(yǎng)自主學(xué)習(xí)能力：具備以國際化的視野獨立自主地獲取和更新本專業(yè)相關(guān)知識的學(xué)習(xí)能力；4-2：培養(yǎng)管理實踐能力：具備綜合應(yīng)用知識解決不同信息系統(tǒng)以及社會信息管理實際問題的能力；4-3：提升思想政治素質(zhì)：具備良好的思想政治素質(zhì)和正確的人生觀、價值觀。課程目標(biāo)40.3四、教學(xué)方式與方法教學(xué)方式：上機實踐為主，分組完成項目。教學(xué)方法：注重學(xué)生通過處理實際問題的數(shù)據(jù)，運用理論課上所講的方法和技巧，借助軟件進行實踐，以提高自己的研究能力。五、教學(xué)重點與難點（一）教學(xué)重點大數(shù)據(jù)的基礎(chǔ)理論、大數(shù)據(jù)存儲技術(shù)的基本原理和使用方法、大數(shù)據(jù)處理與分析技術(shù)的基本原理和編程方法、以及在各個領(lǐng)域內(nèi)的典型應(yīng)用場景。（二）教學(xué)難點如何將大數(shù)據(jù)技術(shù)相關(guān)原理應(yīng)用到實際案例并進行實際編程操作，能夠?qū)崿F(xiàn)常見語言的編寫，數(shù)據(jù)處理，數(shù)據(jù)分析等多項過程。六、實驗內(nèi)容、基本要求與學(xué)時分配序號實驗項目名稱實驗內(nèi)容與要求學(xué)時類型對應(yīng)課程目標(biāo)1Hadoop，spark等軟件熟悉Hadoop是基于Java開發(fā)的，需要運行在JVM中，因此，需要為Hadoop配置相應(yīng)的Java環(huán)境。Hadoop包含三種安裝模式，即單機模式、偽分布式模式和分布式模式。三種不同模式的安裝配置方法。8驗證性課程目標(biāo)1課程目標(biāo)2課程目標(biāo)32基于地震數(shù)據(jù)的Spark數(shù)據(jù)處理與分析本案例針對全球重大地震數(shù)據(jù)進行分析，采用Python為編程語言，采用Hadoop存儲數(shù)據(jù)，采用Spark對數(shù)據(jù)進行處理分析，并對結(jié)果進行數(shù)據(jù)可視化。8設(shè)計性課程目標(biāo)1課程目標(biāo)2課程目標(biāo)33網(wǎng)站用戶購物行為數(shù)據(jù)集大數(shù)據(jù)分析網(wǎng)站用戶購物行為數(shù)據(jù)集包括2000萬條記錄。本地數(shù)據(jù)集上傳到數(shù)據(jù)倉庫Hive，Hive數(shù)據(jù)分析，Hive、MySQL、HBase數(shù)據(jù)互導(dǎo)，利用Python進行可視化分析10設(shè)計性課程目標(biāo)1課程目標(biāo)2課程目標(biāo)34Spark淘寶雙11數(shù)據(jù)分析與預(yù)測本案例采用3000萬條用戶購物數(shù)據(jù)集，涉及數(shù)據(jù)預(yù)處理、存儲、查詢和可視化分析等數(shù)據(jù)處理全流程所涉及的各種典型操作，涵蓋Linux、MySQL、Hadoop、Hive、Sqoop、Eclipse、ECharts、Spark等系統(tǒng)和軟件的安裝和使用方法。8設(shè)計性課程目標(biāo)1課程目標(biāo)2課程目標(biāo)3合計34注：實驗要求包括必修、選修；實驗類型包括“驗證性”、“設(shè)計性”、“……”等。七、學(xué)業(yè)評價和課程考核（一）考核類型：考試t考查（二）考核方式：t實驗報告實驗作品其它：（填寫具體考核方式）（三）成績評定：考核依據(jù)建議分值（百分比）考核/評價細(xì)則對應(yīng)課程目標(biāo)過程考核50出勤20考勤情況，課堂表現(xiàn)、學(xué)習(xí)態(tài)度等課程目標(biāo)1作業(yè)130課程目標(biāo)1作業(yè)230課程目標(biāo)2作業(yè)320課程目標(biāo)3期末考核50課程目標(biāo)1課程目標(biāo)2課程目標(biāo)3……八、課程目標(biāo)達成評價課程目