《數(shù)據(jù)清洗》-教學(xué)大綱

1、數(shù)據(jù)清洗課程教學(xué)大綱【課程名稱】數(shù)據(jù)清洗【課程類型】專業(yè)必修課【授課對象】大數(shù)據(jù)技術(shù)專業(yè)、人工智能技術(shù)專業(yè)、云計算技術(shù)與應(yīng)用專業(yè)，二年級學(xué)生【學(xué)時學(xué)分】周學(xué)時 6，共 72 學(xué)時，4 學(xué)分【課程概況】核心課程，它擔(dān)負(fù)著系統(tǒng)、全面地理解大數(shù)據(jù)，提高大數(shù)據(jù)應(yīng)用技能的重任。PythonJAVA 程序設(shè)計數(shù)據(jù)設(shè)計的方法，大數(shù)據(jù)體系結(jié)構(gòu)和網(wǎng)絡(luò)技術(shù)的基本使用方法。【課程目標(biāo)】Kettle并具有較強(qiáng)的分析問題和解決問題的能力【課程內(nèi)容及學(xué)時分布】教學(xué)周教學(xué)周教學(xué)內(nèi)容學(xué)時第一周法。2第一周主要介紹數(shù)據(jù)清洗的評估內(nèi)容以及各種數(shù)據(jù)集。2第一周主要介紹數(shù)據(jù)清洗中數(shù)據(jù)質(zhì)量的特點以及數(shù)據(jù)倉庫的知識。2第二周主要介紹數(shù)據(jù)

2、清洗的統(tǒng)計知識以及數(shù)據(jù)清洗的環(huán)境和工具。2第二周主要介紹使用數(shù)據(jù)清洗的文件格式。2第二周主要介紹數(shù)據(jù)清洗中Kettle 的使用方法。2第三周主要介紹數(shù)據(jù)清洗中Kettle 的使用方法以及對不同格式的文件轉(zhuǎn)換。2第三周第三周主要介紹數(shù)據(jù)抽取原理與 Web 數(shù)據(jù)抽取的技2第五周主要介紹 Kettle 數(shù)據(jù)清洗的步驟和基本方法。2第五周主要介紹 Kettle 數(shù)據(jù)清洗的常見方法和基本操作。2第六周主要介紹 Kettle 數(shù)據(jù)清洗的常見方法和基本操作（日志為主。2第六周主要介紹 Kettle 數(shù)據(jù)清洗的常見方法和基本操作（表達(dá)式和字段為主。2第六周主要介紹 Kettle 數(shù)據(jù)清洗的常見方法和基本操作（

3、空值和數(shù)據(jù)采樣為主。2第七周主要介紹 Kettle 數(shù)據(jù)清洗的常見方法和基本2術(shù)。第三周主要介紹使用Kettle 實現(xiàn)web 數(shù)據(jù)抽取。2第四周主要介紹網(wǎng)絡(luò)爬蟲的原理與工作過程。2第四周主要介紹網(wǎng)絡(luò)爬蟲的python 實現(xiàn)。2第四周主要介紹網(wǎng)絡(luò)爬蟲的python 實現(xiàn)。2第五周主要介紹網(wǎng)絡(luò)爬蟲的python 綜合應(yīng)用。2操作（字符串操作為主。第七周主要介紹數(shù)據(jù)遷移原理和過程。2第七周主要介紹數(shù)據(jù)遷移技術(shù)。2第八周主要介紹數(shù)據(jù)遷移的實現(xiàn)。2第八周主要介紹Kettle 數(shù)據(jù)遷移的應(yīng)用。2第八周主要介紹文本分詞的定義、原理和算法。2第九周第九周主要介紹文本分詞的處理方法。2主要介紹文本分詞的應(yīng)用。第九周2主要介紹Python 數(shù)據(jù)清洗庫的使用。第九周2第十周主要介紹Python 數(shù)據(jù)清洗中numpy 和pandas的使用6周主要介紹pandas 和matplotlib 數(shù)據(jù)清洗4主要介紹 DataCleaner數(shù)據(jù)分析與清洗第十二周2第十二周綜合訓(xùn)練：要求學(xué)生根據(jù)本課程所學(xué)的內(nèi)容進(jìn)行綜合設(shè)計：數(shù)據(jù)清洗數(shù)據(jù)可視化6【課程要求與成績評定】評定項目評定項目要求百分比平時成績課堂表現(xiàn)、出勤、作業(yè)60%期末考試上機(jī)考試40