Chapter0-廈門大學(xué)-林子雨-大數(shù)據(jù)技術(shù)原理與應(yīng)用（第3版）-課程介紹（2020年12月版本）

1、廈門大學(xué)計(jì)算機(jī)科學(xué)系 2020年12月版本課程介紹（PPT版本號：2020年12月版本） 大數(shù)據(jù)技術(shù)原理與應(yīng)用（第3版）/post/bigdata3溫馨提示：編輯幻燈片母版，可以修改每頁P(yáng)PT的廈大?；蘸偷撞课淖至肿佑?博士/副教授廈門大學(xué)計(jì)算機(jī)科學(xué)系E-mail: ziyulin主頁：/post/linziyu本章配套教學(xué)視頻/course/XMU-1002335004大數(shù)據(jù)技術(shù)原理與應(yīng)用（第3版）在線視頻觀看地址提綱1.課程特色2.教材介紹3.內(nèi)容提要4.教學(xué)大綱5.配套資源6.班級介紹附錄A：主講教師林子雨簡介附錄B：大數(shù)據(jù)技術(shù)原理與應(yīng)用教材附錄C：高校大數(shù)據(jù)課程公共服務(wù)平臺歡迎訪問大數(shù)

2、據(jù)技術(shù)原理與應(yīng)用（第3版）教材官方網(wǎng)站：/post/bigdata3本PPT是如下教材的配套講義：大數(shù)據(jù)技術(shù)原理與應(yīng)用概念、存儲(chǔ)、處理、分析與應(yīng)用 （2020年9月第3版）廈門大學(xué) 林子雨 編著，人民郵電出版社主講教師主講教師：廈門大學(xué) 林子雨 博士/副教授中國高校首個(gè)“數(shù)字教師”提出者和建設(shè)者2009年7月從事教師職業(yè)以來累計(jì)免費(fèi)網(wǎng)絡(luò)發(fā)布超過1000萬字高價(jià)值教學(xué)和科研資料網(wǎng)絡(luò)瀏覽量超過1000萬次2017年度廈門大學(xué)獎(jiǎng)教金獲得者2020年度廈門大學(xué)獎(jiǎng)教金獲得者課程特色搭建起通向“大數(shù)據(jù)知識空間”的橋梁和紐帶構(gòu)建知識體系、闡明基本原理引導(dǎo)初級實(shí)踐、了解相關(guān)應(yīng)用為學(xué)生在大數(shù)據(jù)領(lǐng)域“深耕細(xì)作”奠

3、定基礎(chǔ)、指明方向教材介紹大數(shù)據(jù)技術(shù)原理與應(yīng)用大數(shù)據(jù)概念、存儲(chǔ)、處理、分析與應(yīng)用 廈門大學(xué) 林子雨編著 人民郵電出版社 2021年1月第3版 ISBN:978-7-115-54405-6 定價(jià)：59.8元國內(nèi)高校第一本系統(tǒng)介紹大數(shù)據(jù)知識專業(yè)教材京東、當(dāng)當(dāng)?shù)雀鞔缶W(wǎng)店暢銷書籍致力于打造成為大數(shù)據(jù)入門教材精品工信部“全國云計(jì)算與大數(shù)據(jù)應(yīng)用技術(shù)人才考試、認(rèn)證項(xiàng)目”目前唯一指定大數(shù)據(jù)教材國內(nèi)多所高校采用本教材開課配套目前國內(nèi)高校最完備的課程公共服務(wù)平臺2021年1月第3版掃一掃訪問教材官網(wǎng)教材配套實(shí)驗(yàn)手冊本書是與大數(shù)據(jù)技術(shù)原理與應(yīng)用（第3版）教材配套的唯一指定實(shí)驗(yàn)指導(dǎo)書步步引導(dǎo)，循序漸進(jìn)，詳盡的安裝指南為

4、順利搭建大數(shù)據(jù)實(shí)驗(yàn)環(huán)境鋪平道路深入淺出，去粗取精，豐富的代碼實(shí)例幫助快速掌握大數(shù)據(jù)基礎(chǔ)編程方法精心設(shè)計(jì)，巧妙融合，八套大數(shù)據(jù)實(shí)驗(yàn)題目促進(jìn)理論與編程知識的消化和吸收結(jié)合理論，聯(lián)系實(shí)際，大數(shù)據(jù)課程綜合實(shí)驗(yàn)案例精彩呈現(xiàn)大數(shù)據(jù)分析全流程林子雨編著大數(shù)據(jù)基礎(chǔ)編程、實(shí)驗(yàn)和案例教程（第2版）清華大學(xué)出版社 ISBN:978-7-302-55977-1 定價(jià)：69元，2020年10月第2版教材官網(wǎng)： /post/bigdatapractice2/掃一掃訪問教材官網(wǎng)內(nèi)容提要本課程系統(tǒng)介紹了大數(shù)據(jù)相關(guān)知識系統(tǒng)地論述了大數(shù)據(jù)的基本概念、大數(shù)據(jù)處理架構(gòu)Hadoop、分布式文件系統(tǒng)HDFS、分布式數(shù)據(jù)庫HBase、No

5、SQL數(shù)據(jù)庫、云數(shù)據(jù)庫、分布式并行編程模型MapReduce、數(shù)據(jù)倉庫Hive、基于內(nèi)存的分布式計(jì)算框架Spark、流計(jì)算、流處理框架Flink、圖計(jì)算以及大數(shù)據(jù)在互聯(lián)網(wǎng)、生物醫(yī)學(xué)和物流等各個(gè)領(lǐng)域的應(yīng)用在Hadoop、HDFS、HBase、MapReduce、Hive、Spark和Flink等重要章節(jié)，安排了入門級的實(shí)踐操作，讓學(xué)生更好地學(xué)習(xí)和掌握大數(shù)據(jù)關(guān)鍵技術(shù)教學(xué)大綱章 節(jié)主要內(nèi)容學(xué)時(shí)安排第1章 大數(shù)據(jù)概述介紹大數(shù)據(jù)的基本概念和應(yīng)用領(lǐng)域，并闡述大數(shù)據(jù)、云計(jì)算和物聯(lián)網(wǎng)的相互關(guān)系2第2章 大數(shù)據(jù)處理架構(gòu)Hadoop介紹大數(shù)據(jù)處理架構(gòu)Hadoop4第3章 分布式文件系統(tǒng)HDFS分布式文件系統(tǒng)HDF

6、S的基本原理和使用方法4第4章 分布式數(shù)據(jù)庫HBase分布式數(shù)據(jù)庫HBase的基本原理和使用方法4第5章 NoSQL數(shù)據(jù)庫NoSQL數(shù)據(jù)庫的概念和基本原理2第6章 云數(shù)據(jù)庫云數(shù)據(jù)庫的概念和基本原理2第7章 MapReduce分布式并行編程模型MapReduce原理和使用方法4第8章 Hadoop架構(gòu)再探討Hadoop技術(shù)的發(fā)展演變過程、YARN、HDFS Federation自學(xué)第9章 數(shù)據(jù)倉庫Hive數(shù)據(jù)倉庫Hive的概念、原理和安裝使用方法2第10章 SparkSpark原理與基礎(chǔ)編程4第11章 流計(jì)算流計(jì)算概念和原理、Storm2第12章 Flink流處理框架Flink的應(yīng)用場景、體系架

7、構(gòu)和編程模型2第13章 圖計(jì)算圖計(jì)算概念和原理、Pregel自學(xué)第14章 數(shù)據(jù)可視化數(shù)據(jù)可視化概念、代表性技術(shù)和軟件自學(xué)第15、16和17章 大數(shù)據(jù)在不同領(lǐng)域的應(yīng)用大數(shù)據(jù)在互聯(lián)網(wǎng)領(lǐng)域的典型應(yīng)用：推薦系統(tǒng)，以及在其他領(lǐng)域的典型應(yīng)用自學(xué)合計(jì)32教材官網(wǎng)教材官網(wǎng)：/post/bigdata3/提供以下教材配套內(nèi)容：講義PPT授課視頻教材配套大數(shù)據(jù)軟件安裝和編程實(shí)踐指南實(shí)驗(yàn)指南和答案習(xí)題（選擇題）和答案高校大數(shù)據(jù)課程公共服務(wù)平臺掃一掃訪問平臺主頁/post/bigdata-teaching-platform/掃一掃觀看3分鐘FLASH動(dòng)畫宣傳片所有資料全部免費(fèi)共享支持電腦和手機(jī)瀏覽課程配套教學(xué)資源國內(nèi)

8、高校第一個(gè)大數(shù)據(jù)課程公共服務(wù)平臺為教師教學(xué)和學(xué)生學(xué)習(xí)大數(shù)據(jù)課程，提供全方位、一站式服務(wù)平臺所有資源全部通過網(wǎng)絡(luò)免費(fèi)共享（無需注冊）、采用WORD和PPT可編輯格式課程配套教學(xué)資源制作精美的平臺宣傳圖冊/post/xuanchuanpian/附錄A：主講教師林子雨簡介單位：廈門大學(xué)計(jì)算機(jī)科學(xué)系E-mail: ziyulin個(gè)人網(wǎng)頁：/post/linziyu數(shù)據(jù)庫實(shí)驗(yàn)室網(wǎng)站：主講教師：林子雨林子雨，男，1978年出生，博士（畢業(yè)于北京大學(xué)），全國高校知名大數(shù)據(jù)教師，現(xiàn)為廈門大學(xué)計(jì)算機(jī)科學(xué)系副教授，曾任廈門大學(xué)信息科學(xué)與技術(shù)學(xué)院院長助理、晉江市發(fā)展和改革局副局長。中國計(jì)算機(jī)學(xué)會(huì)數(shù)據(jù)庫專業(yè)委員會(huì)委員

9、，中國計(jì)算機(jī)學(xué)會(huì)信息系統(tǒng)專業(yè)委員會(huì)委員。國內(nèi)高校首個(gè)“數(shù)字教師”提出者和建設(shè)者，廈門大學(xué)數(shù)據(jù)庫實(shí)驗(yàn)室負(fù)責(zé)人，廈門大學(xué)云計(jì)算與大數(shù)據(jù)研究中心主要建設(shè)者和骨干成員，2013年度、2017年度和2020年度廈門大學(xué)教學(xué)類獎(jiǎng)教金獲得者，榮獲2019年福建省精品在線開放課程、2018年廈門大學(xué)高等教育成果特等獎(jiǎng)、2018年福建省高等教育教學(xué)成果二等獎(jiǎng)、2018年國家精品在線開放課程。主要研究方向?yàn)閿?shù)據(jù)庫、數(shù)據(jù)倉庫、數(shù)據(jù)挖掘、大數(shù)據(jù)、云計(jì)算和物聯(lián)網(wǎng)，并以第一作者身份在軟件學(xué)報(bào)計(jì)算機(jī)學(xué)報(bào)和計(jì)算機(jī)研究與發(fā)展等國家重點(diǎn)期刊以及國際學(xué)術(shù)會(huì)議上發(fā)表多篇學(xué)術(shù)論文。作為項(xiàng)目負(fù)責(zé)人主持的科研項(xiàng)目包括1項(xiàng)國家自然科學(xué)青年基

10、金項(xiàng)目(No.61303004)、1項(xiàng)福建省自然科學(xué)青年基金項(xiàng)目(No.2013J05099)和1項(xiàng)中央高?；究蒲袠I(yè)務(wù)費(fèi)項(xiàng)目(No.2011121049)，主持的教改課題包括1項(xiàng)2016年福建省教改課題和1項(xiàng)2016年教育部產(chǎn)學(xué)協(xié)作育人項(xiàng)目，同時(shí)，作為課題負(fù)責(zé)人完成了國家發(fā)改委城市信息化重大課題、國家物聯(lián)網(wǎng)重大應(yīng)用示范工程區(qū)域試點(diǎn)泉州市工作方案、2015泉州市互聯(lián)網(wǎng)經(jīng)濟(jì)調(diào)研等課題。中國高校首個(gè)“數(shù)字教師”提出者和建設(shè)者，2009年至今，“數(shù)字教師”大平臺累計(jì)向網(wǎng)絡(luò)免費(fèi)發(fā)布超過1000萬字高價(jià)值的研究和教學(xué)資料，累計(jì)網(wǎng)絡(luò)訪問量超過1000萬次。打造了中國高校大數(shù)據(jù)教學(xué)知名品牌，編著出版了中國高

11、校第一本系統(tǒng)介紹大數(shù)據(jù)知識的專業(yè)教材大數(shù)據(jù)技術(shù)原理與應(yīng)用，并成為京東、當(dāng)當(dāng)網(wǎng)等網(wǎng)店暢銷書籍；建設(shè)了國內(nèi)高校首個(gè)大數(shù)據(jù)課程公共服務(wù)平臺，為教師教學(xué)和學(xué)生學(xué)習(xí)大數(shù)據(jù)課程提供全方位、一站式服務(wù)，年訪問量超過200萬次，累計(jì)訪問量超過1000萬次。掃一掃訪問個(gè)人主頁附錄B：大數(shù)據(jù)學(xué)習(xí)路線圖大數(shù)據(jù)學(xué)習(xí)路線圖訪問地址：/post/10164/附錄C：林子雨大數(shù)據(jù)系列教材了解全部教材信息：/post/bigdatabook/附錄D：大數(shù)據(jù)導(dǎo)論（通識課版）教材本課程旨在實(shí)現(xiàn)以下幾個(gè)培養(yǎng)目標(biāo)：引導(dǎo)學(xué)生步入大數(shù)據(jù)時(shí)代，積極投身大數(shù)據(jù)的變革浪潮之中了解大數(shù)據(jù)概念，培養(yǎng)大數(shù)據(jù)思維，養(yǎng)成數(shù)據(jù)安全意識認(rèn)識大數(shù)據(jù)倫理，努力

12、使自己的行為符合大數(shù)據(jù)倫理規(guī)范要求熟悉大數(shù)據(jù)應(yīng)用，探尋大數(shù)據(jù)與自己專業(yè)的應(yīng)用結(jié)合點(diǎn)激發(fā)學(xué)生基于大數(shù)據(jù)的創(chuàng)新創(chuàng)業(yè)熱情教材官網(wǎng)：/post/bigdataintroduction/開設(shè)全校公共選修課的優(yōu)質(zhì)教材高等教育出版社 ISBN:978-7-04-053577-8 定價(jià)：32元 版次：2020年2月第1版附錄E：大數(shù)據(jù)導(dǎo)論教材林子雨 編著大數(shù)據(jù)導(dǎo)論人民郵電出版社，2020年9月第1版ISBN:978-7-115-54446-9 定價(jià)：49.80元教材官網(wǎng)：/post/bigdata-introduction/掃一掃訪問教材官網(wǎng)開設(shè)大數(shù)據(jù)專業(yè)導(dǎo)論課的優(yōu)質(zhì)教材附錄F：大數(shù)據(jù)技術(shù)原理與應(yīng)用（第3版）

13、教材歡迎訪問大數(shù)據(jù)技術(shù)原理與應(yīng)用概念、存儲(chǔ)、處理、分析與應(yīng)用教材官方網(wǎng)站：/post/bigdata3掃一掃訪問教材官網(wǎng)大數(shù)據(jù)技術(shù)原理與應(yīng)用概念、存儲(chǔ)、處理、分析與應(yīng)用（第3版），由廈門大學(xué)計(jì)算機(jī)科學(xué)系林子雨博士編著，是國內(nèi)高校第一本系統(tǒng)介紹大數(shù)據(jù)知識的專業(yè)教材。人民郵電出版社 ISBN:978-7-115-54405-6 定價(jià)：59.80元全書共有17章，系統(tǒng)地論述了大數(shù)據(jù)的基本概念、大數(shù)據(jù)處理架構(gòu)Hadoop、分布式文件系統(tǒng)HDFS、分布式數(shù)據(jù) 庫HBase、NoSQL數(shù)據(jù)庫、云數(shù)據(jù)庫、分布式并行編程模型MapReduce、Spark、流計(jì)算、Flink、圖計(jì)算、數(shù)據(jù)可視化以及大數(shù)據(jù)在互聯(lián)

14、網(wǎng)、生物醫(yī)學(xué)和物流等各個(gè)領(lǐng)域的應(yīng)用。在Hadoop、HDFS、HBase、MapReduce、Spark和Flink等重要章節(jié)，安排了入門級的實(shí)踐操作，讓讀者更好地學(xué)習(xí)和掌握大數(shù)據(jù)關(guān)鍵技術(shù)。本書可以作為高等院校計(jì)算機(jī)專業(yè)、信息管理等相關(guān)專業(yè)的大數(shù)據(jù)課程教材，也可供相關(guān)技術(shù)人員參考、學(xué)習(xí)、培訓(xùn)之用。附錄G：大數(shù)據(jù)基礎(chǔ)編程、實(shí)驗(yàn)和案例教程（第2版）本書是與大數(shù)據(jù)技術(shù)原理與應(yīng)用（第3版）教材配套的唯一指定實(shí)驗(yàn)指導(dǎo)書步步引導(dǎo)，循序漸進(jìn)，詳盡的安裝指南為順利搭建大數(shù)據(jù)實(shí)驗(yàn)環(huán)境鋪平道路深入淺出，去粗取精，豐富的代碼實(shí)例幫助快速掌握大數(shù)據(jù)基礎(chǔ)編程方法精心設(shè)計(jì)，巧妙融合，八套大數(shù)據(jù)實(shí)驗(yàn)題目促進(jìn)理論與編程知識的

15、消化和吸收結(jié)合理論，聯(lián)系實(shí)際，大數(shù)據(jù)課程綜合實(shí)驗(yàn)案例精彩呈現(xiàn)大數(shù)據(jù)分析全流程林子雨編著大數(shù)據(jù)基礎(chǔ)編程、實(shí)驗(yàn)和案例教程（第2版）清華大學(xué)出版社 ISBN:978-7-302-55977-1 定價(jià)：69元 2020年10月第2版附錄H：Spark編程基礎(chǔ)（Scala版）Spark編程基礎(chǔ)（Scala版）廈門大學(xué) 林子雨，賴永炫，陶繼平 編著披荊斬棘，在大數(shù)據(jù)叢林中開辟學(xué)習(xí)捷徑填溝削坎，為快速學(xué)習(xí)Spark技術(shù)鋪平道路深入淺出，有效降低Spark技術(shù)學(xué)習(xí)門檻資源全面，構(gòu)建全方位一站式在線服務(wù)體系本書以Scala作為開發(fā)Spark應(yīng)用程序的編程語言，系統(tǒng)介紹了Spark編程的基礎(chǔ)知識。全書共8章，內(nèi)容

16、包括大數(shù)據(jù)技術(shù)概述、Scala語言基礎(chǔ)、Spark的設(shè)計(jì)與運(yùn)行原理、Spark環(huán)境搭建和使用方法、RDD編程、Spark SQL、Spark Streaming、Spark MLlib等。本書每個(gè)章節(jié)都安排了入門級的編程實(shí)踐操作，以便讀者更好地學(xué)習(xí)和掌握Spark編程方法。本書官網(wǎng)免費(fèi)提供了全套的在線教學(xué)資源，包括講義PPT、習(xí)題、源代碼、軟件、數(shù)據(jù)集、授課視頻、上機(jī)實(shí)驗(yàn)指南等。人民郵電出版社出版發(fā)行，ISBN:978-7-115-48816-9教材官網(wǎng)：/post/spark/附錄I：Spark編程基礎(chǔ)（Python版）Spark編程基礎(chǔ)（Python版）廈門大學(xué) 林子雨，鄭海山，賴永炫 編

17、著披荊斬棘，在大數(shù)據(jù)叢林中開辟學(xué)習(xí)捷徑填溝削坎，為快速學(xué)習(xí)Spark技術(shù)鋪平道路深入淺出，有效降低Spark技術(shù)學(xué)習(xí)門檻資源全面，構(gòu)建全方位一站式在線服務(wù)體系本書以Python作為開發(fā)Spark應(yīng)用程序的編程語言，系統(tǒng)介紹了Spark編程的基礎(chǔ)知識。全書共8章，內(nèi)容包括大數(shù)據(jù)技術(shù)概述、Spark的設(shè)計(jì)與運(yùn)行原理、Spark環(huán)境搭建和使用方法、RDD編程、Spark SQL、Spark Streaming、Structured Streaming、Spark MLlib等。本書每個(gè)章節(jié)都安排了入門級的編程實(shí)踐操作，以便讀者更好地學(xué)習(xí)和掌握Spark編程方法。本書官網(wǎng)免費(fèi)提供了全套的在線教學(xué)資源，包括講義PPT、習(xí)題、源代碼、軟件、數(shù)據(jù)集、上機(jī)實(shí)驗(yàn)指南等。人民郵電出版社出版發(fā)行，ISBN:978-7-115-52439-3教材官網(wǎng)： /post/spark-python/附錄J：高校大數(shù)據(jù)課程公共服務(wù)平臺掃一掃訪問平臺主頁/post/bigdata-teaching-platform/掃一掃觀看3分鐘FLASH動(dòng)畫宣傳片附錄K：高校大數(shù)據(jù)實(shí)訓(xùn)課程系列案例教材掃一掃訪問大數(shù)據(jù)實(shí)訓(xùn)課