(2018年新版-大數(shù)據(jù)技術(shù)原理和應(yīng)用)廈門大學(xué)本科課程教學(xué)大綱

./XX大學(xué)本科課程教學(xué)大綱課程名稱大數(shù)據(jù)技術(shù)原理與應(yīng)用課程代碼英文類別代號(hào)CSCI授課對(duì)象計(jì)算機(jī)、軟件工程等信息相關(guān)專業(yè)適用年級(jí)本科生大三或大四課程類型通識(shí)教育課程課程課型總學(xué)分總學(xué)時(shí)授課討論實(shí)驗(yàn)/上機(jī)實(shí)踐其他232320000先修課程編程語(yǔ)言一、課程簡(jiǎn)介大數(shù)據(jù)技術(shù)入門課程,為學(xué)生搭建起通向"大數(shù)據(jù)知識(shí)空間"的橋梁和紐帶,以"構(gòu)建知識(shí)體系、闡明基本原理、引導(dǎo)初級(jí)實(shí)踐、了解相關(guān)應(yīng)用"為原則,為學(xué)生在大數(shù)據(jù)領(lǐng)域"深耕細(xì)作"奠定基礎(chǔ)、指明方向。課程將系統(tǒng)講授大數(shù)據(jù)的基本概念、大數(shù)據(jù)處理架構(gòu)Hadoop、分布式文件系統(tǒng)HDFS、分布式數(shù)據(jù)庫(kù)HBase、NoSQL數(shù)據(jù)庫(kù)、云數(shù)據(jù)庫(kù)、分布式并行編程模型MapReduce、基于內(nèi)存的大數(shù)據(jù)處理架構(gòu)Spark、大數(shù)據(jù)在互聯(lián)網(wǎng)、生物醫(yī)學(xué)和物流等各個(gè)領(lǐng)域的應(yīng)用。在Hadoop、HDFS、HBase、MapReduce、Spark等重要章節(jié),安排了入門級(jí)的實(shí)踐操作,讓學(xué)生更好地學(xué)習(xí)和掌握大數(shù)據(jù)關(guān)鍵技術(shù)。二、培養(yǎng)目標(biāo)能夠建立對(duì)大數(shù)據(jù)知識(shí)體系的輪廓性認(rèn)識(shí),了解大數(shù)據(jù)發(fā)展歷程、基本概念、主要影響、應(yīng)用領(lǐng)域、關(guān)鍵技術(shù)、計(jì)算模式和產(chǎn)業(yè)發(fā)展,并了解云計(jì)算、物聯(lián)網(wǎng)的概念及其與大數(shù)據(jù)之間的緊密關(guān)系；能夠了解Hadoop的發(fā)展歷史、重要特性和應(yīng)用現(xiàn)狀,Hadoop項(xiàng)目結(jié)構(gòu)及其各個(gè)組件,并熟練掌握Hadoop平臺(tái)的安裝和使用方法；能夠了解分布式文件系統(tǒng)的基本概念、結(jié)構(gòu)和設(shè)計(jì)需求,掌握Hadoop分布式文件系統(tǒng)HDFS的重要概念、體系結(jié)構(gòu)、存儲(chǔ)原理和讀寫過(guò)程,并熟練掌握分布式文件系統(tǒng)HDFS的使用方法；能夠了解分布式數(shù)據(jù)庫(kù)HBase的訪問(wèn)接口、數(shù)據(jù)模型、實(shí)現(xiàn)原理和運(yùn)行機(jī)制,并熟練掌握HBase的使用方法；能夠了解NoSQL數(shù)據(jù)庫(kù)與傳統(tǒng)的關(guān)系數(shù)據(jù)庫(kù)的差異、NoSQL數(shù)據(jù)庫(kù)的四大類型以及NoSQL數(shù)據(jù)庫(kù)的三大基石；基本掌握Redis、MongoDB等NoSQL數(shù)據(jù)庫(kù)的使用方法；能夠了解云數(shù)據(jù)庫(kù)的概念、基本原理和代表性產(chǎn)品的使用方法；能夠熟練掌握分布式編程框架MapReduce的基本原理和編程方法；能夠了解大數(shù)據(jù)處理架構(gòu)Spark的基本原理和編程方法；能夠了解大數(shù)據(jù)在互聯(lián)網(wǎng)等領(lǐng)域的典型應(yīng)用。三、教學(xué)方法本課程采用理論授課與學(xué)生課后上機(jī)實(shí)踐相結(jié)合,幫助學(xué)生更好消化吸收課程知識(shí)。積極踐行O2O教學(xué)理念,努力提升教學(xué)水平,在大數(shù)據(jù)課程教學(xué)方面積極開(kāi)拓創(chuàng)新,實(shí)現(xiàn)線下教學(xué)和線上服務(wù)的巧妙結(jié)合。課程主講教師建設(shè)了國(guó)內(nèi)高校首個(gè)大數(shù)據(jù)課程公共服務(wù)平臺(tái),提供講義PPT、課程習(xí)題、學(xué)習(xí)指南、授課視頻、技術(shù)資料等全方位、一站式免費(fèi)服務(wù),幫助學(xué)生更好學(xué)習(xí)大數(shù)據(jù)課程。四、主要內(nèi)容及學(xué)時(shí)安排章〔或節(jié)主要內(nèi)容學(xué)時(shí)安排1介紹大數(shù)據(jù)的基本概念和應(yīng)用領(lǐng)域,并闡述大數(shù)據(jù)、云計(jì)算和物聯(lián)網(wǎng)的相互關(guān)系22介紹大數(shù)據(jù)處理架構(gòu)Hadoop43分布式文件系統(tǒng)HDFS的基本原理和使用方法44分布式數(shù)據(jù)庫(kù)HBase的基本原理和使用方法45NoSQL數(shù)據(jù)庫(kù)的概念和基本原理46云數(shù)據(jù)庫(kù)的概念和基本原理27分布式并行編程模型MapReduce原理和使用方法48Hadoop架構(gòu)再探討29Spark原理與基礎(chǔ)編程410大數(shù)據(jù)在互聯(lián)網(wǎng)領(lǐng)域的典型應(yīng)用：推薦系統(tǒng)2合計(jì)32五、考核方式與要求〔1平時(shí)成績(jī)：學(xué)生完成上機(jī)練習(xí)題目,并提交上機(jī)實(shí)驗(yàn)報(bào)告,實(shí)驗(yàn)報(bào)告成績(jī)作為平時(shí)成績(jī)；〔2期末考試：采用筆試,閉卷；〔3最終成績(jī)：平時(shí)成績(jī)和期末考試成績(jī)按5:5比例加權(quán)求和。六、選用教材《大數(shù)據(jù)技術(shù)原理與應(yīng)用——概念、存儲(chǔ)、處理、分析與應(yīng)用》林子雨編著,人民郵電出版社,2015年8月,第1版七、參考書(shū)目與文獻(xiàn)[1]陸嘉恒.Hadoop實(shí)戰(zhàn).機(jī)械工業(yè)出版社.2011年.[2]曾大聃,周傲英<譯>.Hadoop權(quán)威指南中文版.清華大學(xué)出版社.2010年.[3]迪米達(dá)克<NickDimiduk>,卡拉納<AmandeepKhurana>,謝磊.HBase實(shí)戰(zhàn)中文版.人民郵電出版社;第1版<2013年9月1日>八、課程網(wǎng)站等支持條件課程主講教師建設(shè)了國(guó)內(nèi)高校首個(gè)大數(shù)據(jù)課程公共服務(wù)平臺(tái),提供講義PPT、課程習(xí)題、學(xué)習(xí)指南、授課視頻、技術(shù)資料等全方位、一站式免費(fèi)服務(wù),幫助學(xué)生更好學(xué)習(xí)大數(shù)據(jù)課程,網(wǎng)站地址：九、其它信息大綱制定者：林子雨大綱審定者：大綱制定時(shí)間：2016年11月XMUUndergraduateCourseSyllabusCoursenamePrinciplesandApplicationsofBigdataTechnologyCoursecodeCategorycodeCSCIProgrammeComputerScience,SoftwareEngineering.etcSemesterSemester2,Year3Coursetype□BasicCommonCourses■GeneralEducationCourses□DisciplinaryGeneralCourses□SpecializedCourses□OtherTeachingProcessesCoursefocus■Lecture□Experiment□Skill-training□PracticalCreditTotallearninghoursLectureTutorialExperimentPracticalOthers232320000PrerequisitesProgrammingLanguage;1.CoursedescriptionAnintroductorycourseforbigdata.KnowledgediscussedinthiscourseincludeHadoop,HDFS,HBase,NoSQL,clouddatabase,MapReduce,Spark,ansoon.2.LearninggoalsTohelpstudentstoknowaboutthebasicknowledgemapaboutbigdata;TostudytheecosystemofHadoopandtheinstallationandusageofHadoop;Tostudythewell-knowndistributedfilesystem,i.e.HDFS,includingthearchitecture,storagetheory,read-and-writeprocess,programmingmethods,andsoon;Tostudythedistributeddatabasesystemi.e.HBbase,includingtheAPI,datamodel,implementationtheory,andsoon;TostudyNoSQL,includingthedifferencebetweenSQLandNoSQL,CAPtheory,BASEtheory,NewSQL,andsoon;Tostudythebasicconceptandtheoryofclouddatabases,anddiscussseveralexamplesofclouddatabases;Tostudythedistributedparallelprogrammingmodel,i.e.,MapReduce,includingtheshuffleprocessandprogrammingpractice;Tostudythemain-memory-basedcomputingarchitecture,i.e.,Spark,includingtheperformancecomparisonbetweenSparkandHadoop,theoryofRDD,programmingmethod,andsoon;Tostudytheapplicationsofbigdatainvariousfields.3.Teachingapproaches<1>Thecoursemainlytakestheformoflecture,andalsothestudentsarerequiredtoprogramontheirowncomputertobettercomprehendtheknowledgeofbigdata.<2>Largeamountofonlinecourseresourcesarealsoprovidedtostudents,includingcoursevideo,technicalliterature,ppt,programmingguide,andsoon.4.ContentoutlineofthecourseChapter<Section>ContentLearninghours1Thebasicconceptofbidata;therelationshipbetweenbigdata,cloudcomputingandtheInternetofThings.22ThearchitectureandecosystemofHadoop43ThebasicprinciplesandprogrammingmethodofHDFS44ThebasicprinciplesandprogrammingmethodofHBase45TheconceptandprincipleofNoSQL46Theconceptandprincipleofclouddatabase27Thedistributedparallelprogrammingmodel,namelyMapReduce48TodiscussmoreaboutHadoop29ThebasicprincipleandprogrammingmethodofSpark410TheapplicationofbigdataintheInternetfield,namelyrecommendingsystem.2Total325.AssessmentmethodsandrequirementsThecourseinvolveshomeworkandclosed-bookexamination.Thefinalscoreincludestwoparts,i.e.,homework<50%>andfinalexamination<50%>.6.TextbooksZiyuLin.PrinciplesandApplicationsofBigDataTechnology-BigDataConception<Thefirstedition>,Storage,Processing,AnalysisandApplication.ThePOSTS&TELECOMPRESS,Aug,2015.7.ReferencesTomWhite.Hadoop:TheDefinitiveGuide<3rdedition>.TheO’REILLYPRESS,May2012.8.Website9.OthersFilledoutby:ZiyuLinApprovedby:Date:Nov,2016XX大學(xué)本科課程大綱填寫說(shuō)明<Notes>須同時(shí)填寫課程大綱中文版和英文版。課程名稱必須準(zhǔn)確、規(guī)范。課程代碼：非任課教師填寫。該課程在教務(wù)系統(tǒng)生成后,由學(xué)院代為填寫。授課對(duì)象填寫專業(yè)。適用年級(jí)填寫可修讀本課程的時(shí)間,如本科三年級(jí)第一學(xué)期。課程類型指公共基本課程、通識(shí)教育課程、學(xué)科通修課程、專業(yè)〔或?qū)I(yè)方向課程、其他教學(xué)環(huán)節(jié)。課程課型指理論課、實(shí)驗(yàn)課、技能課、實(shí)踐課?？倢W(xué)時(shí)=授課學(xué)時(shí)+討論學(xué)時(shí)+實(shí)驗(yàn)學(xué)時(shí)+上機(jī)學(xué)時(shí)+其他學(xué)時(shí)先修課程是與該課程具有嚴(yán)格的前后邏輯關(guān)系,非先修課程則無(wú)法學(xué)習(xí)該課程。10.培養(yǎng)目標(biāo)不少于150字。11.考核方式包括成績(jī)登記方式、成績(jī)組成、考核標(biāo)準(zhǔn)等。成績(jī)登記方式包括百分制、通過(guò)/不通過(guò)等。成績(jī)組成指各種考核方式占比?？己藰?biāo)準(zhǔn)指衡量各項(xiàng)考評(píng)指標(biāo)得分的基準(zhǔn)。12.選用教材和主要參考書(shū)要求注明作者、書(shū)目、出版社、出版年份。例如,"丹利維爾：《民主、官僚制組織和公共選擇》,中國(guó)青年出版社,2001年。"13.其它信息指課堂規(guī)范要求等,如課上禁止使用手機(jī)、缺勤要求等。14.課程英文類別代號(hào):英文類別代號(hào)代號(hào)英文說(shuō)明代號(hào)中文說(shuō)明ANTH:Anthropology人類學(xué)類課程；ARCH:Architecture建筑類課程；ARTS:Arts藝術(shù)類；AUTO:Automation自動(dòng)化類課程；BIOL:Biology生物科學(xué)類課程；BUSI:BusinessAdministration工商管理類課程；CHEE:ChemicalEngineering化工類課程；CHEM:Chemistry化學(xué)類課程；CHIN:Chinese中國(guó)語(yǔ)言文學(xué)類課程；CIVL:CivilEngineering土建類課程；CSCI:ComputerScience計(jì)算機(jī)科學(xué)類課程；ECON:Economics經(jīng)濟(jì)學(xué)類課程；EENG:ElectronicEngineering電子工程類課程；ELIN:ElectricalInformation電氣信息類課程；ELIS:ElectronicInformationScience電子信息科學(xué)類課程；ENGL:English英國(guó)語(yǔ)言文學(xué)類課程；ENVS:EnvironmentalScience環(huán)境科學(xué)類課程；FREN:French法國(guó)語(yǔ)言文學(xué)類課程；GERM:German德國(guó)語(yǔ)言文學(xué)類課程；HIST:History歷史學(xué)類課程；JAPA:Japanese日本語(yǔ)言文學(xué)類課程；JOUR:Journalism新聞傳播類課程；LAWS:Laws法學(xué)類課程；MATH:Mathematics數(shù)學(xué)類課程；MATL:Material材料類課程；MECH:Machinery機(jī)械類課程；MECM:Clin