《大數(shù)據(jù)存儲(chǔ)技術(shù)與應(yīng)用》 課件 項(xiàng)目七-任務(wù)二 高校大數(shù)據(jù)決策分析系統(tǒng)項(xiàng)目實(shí)戰(zhàn)

《大數(shù)據(jù)存儲(chǔ)技術(shù)與應(yīng)用》大數(shù)據(jù)存儲(chǔ)技術(shù)與應(yīng)用項(xiàng)目七高校大數(shù)據(jù)決策分析系統(tǒng)任務(wù)二項(xiàng)目實(shí)戰(zhàn)高校大數(shù)據(jù)決策分析系統(tǒng)數(shù)據(jù)存儲(chǔ)？Greenplum基于什么語言實(shí)現(xiàn)？高校大數(shù)據(jù)決策分析系統(tǒng)的背景？高校大數(shù)據(jù)決策分析系統(tǒng)的業(yè)務(wù)功能？回顧任務(wù)引入-智慧校園總體框架2010年，在信息化“十二五”規(guī)劃中，浙江大學(xué)提出建設(shè)一個(gè)“令人激動(dòng)”的“智慧校園”。這幅藍(lán)圖描繪的是：無處不在的網(wǎng)絡(luò)學(xué)習(xí)、融合創(chuàng)新的網(wǎng)絡(luò)科研、透明高效的校務(wù)治理、豐富多彩的校園文化、方便周到的校園生活。簡而言之，“要做一個(gè)安全、穩(wěn)定、環(huán)保、節(jié)能的校園?！?018年6月7日，國家標(biāo)準(zhǔn)《智慧校園總體框架》（Smartcampusoverallframework）發(fā)布。任務(wù)描述:本任務(wù)對(duì)主要的技術(shù)要點(diǎn)進(jìn)行了剖析，大家可以根據(jù)實(shí)際情況進(jìn)行拓展。任務(wù)教學(xué)目標(biāo)：1.了解大數(shù)據(jù)分析應(yīng)用項(xiàng)目開發(fā)流程。2.熟悉大數(shù)據(jù)分析應(yīng)用開發(fā)。任務(wù)概要教學(xué)內(nèi)容項(xiàng)目準(zhǔn)備應(yīng)用需求一二分析計(jì)算數(shù)據(jù)可視化應(yīng)用三四項(xiàng)目準(zhǔn)備知識(shí)點(diǎn)一數(shù)據(jù)模型字段名字段類型是否允許空字段描述SNOCHAR(10)否學(xué)號(hào)T1CHAR(10)是第1題原始成績T2CHAR(10)是第2題原始成績T3CHAR(10)是第3題原始成績T4CHAR(10)是第4題原始成績T5CHAR(10)是第5題原始成績數(shù)據(jù)連接pip3installpsycopg2importpsycopg2#數(shù)據(jù)庫連接參數(shù)，數(shù)據(jù)庫名稱、用戶密碼、IP地址和端口根據(jù)實(shí)際環(huán)境配置。conn=psycopg2.connect(database="bigdata",user="postgres",password="postgres",host="127.0.0.1",port="5432")conn.close()數(shù)據(jù)導(dǎo)入數(shù)據(jù)清洗應(yīng)用需求知識(shí)點(diǎn)二應(yīng)用需求（一）課程成績分布分析計(jì)算《計(jì)算機(jī)網(wǎng)絡(luò)》課程成績?nèi)藬?shù)分布，即分析計(jì)算“60分以下、60~69、70~79、80~89、90~100”各組總成績的人數(shù)分布。通過成績?nèi)藬?shù)分布了解學(xué)生對(duì)該門課程的掌握情況。（二）成績分析分析計(jì)算《計(jì)算機(jī)網(wǎng)絡(luò)》選擇題、填空題、判斷題、簡答題、應(yīng)用題的平均成績、最高成績、最低成績。分析計(jì)算知識(shí)點(diǎn)三分析計(jì)算數(shù)據(jù)可視化應(yīng)用知識(shí)點(diǎn)四數(shù)據(jù)可視化應(yīng)用任務(wù)小結(jié)本節(jié)介紹了高校大數(shù)據(jù)決策分析系統(tǒng)的項(xiàng)目實(shí)戰(zhàn)，系統(tǒng)開發(fā)可以基于PostgreSQL、Python、ApacheECharts展開。項(xiàng)目準(zhǔn)備階段對(duì)成績數(shù)據(jù)建模、數(shù)據(jù)連接、數(shù)據(jù)導(dǎo)入、數(shù)據(jù)分析檢索進(jìn)行了講解。應(yīng)用需求部分針對(duì)課程成績分析、選擇題成績分析進(jìn)行了講解。分析計(jì)算部分講解了關(guān)鍵分析指標(biāo)的計(jì)算方式，并以選擇題成績分析為例進(jìn)行分析計(jì)算，最后，以pyecharts組件實(shí)現(xiàn)數(shù)據(jù)可視化分析應(yīng)用。擴(kuò)展訓(xùn)練信息標(biāo)準(zhǔn)獨(dú)立學(xué)習(xí)數(shù)據(jù)模型遵循教育部頒發(fā)的《教育管理信息化標(biāo)準(zhǔn)》和相關(guān)行業(yè)信息標(biāo)準(zhǔn)，制定符合學(xué)校實(shí)際情況的校數(shù)據(jù)字典和信息編碼標(biāo)準(zhǔn)，建立統(tǒng)一的數(shù)據(jù)交換體系，規(guī)范信息從采集、處理、計(jì)算、加載到綜合利用的全過程，實(shí)現(xiàn)全校資源數(shù)據(jù)的有效存儲(chǔ)與管理，完成全校范圍的數(shù)據(jù)的統(tǒng)一、集中和共享，為學(xué)校領(lǐng)