高校實驗室大數(shù)據(jù)開發(fā)平臺建設方案

高校實驗室大數(shù)據(jù)開發(fā)平臺建設方案目 錄背 景平臺功能職業(yè)教育大數(shù)據(jù)和物聯(lián)網教學解決方案采集監(jiān)控存儲數(shù)據(jù)采集標準化大數(shù)據(jù)分析可視化傳統(tǒng)物聯(lián)網解決方案面臨的挑戰(zhàn)平臺層網絡層設備層業(yè)管理

智能家居

智能交通環(huán)境監(jiān)測應用層 礦業(yè)采掘

工業(yè)制造

職業(yè)教育

城市石油化工

綠色農能源管理大數(shù)據(jù)是行業(yè)數(shù)據(jù)應用深入的必然趨勢物理世界端到端的數(shù)字化集成價值鏈網絡下的橫向集成CPS信息空間工業(yè)4.0核心網絡化制造體系的縱向集成大數(shù)據(jù)是一個龐大的技術體系大數(shù)據(jù)平臺綠色農業(yè)健康醫(yī)療城市管理只能家居智能交通環(huán)境監(jiān)測水利水務工業(yè)制造職業(yè)教育目 錄背 景平臺功能職業(yè)教育組態(tài)展示服務CVS過程數(shù) 結構化據(jù)服務 數(shù)據(jù)服PDS 務STSS開放數(shù)據(jù)存儲服務OTS產品服務構架S列1列2列3……列n帶時間戳的時序數(shù)據(jù)處理

多協(xié)議的接入

網絡高并發(fā)性

實時報警

歷史統(tǒng)計PDS壓縮OSS—

對象存儲服務圖紙圖片文檔圖表音頻壓縮結構化半結構化非結構化對象存儲第三方數(shù)據(jù)接入DTS大數(shù)據(jù)平臺設備過程數(shù)據(jù)接入非結構化文件FTP接入關系數(shù)據(jù)庫ETL接入文本文件半結構化數(shù)據(jù)接入圖像識別非結構化數(shù)據(jù)接入結構數(shù)據(jù)文本結構化數(shù)據(jù)文件接入TSS+DAS—分布式環(huán)境下的大數(shù)據(jù)分析數(shù)據(jù)節(jié)點分布式大數(shù)據(jù)存儲引擎HadoopHDFS/HbaseCPU=2M

EM

=

200在線分布式計算引擎Spark離線分布式計算引擎M

ap/Reduce分布式資源管理&

計算任務調度

YARN數(shù)據(jù)節(jié)點數(shù)據(jù)節(jié)點數(shù)據(jù)節(jié)點數(shù)據(jù)節(jié)點數(shù)據(jù)節(jié)點數(shù)據(jù)節(jié)點CPU=4M

EM

=

400CPU=6M

EM

=

1000CPU=2M

EM

=

200計算分析引擎&工

具R語言深度學習算法框架Caffe實時流數(shù)據(jù)處理引擎Storm實時數(shù)據(jù)流處理統(tǒng)計分析機器學習算法優(yōu)化MATLAB計算分析領域&應

用計算任務開發(fā)的新模式

配置數(shù)學公式實現(xiàn)大數(shù)據(jù)計算可視化服務CVS+

W

LS可視化純BS方式展示，無插件拖拽方式搭建畫面，0編程自適應分辨率，跨平臺W

LS-信息化頁面組件服務W

LS—

設計器CVS-

組態(tài)展示服務CVS-

設計器CVS-

組態(tài)展示服務可擴展方便發(fā)布對接多種數(shù)據(jù)源實時監(jiān)控矢量圖便捷的私有云部署和管理目 錄背 景平臺功能職業(yè)教育大數(shù)據(jù)職業(yè)教育誤區(qū)主流技術路線是什么？怎么選？技術構件眾多，如何組合？大數(shù)據(jù)分析領域應該聚焦在哪里？職業(yè)教育中如何選擇企業(yè)真正關心的大數(shù)據(jù)？大數(shù)據(jù)如何產生？大數(shù)據(jù)如何存儲？大數(shù)據(jù)如何分析？大數(shù)據(jù)如何展示？大數(shù)據(jù)技術學習路徑數(shù)據(jù)采集技術傳統(tǒng)工業(yè)協(xié)議數(shù)據(jù)采集、物聯(lián)網網關數(shù)據(jù)采集、日志聚合數(shù)據(jù)采集、關系數(shù)據(jù)ETL采集數(shù)據(jù)存儲&檢索技術Hadoop生態(tài)體系、HBase、Sparc、kafka、zookeeper、MapReduce、Solr等主流大數(shù)據(jù)技術數(shù)據(jù)分析技術Hive、Impala、分布式關系數(shù)據(jù)庫、數(shù)據(jù)倉庫、R語言等技術數(shù)據(jù)展現(xiàn)技術Html5

、SVG、信息化開發(fā)框架、javascript、圖表&報表、GIS等技術大數(shù)據(jù)技術職業(yè)培訓前景美國-----大數(shù)據(jù)分析師平均每年薪酬高達17.5萬美元國