《大數(shù)據(jù)存儲技術(shù)與應用》 課件 項目一-任務三 走進大數(shù)據(jù)存儲應用

《大數(shù)據(jù)存儲技術(shù)與應用》大數(shù)據(jù)存儲技術(shù)與應用項目一走進大數(shù)據(jù)存儲任務三走進大數(shù)據(jù)存儲應用大數(shù)據(jù)存儲架構(gòu)？嵌入式存儲架構(gòu)，應用場景？云存儲架構(gòu)？非結(jié)構(gòu)化存儲架構(gòu)？回顧5G時代的到來，各種數(shù)據(jù)呈幾何級增加，數(shù)據(jù)已然成為一種非常寶貴的戰(zhàn)略資源備受關(guān)注。大數(shù)據(jù)已經(jīng)應用到各個領(lǐng)域。任務引入大數(shù)據(jù)在電力領(lǐng)域的具體應用?大數(shù)據(jù)在農(nóng)業(yè)領(lǐng)域具體的應用?大數(shù)據(jù)在醫(yī)療領(lǐng)域具體的應用?大數(shù)據(jù)在教育領(lǐng)域的具體應用?任務引入-大數(shù)據(jù)應用任務描述:本節(jié)任務以醫(yī)療和電力系統(tǒng)為案例，闡述了大數(shù)據(jù)存儲技術(shù)在行業(yè)領(lǐng)域的具體應用。任務教學目標：了解大數(shù)據(jù)存儲技術(shù)在醫(yī)療系統(tǒng)中的應用了解大數(shù)據(jù)存儲技術(shù)在電力系統(tǒng)中的應用理解大數(shù)據(jù)存儲架構(gòu)、存儲技術(shù)的具體應用。任務概要教學內(nèi)容大數(shù)據(jù)存儲技術(shù)應用智能大數(shù)據(jù)處理平臺醫(yī)療大數(shù)據(jù)融合平臺智慧國土大數(shù)據(jù)融合平臺能源電力大數(shù)據(jù)融合平臺一二三四五大數(shù)據(jù)存儲技術(shù)應用知識點一大數(shù)據(jù)存儲技術(shù)應用9如今，大數(shù)據(jù)技術(shù)已廣泛應用于工業(yè)、能源、醫(yī)療、金融、電信、交通等行業(yè)，如何整合數(shù)據(jù)、利用數(shù)據(jù)創(chuàng)造價值是大數(shù)據(jù)存儲技術(shù)的關(guān)鍵點。本節(jié)以醫(yī)療大數(shù)據(jù)、能源電力大數(shù)據(jù)為例，解讀大數(shù)據(jù)存儲技術(shù)的應用。智能大數(shù)據(jù)處理平臺知識點二智能大數(shù)據(jù)處理平臺11DANA智能大數(shù)據(jù)開發(fā)平臺以“數(shù)據(jù)智能”為目標，著手于“數(shù)據(jù)是誰”、“數(shù)據(jù)從哪里來”、“數(shù)據(jù)到哪里去”三個基本問題，提供大數(shù)據(jù)基礎開發(fā)平臺，讓用戶更好的應用和組織數(shù)據(jù)，為開發(fā)者和公司提供更加容易運營、開發(fā)、部署應用的環(huán)境，用戶也不再需要關(guān)心和管理私有云的基礎設施，包括網(wǎng)絡、存儲、服務器、開發(fā)服務等。智能大數(shù)據(jù)處理平臺121.數(shù)據(jù)集成提供數(shù)據(jù)庫、文件、日志、網(wǎng)頁、實時流數(shù)據(jù)的抽取、清洗、轉(zhuǎn)換方案。2.數(shù)據(jù)庫服務提供大數(shù)據(jù)時代穩(wěn)定可靠、可彈性伸縮的數(shù)據(jù)庫服務。Stock數(shù)據(jù)庫引擎根據(jù)不同業(yè)務開發(fā)對各類數(shù)據(jù)庫的需求，提供便捷統(tǒng)一的數(shù)據(jù)庫管理、使用、監(jiān)控、運維等服務。Lemur是基于內(nèi)存存儲的高性能結(jié)構(gòu)化數(shù)據(jù)庫，支持標準SQL語法，可提供每秒百萬級別的交互事務，更提供高效的實時數(shù)據(jù)分析能力。Teryx幫助構(gòu)建PB級別的分布式OLAP數(shù)據(jù)倉庫。智能大數(shù)據(jù)處理平臺133.存儲服務Fox文件系統(tǒng)提供無限擴展、NAS協(xié)議標準文件存儲服務。Boa塊存儲提供高性能、高可靠的塊級隨機存儲。Cayman非結(jié)構(gòu)數(shù)據(jù)倉庫提供私有對象存儲和高效率的非結(jié)構(gòu)化數(shù)據(jù)管理。智能大數(shù)據(jù)處理平臺144.大數(shù)據(jù)處理服務DANA平臺提供豐富和強大的數(shù)據(jù)處理服務引擎，例如：Eagles實時搜索與分析引擎實現(xiàn)海量實時在線快速搜索和準確分析服務。Phoenix消息中間件低延時、高性能的特點輕松應對海量消息的發(fā)送和接收，服務于大數(shù)據(jù)領(lǐng)域中數(shù)據(jù)管道、曰志服務、流處理數(shù)據(jù)中心等應用方案。智能大數(shù)據(jù)處理平臺15Eel流媒體引擎支持RTMP、RTSP,HTIP、HLS等多種流媒體協(xié)議，輕松實現(xiàn)多媒體文件的直播、點播以及虛擬直播等功能。Dodo調(diào)度引擎以接流程自動調(diào)用組件的形式幫助處理分布式任務的調(diào)度、執(zhí)行和監(jiān)控。智能大數(shù)據(jù)處理平臺16Mustang實時流計算引擎，基于SparkStreaming實時流計算框架，滿足所有對實時性要求富的流計算應用場景和系統(tǒng)需求。Leopard智能媒體數(shù)據(jù)處理引擎針對海量文檔、圖片、音視頻等數(shù)據(jù)進行有效快速處理。醫(yī)療大數(shù)據(jù)融合平臺知識點三醫(yī)療大數(shù)據(jù)融合平臺18隨著大數(shù)據(jù)在互聯(lián)網(wǎng)、電子商務、公共服務等行業(yè)的成功應用，醫(yī)療衛(wèi)生行業(yè)的信息化也迎來自己的“大數(shù)據(jù)時代”。目前，醫(yī)療衛(wèi)生系統(tǒng)的信息化日趨成熟，但隨著省級醫(yī)院與基層、公共衛(wèi)生機構(gòu)之間的數(shù)據(jù)共享和互聯(lián)互通建設的推進，數(shù)據(jù)數(shù)量的增加、數(shù)據(jù)所需處理速度的提高、數(shù)據(jù)類型和標準的多樣化、系統(tǒng)之間的數(shù)據(jù)孤島等問題逐漸顯現(xiàn)。醫(yī)療大數(shù)據(jù)融合平臺19醫(yī)療大數(shù)據(jù)平臺幫助醫(yī)院取得如下幾個方面的成果和業(yè)務價值：數(shù)據(jù)孤島打通。患者健康檔案。醫(yī)務人員績效管理。全面數(shù)據(jù)分析。高效決策支持。智慧國土大數(shù)據(jù)融合平臺知識點四智慧國土大數(shù)據(jù)融合平臺21各級國土部門在國家省、市、縣等基礎上，基本建成以全國遙感建設一張圖，綜合監(jiān)管平臺、公共服務平臺為主題的國土資源信息化框架體現(xiàn)，積累了海量的國土、人事、事件、財務等數(shù)據(jù)。當前需要在現(xiàn)有數(shù)據(jù)基礎上，利用超融合、云計算等技術(shù)，解決數(shù)據(jù)計算和存儲的問題，實現(xiàn)國土信息化由傳統(tǒng)的以業(yè)務需求建設為主轉(zhuǎn)向以數(shù)據(jù)驅(qū)動為民眾帶來更優(yōu)化服務體驗的目標。智慧國土大數(shù)據(jù)融合平臺22智慧國土大數(shù)據(jù)融合平臺的建設，其主要應用價值：分布式集群實現(xiàn)底層架構(gòu)無限擴張，多副本機制確保數(shù)據(jù)安全可靠。解決因業(yè)務口徑不同而產(chǎn)生的數(shù)據(jù)標準不統(tǒng)一、類型不匹配、格式不一致、語義不一致等問題。從各個環(huán)節(jié)、各個維度進行記錄、管控、分析。讓數(shù)據(jù)分析成為決策的第一手科學依據(jù)。能源電力大數(shù)據(jù)融合平臺知識點五能源電力大數(shù)據(jù)融合平臺24電力行業(yè)是國民經(jīng)濟的命脈，但我國電力工業(yè)面臨能源枯竭、溫室氣體排放和嚴重霧霾的三重挑戰(zhàn)，以投資勞動增長的發(fā)展方式已難以為繼。雖然衡量我國電力工業(yè)發(fā)展的重要指標—裝機容量始終在增長，但是其增速已經(jīng)大大放緩。一方面，電力工業(yè)近年來快速增長透支的產(chǎn)品需要時間來慢慢消化；一方面，我國電力需求的增速也在逐步放緩。這就要求根據(jù)新的形勢和國際規(guī)則探索新的發(fā)展模式，迎接所面臨的各種挑戰(zhàn)。能源電力大數(shù)據(jù)融合平臺25通過電力大數(shù)據(jù)融合平臺的建設，可以最大限度地發(fā)揮數(shù)據(jù)的價值。大力提升生產(chǎn)集約化和管理現(xiàn)代化水平提高智能電網(wǎng)的信息化水平增強操作控制的自動化能力提升用電服務的互動化水平大數(shù)據(jù)技術(shù)已廣泛應用于各個行業(yè)，如何整合數(shù)據(jù)、利用數(shù)據(jù)創(chuàng)造價值是大數(shù)據(jù)存儲技術(shù)的關(guān)鍵點。本節(jié)對大數(shù)據(jù)存儲技術(shù)的典型應用進行了介紹，對大數(shù)據(jù)存儲應用的平臺價值進行了剖析。包括如下內(nèi)容：1.大數(shù)據(jù)存儲技術(shù)應用。2.智能大數(shù)據(jù)處理平臺。3.大數(shù)據(jù)典型應用案例。任務小結(jié)調(diào)研要求：調(diào)研我國大數(shù)據(jù)存儲技術(shù)的產(chǎn)業(yè)化情況。調(diào)研了解我國大數(shù)據(jù)存儲主流技術(shù)及產(chǎn)品特性。要求：

各學員通過調(diào)研、搜集網(wǎng)絡數(shù)據(jù)等方式完成。