2023年設施運維大數(shù)據(jù)治理體系框架及設施運維大數(shù)據(jù)應用場景方案PPT

設施運維大數(shù)據(jù)治理體系框架及設施運維大數(shù)據(jù)應用場景方案PPT整理制作：郎豐利1519制作時間：2023年睿利而行整理制作：郎豐利1519制作時間：2023年睿利而行整理制作：郎豐利1519制作時間：2023年睿利而行2023年目錄01港口設施運維與大數(shù)據(jù)02港口設施運維大數(shù)據(jù)治理體系框架03港口設施運維大數(shù)據(jù)應用場景04關于我們整理制作：郎豐利1519制作時間：2023年睿利而行整理制作：郎豐利1519制作時間：2023年睿利而行整理制作：郎豐利1519制作時間：2023年睿利而行PART01港口碼頭設施與大數(shù)據(jù)06大數(shù)據(jù)

所謂“大數(shù)據(jù)”，指的是所涉及的數(shù)據(jù)量規(guī)模巨大到無法通過目前主流軟件工具，在合理時間內達到截取、管理、處理、并整理成為幫助企業(yè)經(jīng)營決策更積極目的的信息。

大數(shù)據(jù)處理技術代表了新一代的技術架構，這種架構通過高速獲取數(shù)據(jù)并對其進行分析和挖掘，從海量形式各異的數(shù)據(jù)源中更有效地抽取出富含價值的信息。從大量數(shù)據(jù)中挖掘高價值知識是各界對于大數(shù)據(jù)的一個共識。海量數(shù)據(jù)可廣泛獲得，所稀缺的是如何從中挖掘出智慧和觀點。

——Google首席經(jīng)濟學家HalVarian大數(shù)據(jù)主要被用于分析和決策，企業(yè)用以分析的數(shù)據(jù)越全面，分析的結果就越接近于真實。大數(shù)據(jù)分析意味著企業(yè)能夠從這些新的數(shù)據(jù)中獲取新的洞察力，并將其與已知業(yè)務的各個細節(jié)相融合，對企業(yè)產(chǎn)生新的價值。整理制作：郎豐利1519制作時間：2023年睿利而行整理制作：郎豐利1519制作時間：2023年睿利而行整理制作：郎豐利1519制作時間：2023年睿利而行大數(shù)據(jù)的4V特征Volume非結構化數(shù)據(jù)的超大規(guī)模和增長總數(shù)據(jù)量的80~90%比結構化數(shù)據(jù)增長快10倍到50倍是傳統(tǒng)數(shù)據(jù)倉庫的10倍到50倍Value大量的不相關信息對未來趨勢與模式的可預測分析深度復雜分析（機器學習、人工智能Vs傳統(tǒng)商務智能）Velocity實時分析而非批量式分析數(shù)據(jù)輸入、處理與丟棄立竿見影而非事后見效Variety大數(shù)據(jù)的異構和多樣性很多不同形式（文本、圖像、視頻、機器數(shù)據(jù)）無模式或者模式不明顯不連貫的語法或句義BigData大數(shù)據(jù)TBPBEBStreamsRealtimeNeartimeBatchStructuredUnstructuredSemi-structuredAlltheabove數(shù)據(jù)體量巨大數(shù)據(jù)類型繁多價值密度低處理速度快當前港口碼頭設施運維的問題面臨問題專業(yè)技術人員不足管理效率低非結構化數(shù)據(jù)缺乏分析手段依靠人工經(jīng)驗判斷缺少設施全生命周期完整性數(shù)據(jù)模型壞了才修被動運維歷史數(shù)據(jù)未發(fā)揮價值工作時效性差、使用者無法及時獲得所需信息多個系統(tǒng)數(shù)據(jù)無法關聯(lián)共享，數(shù)據(jù)整合困難數(shù)據(jù)使用不方便，方法繁瑣、手工報表多.整理制作郎豐利1519大數(shù)據(jù)對港口碼頭設施的意義完整性、集中性

將港口基礎建設、設施運維，管理制度等信息進行集中云存儲，打破條塊分割，走向設施運維統(tǒng)一大數(shù)據(jù)資源標準體系，避免有效信息的流失，減少管理繁瑣程度，為港口設施數(shù)字化運維提供數(shù)據(jù)基礎。數(shù)據(jù)存儲數(shù)據(jù)處理有效性

利用大數(shù)據(jù)技術，進行數(shù)據(jù)整合，挖掘有效數(shù)據(jù)價值，形成符合港口碼頭設施運維特性的數(shù)據(jù)處理標準、方法及工具，提高數(shù)據(jù)質量，提高港口設施數(shù)字化運維數(shù)據(jù)處理的準確性和效率?？茖W性

利用大數(shù)據(jù)技術，對港口設施運維數(shù)據(jù)進行跨地域、跨層級、跨系統(tǒng)、跨部門、跨業(yè)務的碰撞、建模、關聯(lián)分析，找到損傷根本原因，提前預警，為港口設施運維服務提供科學的數(shù)據(jù)支撐，為決策提供依據(jù)。數(shù)據(jù)分析數(shù)據(jù)服務便利性

利用大數(shù)據(jù)技術，對港口設施運行狀態(tài)進行全生命周期、全流程、全要素進行全天候的動態(tài)監(jiān)測，精準定位問題、提前預警提示，對港口設施運維提供快捷、準確、方便的數(shù)據(jù)及應用服務，減少港口設施運維人、財、物的成本投入。PART02港口設施運維大數(shù)據(jù)治理體系框架當前港口碼頭設施大數(shù)據(jù)實施要點01020304信息化系統(tǒng)數(shù)據(jù)的整合

港口設施信息化缺乏頂層設計與全盤統(tǒng)籌，信息化標準體系還沒有完善，各信息系統(tǒng)數(shù)據(jù)庫建設缺乏統(tǒng)一規(guī)劃，統(tǒng)一規(guī)范，統(tǒng)一管理，數(shù)據(jù)庫之間互聯(lián)性差，數(shù)據(jù)缺失嚴重，數(shù)據(jù)信息的使用不能做到“一數(shù)一源”，數(shù)據(jù)庫管理沒有統(tǒng)一標準。各個系統(tǒng)之間也無法進行有效的整合，功能的復用性差。

缺乏數(shù)據(jù)交換與共享機制，數(shù)據(jù)的應用局限在單一領域甚至是具體項目，無法形成有序、相互關聯(lián)的整體，數(shù)據(jù)的再生價值、綜合價值難以得到體現(xiàn)，無法為管理全局的決策支持提供抓手。數(shù)據(jù)的創(chuàng)新性應用

目前，港口設施數(shù)據(jù)創(chuàng)新性應用少，創(chuàng)新活力不足，創(chuàng)新主體不明確。缺乏對港口設施數(shù)據(jù)進行深層分析的技術手段，港口設施數(shù)據(jù)對企業(yè)決策提供的支撐能力有待提升。數(shù)據(jù)保密機制

港口設施大數(shù)據(jù)在信息采集、數(shù)據(jù)挖掘與分析、信息服務等全過程形成了一個完整鏈條，在大數(shù)據(jù)處理各個環(huán)節(jié)的數(shù)據(jù)都存在數(shù)據(jù)丟失、數(shù)據(jù)越權訪問、數(shù)據(jù)篡改等風險。在建設港口設施大數(shù)據(jù)時如何有效的解決以上風險是管理部門面臨的難題。數(shù)據(jù)共享與開放港口碼頭設施大數(shù)據(jù)方案港口碼頭大數(shù)據(jù)方案主要包括基礎設施、數(shù)據(jù)采集、分析技術、業(yè)務應用。為港口碼頭運維提升運維質量、降低運維成本、輔助決策?；A設施建設數(shù)據(jù)采集分析技術業(yè)務應用最終使用者數(shù)據(jù)庫數(shù)據(jù)管理平臺數(shù)據(jù)分發(fā)技術云基礎設施基礎數(shù)據(jù)生成數(shù)據(jù)匯聚多方數(shù)據(jù)融合分析技術分析工具分析服務基于大數(shù)據(jù)開發(fā)應用應用運營基于基礎應用的二次開發(fā)使用大數(shù)據(jù)應用增強或者拓展現(xiàn)有業(yè)務能力港口設施運維大數(shù)據(jù)治理體系框架-總體架構系統(tǒng)應用層匯聚接入層數(shù)據(jù)處理層數(shù)據(jù)資源層數(shù)據(jù)服務層港口設施運維大數(shù)據(jù)平臺資源開放中心可視化圖像識別健康狀態(tài)診斷預警知識庫資源平臺服務接口（服務接口構建、服務注冊?；?、服務接口目錄（含資源目錄、數(shù)據(jù)服務目錄與視頻圖像解析服務目錄））檔案管理服務數(shù)據(jù)訂閱服務關系分析服務視頻圖像存取服務模型分析服務關系分析模型軌跡分析模型視頻圖像分析模型規(guī)則分析模型比對分析服務（圖像比對、文本比對）數(shù)據(jù)檢索服務（非結構化檢索、結構化數(shù)據(jù)檢索）應用服務（地圖、業(yè)務等系統(tǒng)）服務管理數(shù)據(jù)服務碼頭設施運維數(shù)據(jù)庫實體檔案庫關系庫軌跡庫視頻圖像庫專題模型分析庫基礎資源庫原始設施運維數(shù)據(jù)庫管理數(shù)據(jù)庫數(shù)據(jù)管理數(shù)據(jù)解析中心視頻圖像解析系統(tǒng)數(shù)據(jù)管理數(shù)據(jù)同步任務處理數(shù)據(jù)清洗數(shù)據(jù)轉換關聯(lián)融合解析服務解析服務目錄管理運維管理任務管理配置管理級聯(lián)同步資源輸入?yún)R聚管理結構化數(shù)據(jù)采集在線數(shù)據(jù)接入代理離線數(shù)據(jù)接入代理非結構化數(shù)據(jù)采集在線數(shù)據(jù)接入代理離線數(shù)據(jù)接入代理管理中心數(shù)據(jù)管理運行維護平臺配置日志管理信息安全體系&標準規(guī)范體系港口設施運維大數(shù)據(jù)治理體系框架-技術架構存儲計算分布式文件系統(tǒng)(HDFS)分布式nosql(HBASE)關系型數(shù)據(jù)庫(MYSQL）分布式索引(ES)分布式內存cache、merge系統(tǒng)(Boomata)redis配置數(shù)據(jù)緩存離線調度(Crontask)實時調度（負載均衡、實時轉發(fā)）檢索實時預警大數(shù)據(jù)分析、統(tǒng)計、挖掘定制業(yè)務調度應用統(tǒng)一注冊發(fā)現(xiàn)服務（Zookeeper)集群自動監(jiān)控、運維（Gmetad)自動安裝部署（AutoInstall)流式計算(Inteam)離線計算(Job)圖式計算(Graphic)硬件加速計算(HA)GPU集群GPU集群大規(guī)模機器學習平臺（DL、PGM、SVM…)統(tǒng)計分析（STP）業(yè)務分析、研判、挖掘（OLAP）圖像識別業(yè)務建?？梢暬植际较㈥犃?kafka)接入格式適配協(xié)議轉換加密解密港口設施運維大數(shù)據(jù)治理體系框架-數(shù)據(jù)架構港口設施運維大數(shù)據(jù)標準體系基礎標準為整個標準體系提供包括總則、術語、參考模型等基礎性標準，是整個標準體系的基石數(shù)據(jù)標準主要針對底層數(shù)據(jù)相關要素進行規(guī)范。包括數(shù)據(jù)資源和數(shù)據(jù)交換共享兩部分。管理標準作為數(shù)據(jù)標準的支撐體系，貫穿于數(shù)據(jù)生命周期的各個階段，主要對數(shù)據(jù)管理、運維管理和評估三個層次進行規(guī)范。應用標準主要是針對大數(shù)據(jù)為港口碼頭行業(yè)所能提供的服務角度出發(fā)制定的規(guī)范。平臺工具標準主要針對大數(shù)據(jù)相關平臺和工具進行規(guī)范，包括系統(tǒng)級產(chǎn)品和工具級產(chǎn)品兩類技術標準主要針對大數(shù)據(jù)相關技術進行規(guī)范。包括大數(shù)據(jù)集描述及評估、大數(shù)據(jù)處理生命周期技術、大數(shù)據(jù)開放與互操作、面向領域的大數(shù)據(jù)技術四類標準。習近平談網(wǎng)絡安全：沒有網(wǎng)絡安全就沒有國家安全港口設施運維大數(shù)據(jù)安全體系網(wǎng)絡安全等級保護是我國信息安全保障的基本制度性工作，是網(wǎng)絡空間安全保障體系的重要支撐，也是應對強敵APT攻擊的有效措施。在法律支撐層面，我國的計算機系統(tǒng)等級保護條例提升為國家基礎性法律制度，即“網(wǎng)絡安全法”中的網(wǎng)絡安全等級保護制度；在科學技術層面，由分層被動防護發(fā)展到了科學安全框架下的主動免疫防護；在工程應用層面，由傳統(tǒng)的計算機信息系統(tǒng)防護轉向了新型計算環(huán)境下的網(wǎng)絡空間主動防御體系建設。等保2.0時代重點對云計算、移動互聯(lián)、物聯(lián)網(wǎng)、工業(yè)控制以及大數(shù)據(jù)安全等進行全面安全防護，確保關鍵信息基礎設施安全。PART03港口設施運維大數(shù)據(jù)應用場景應用場景-建立港口設施運維大數(shù)據(jù)中心歷史庫現(xiàn)勢庫過程庫大數(shù)據(jù)中心元數(shù)據(jù)港口物流數(shù)據(jù)……港口設施數(shù)據(jù)港口航運數(shù)據(jù)相關數(shù)據(jù)人基本信息通過大數(shù)據(jù)技術構建港口設施運維大數(shù)據(jù)中心，建立運維大數(shù)據(jù)引擎，使之成為港口運維工作的“大腦”。港口應急數(shù)據(jù)……港口運維數(shù)據(jù)港口環(huán)境數(shù)據(jù)港口安全防控數(shù)據(jù)應用場景-建立港口設施運維大數(shù)據(jù)平臺運維大數(shù)據(jù)平臺第三方系統(tǒng)集成能力快速的應用提供能力運維數(shù)據(jù)資源共享能力設施健康平滑演進能力數(shù)據(jù)統(tǒng)一分析能力統(tǒng)一硬件/存儲/安全方案構建統(tǒng)一的港口設施大數(shù)據(jù)平臺，提供高效、標準的港口設施運維支撐和管理能力通過智能化圖像運維識別系統(tǒng)(深度學習)使得港口運維系統(tǒng)具有與人類智能相似的反應，能夠快速、直觀的發(fā)現(xiàn)并定位港口設施健康問題。應用場景-智能化圖像運維識別設施健康狀況監(jiān)測設施健康狀況監(jiān)測設施健康狀況監(jiān)測物流運輸監(jiān)測傾角監(jiān)測物流運輸監(jiān)測應用場景-港口物聯(lián)網(wǎng)感知終端通過各類物聯(lián)網(wǎng)傳感器做到港、人、車、船、貨的全面感知和廣泛互聯(lián)，建立危險貨物全程監(jiān)管體系，建立消防火災預警和監(jiān)控系統(tǒng)，為港口提供調度、管控、預警和決策依據(jù)。

車輛定位標簽貨物定位標簽人員定位標簽消防預警、報警傳感器用電管理終端?；沸孤z測終端環(huán)境檢測終端消防栓水壓檢測終端消防通道占用檢測終端窨井蓋監(jiān)測終端港口應急報警按鈕重點單位門磁檢測終端非法行為識別入港船舶識別碼頭設施檢查碼頭設備檢查碼頭海底檢查港機安全承載狀態(tài)：車輛承載程度、船舶承載程度、人員承載程度、貨物承載程度、油氣承載程度等設施安全狀態(tài)：樁基腐蝕程度、泊位靠泊狀態(tài)、道路破損程度、倉庫合格程度、長廊合格程度等設備安全狀態(tài)：裝卸類設備運行狀態(tài)、輔助類設備運行狀態(tài)、通訊類等設備運行狀態(tài)環(huán)境狀態(tài)：海底地貌適宜程度、水文條件適宜程度、氣象條件適宜程度等運維保障狀態(tài)：運維檢查程度、運維覆蓋程度、運維檢查頻次、運維修復狀態(tài)等應用場景-碼頭健康狀態(tài)報告通過大數(shù)據(jù)標簽和圖譜技術，描繪碼頭健康狀態(tài)畫像

設施故障是一個漸變過程，若能對漸變過程進行趨勢分析預示，則有利于提前排除故障，有效避免事故發(fā)生。

采集各類設施的信息數(shù)據(jù)庫與信息分析知識庫等，通過深度的機器學習，訓練預警模型，并在新采集數(shù)據(jù)上運用模型，構建智能化的預警、預知維修體系。設備狀態(tài)預警維修診斷方案候選模型應用應用場景-設施健康診斷預警通過人工和自動化采集相關領域各維度海量數(shù)據(jù)，利用大數(shù)據(jù)技術分析比對建模，及時發(fā)現(xiàn)問題，及時預警，促進港口運維工作方式由被動發(fā)現(xiàn)向主動預防轉變?？茖W對港口、碼頭關鍵應用和數(shù)據(jù)進行可視化處理，使港務或碼頭管理人員對重要信息、關鍵事件、關注事項、主要業(yè)務、工作協(xié)同、信息交互等分類信息進行同比、環(huán)比、分布態(tài)勢、演進趨勢進行分析展示，且