版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)
文檔簡介
9 9 9 9 10 11 11 12 13 14 15 15 16 17 17 18 18 18 19完善大數(shù)據(jù)能力平臺建設(shè) 20建設(shè)XX市政務(wù)數(shù)據(jù)資源中心 21建設(shè)XX市大數(shù)據(jù)賦能應用 21 23 24 25 25 26 26 27 28 29 29 30 31 31 31 32 33 33 33 34 36 37 38 38 39數(shù)據(jù)治理開發(fā)流程 40 40數(shù)據(jù)標準管理規(guī)范 40 42 42 42 43 43 43 44 44 44 46 47 47 47 48 49 50 51 52 53 54 55數(shù)據(jù)資產(chǎn)注冊管理 55數(shù)據(jù)資產(chǎn)分類管理 60數(shù)據(jù)資產(chǎn)目錄管理 61 62 62 65 65 66 66 67 68 68 69 70 70 71 71 72 73 73 75 75 76 76 77 79 79 79 80 80 83 84 84 85 85 86 86 86 87 87 88 88 88 88 90 91 92 92 92平臺建設(shè)架構(gòu)設(shè)計 93 94 94密碼方案總體架構(gòu) 95 96 107 112 112 113 115 115 115 115 117 117 118 119 119 120 121 121 122 122 123 124 124 125 126 126 128 128 128 129 129 131 133 133 134 135 135 136 137 137 139 139 141 142 142 142 143 144 164 167 167 168 168 168 170 172 183 184 185 186 186 186 187 190 190應急主題庫概述 190 192 192 194 194 195 197 199 200 201 203 204 2051建設(shè)背景、需求與現(xiàn)狀分析1.1.1大數(shù)據(jù)能力平臺已成為智慧XX2021年伊始要加快推進國家規(guī)劃已明確的重通過建設(shè)XX市大數(shù)據(jù)平臺都建設(shè),為XX市經(jīng)濟發(fā)展、政務(wù)服務(wù)與社會治理進行全方面的賦能,全面推動政府數(shù)字化都轉(zhuǎn)型,并為構(gòu)建XX市城市大腦奠算法服務(wù)基于大數(shù)據(jù)開發(fā)的數(shù)據(jù)智能應用搭建提供一站式的算法/數(shù)據(jù)研發(fā)在本項目中需要按“自然人、法人組織、信用信息、行為事件、物聯(lián)感知、2項目整體建設(shè)規(guī)劃方案2.1XX市大數(shù)據(jù)建設(shè)體系規(guī)劃數(shù)據(jù)建設(shè)體系,用以全面指導整個XX市大數(shù)據(jù)的建設(shè),包括大數(shù)據(jù)能力平臺的XX市大數(shù)據(jù)能力平臺的核心是匯聚全市各類公共數(shù)據(jù),建立面向全市城市大腦的構(gòu)建提供全面、高效、安全、智能的數(shù)據(jù)系統(tǒng)性變革和數(shù)字化轉(zhuǎn)型,建立服務(wù)高效、治理精難,決策科學的新型政府運行構(gòu)建統(tǒng)一數(shù)據(jù)開發(fā)與調(diào)度,增強數(shù)據(jù)管理能力建立統(tǒng)一數(shù)據(jù)運維和自有的基礎(chǔ),以數(shù)據(jù)中臺建設(shè)為目標,圍繞XX市智慧城市建設(shè),實現(xiàn)全市政務(wù)數(shù)據(jù)、在現(xiàn)有平臺基礎(chǔ)上,按照項目建設(shè)目標,完善整個XX市大數(shù)據(jù)平臺能力與建設(shè)可視化指揮大屏,基于全市公共數(shù)據(jù)歸集基礎(chǔ),以XX市高質(zhì)量發(fā)展實建設(shè)XX市政務(wù)數(shù)據(jù)資個人健康相關(guān)數(shù)據(jù),建設(shè)全市醫(yī)療數(shù)據(jù)共享、公眾健康指數(shù)等關(guān)鍵指標數(shù)據(jù)服針對XX市大數(shù)據(jù)能力平臺的建設(shè),我們將基于主流的大數(shù)據(jù)技術(shù)框架對當供數(shù)據(jù)服務(wù),實現(xiàn)對全市政務(wù)等數(shù)據(jù)的集中匯聚、統(tǒng)一管理與共享利用,為XX我們將基于主流的大數(shù)據(jù)技術(shù)框架對當前的XX市數(shù)據(jù)共享交換平臺進行完主題、專題、標簽等數(shù)據(jù)庫,由此構(gòu)建出層級清晰、功能區(qū)域劃分合理的XX市牢抓住XX市大數(shù)據(jù)應用的痛點,以云計算、大數(shù)據(jù)、物聯(lián)網(wǎng)、區(qū)塊鏈、人工智能等技術(shù)為支撐,以“統(tǒng)籌規(guī)劃、集約建設(shè)、共享共治”為原則加強XX市大數(shù)成果,逐步完善豐富XX市大數(shù)據(jù)資源池、運營平臺、管理機制、運維支撐、組者,負責組織內(nèi)數(shù)據(jù)資產(chǎn)的開發(fā)和利用,通過數(shù)據(jù)推動組織業(yè)務(wù)的創(chuàng)新和發(fā)展。整個數(shù)據(jù)治理團隊的建設(shè)中可通過引入平臺與治理運營供應商來共同3大數(shù)據(jù)能力平臺建設(shè)方案在現(xiàn)有平臺基礎(chǔ)上,按照項目建設(shè)目標,完善整個XX市大數(shù)據(jù)平臺能力與建設(shè)可視化指揮大屏,基于全市公共數(shù)據(jù)歸集基礎(chǔ),以XX市高質(zhì)量發(fā)展實XX市大數(shù)據(jù)能力平臺的總體架構(gòu)由支撐體系(標準規(guī)范支撐體系、管理運數(shù)據(jù)安全管理平臺、統(tǒng)一運維管理平臺、可視化運營指揮大屏以及數(shù)據(jù)資源中心(數(shù)據(jù)湖、基礎(chǔ)庫、主題庫、部門數(shù)據(jù)庫、鄉(xiāng)鎮(zhèn)數(shù)據(jù)庫、鄉(xiāng)村振興數(shù)據(jù)庫)人工訓練和專家反饋不斷優(yōu)化數(shù)據(jù)理解和數(shù)據(jù)關(guān)聯(lián)。數(shù)據(jù)治理子系統(tǒng)給圍繞XX算,通過IDMapping,建立ID和實體人/物間的關(guān)系,從而串聯(lián)起實體人/物的屬基于業(yè)務(wù)需求引導和對數(shù)據(jù)資源信息的價值梳理,對數(shù)據(jù)進行進一步提煉加數(shù)據(jù)治理平臺會包含部分5大庫數(shù)據(jù)標準,行標、部門標準等需由實施人員等定義、獲取原則、管理要求等。包括設(shè)計基礎(chǔ)類和分析類數(shù)據(jù)標準,制定數(shù)據(jù));00:00到01:00之間觸發(fā)數(shù)據(jù)資源平臺元數(shù)據(jù)的自動獲取過程,或者在數(shù)據(jù)處理程在系統(tǒng)層面實現(xiàn)元數(shù)據(jù)的導入/導出功能,以保證數(shù)據(jù)模型、數(shù)據(jù)對象能夠元數(shù)據(jù)分析算法包括以網(wǎng)狀模式展示對象等血緣關(guān)系和以父子依賴關(guān)系展groupby的結(jié)果來outerjoin,count不相等或檢查字段值和比照字段值有一個為空平臺具備執(zhí)行標準的開源Hadoop接口調(diào)用能力,以及基于個性化平臺支持對流數(shù)據(jù)的處理與管理,流數(shù)據(jù)的處理過程為數(shù)據(jù)實時采集-->數(shù)據(jù)實開發(fā)提供對流數(shù)據(jù)計算結(jié)果接口開發(fā)功能和計算結(jié)果數(shù)據(jù)可通過接口形式設(shè)計、開發(fā)、配置到打包部署整個階段的GUI(GraphicalUserInterface,圖略管控、任務(wù)調(diào)度控制、標準化控件等功能模塊,通過作業(yè)/任務(wù)管理、作業(yè)/任務(wù)調(diào)度、作業(yè)/任務(wù)執(zhí)行實現(xiàn)對采集、轉(zhuǎn)換、加載、調(diào)度、監(jiān)控,從而形成統(tǒng)一平臺提供對數(shù)據(jù)源注冊管理的功能,主要是對數(shù)據(jù)提供者所在數(shù)據(jù)庫、平臺可基于數(shù)據(jù)資產(chǎn)(表通過在平臺中指定生成表的數(shù)據(jù)庫及表空間等開發(fā)以列表形式和智能推薦形式將平臺中設(shè)置的基礎(chǔ)標簽進行呈現(xiàn)列表形開發(fā)通過標簽將相關(guān)聯(lián)的數(shù)據(jù)目錄關(guān)聯(lián)在動圖中展現(xiàn)給用戶,形成豐富數(shù)在平臺上用戶可以在此頁面通過各種過濾條件查詢出自己權(quán)限范圍內(nèi)滿足3.3AI能力平臺建設(shè)方案基礎(chǔ)設(shè)施包括:基于新一代信息技術(shù)演化生2、AI能力平臺可以提供私有化部署解決方案,保證所有政務(wù)數(shù)據(jù)和根據(jù)指導說明完成數(shù)據(jù)的標注、模型的訓練、接口的生成等流程,真正實現(xiàn)AI序號產(chǎn)品1智能數(shù)據(jù)標注平臺23456789等3.3.3AI能力平臺之·自動化機器學習平臺產(chǎn)品功能說明1自動化機器AutoCV2體的位置3學習平臺精細化的識別和定位4AutoNLP5個文本是否匹配6分詞、詞性標注、實體命名等操作7AutoML進行預測8進行預測9進行預測產(chǎn)一二功能說明品級級1開放平臺開放能力人臉與人體識別234567情緒檢測等89場景方案垃圾分類車輛分析交通分析測違禁車輛檢測文字識別銀行卡識別駕駛證識別解決方案智慧農(nóng)業(yè)智慧教室——路政監(jiān)控——JavaScriptAPI是一套由JavaScript語言編寫的應用程序接口,能夠在基于JS的API可提供多版本API的管控,針對不同級別的業(yè)務(wù),提供不同版能力GIS產(chǎn)品的作用主要是在于基于地理位置GIS能力平臺立足于技術(shù)的不斷更新完善,為企業(yè)提供更專業(yè)的GIS應用軟可視化儀表盤快速開發(fā),支持業(yè)務(wù)人員快速開發(fā)報表/儀表盤,海量數(shù)據(jù)分為多屏時代的企業(yè)帶來了全方位的數(shù)據(jù)可視化管理。從PC端到移動端再到大數(shù)據(jù)能力平臺的環(huán)境安全部分對標《網(wǎng)絡(luò)安全等級保護基本要求》22239-2019)的三級要求,從物理環(huán)境安全、網(wǎng)絡(luò)與通信安全、邊界安全、安全因此,在XX市大數(shù)據(jù)能力平臺安全管理平臺設(shè)計過程中,將遵循內(nèi)生安子系統(tǒng)集成實現(xiàn)全局賦能。具體,在對于XX市大數(shù)據(jù)能力平臺的數(shù)據(jù)安全管理其他需要通過數(shù)據(jù)安全子平臺提供定制化的安全能力并與各子系統(tǒng)集成實相關(guān)標準和要求,進行全面的、安全合理的、富有針對性的設(shè)計??傮w秉持“同步規(guī)劃、同步建設(shè)、同步實施”的方針開展建設(shè)。依據(jù)于大數(shù)據(jù)能力平臺的建設(shè)設(shè)計應考慮滿足未來3-5年的發(fā)展趨勢和擴展需要,并支持根據(jù)實際需求和方案中所采用的產(chǎn)品技術(shù)和部署方式必須具有足夠的高可用性和安全大數(shù)據(jù)能力平臺是由若干子平臺及支撐平臺構(gòu)建的綜合性數(shù)據(jù)交換與處理前置機前置機核心交換區(qū)XX市政務(wù)大數(shù)據(jù)能力平臺 以太網(wǎng)絡(luò) 存儲網(wǎng)絡(luò)數(shù)據(jù)大小為5K左右,非結(jié)構(gòu)化數(shù)據(jù)主要集中于電子證照、地理信息系統(tǒng)及視頻系統(tǒng)中,預計每天數(shù)據(jù)交換量將達至280G,這要求對數(shù)據(jù)實時傳輸和處理能力前置機前置機核心交換區(qū)XX市政務(wù)大數(shù)據(jù)能力平臺 以太網(wǎng)絡(luò) 存儲網(wǎng)絡(luò)前置機前置機前置機政務(wù)外網(wǎng)政務(wù)外網(wǎng)大數(shù)據(jù)能力平臺的整體安全防護體系包括數(shù)據(jù)資源平臺環(huán)境安全和數(shù)據(jù)全大數(shù)據(jù)能力平臺的環(huán)境安全部分對標《網(wǎng)絡(luò)安全等級保護基本要求》22239-2019)的三級要求,從物理環(huán)境安全、網(wǎng)絡(luò)與通信安全、邊界安全、安全其他需要通過數(shù)據(jù)安全子平臺提供定制化的安全能力并與各子系統(tǒng)集成實.2密碼應用安全性設(shè)計XX市大數(shù)據(jù)能力平臺總體設(shè)計利用云上的資源和虛擬化技術(shù)特性,建設(shè)云在云密碼應用體系中建設(shè)采用虛擬資源服務(wù)模式面向大數(shù)據(jù)能力平臺提供 ……電子門禁記錄數(shù)據(jù)完整性應使用密碼技術(shù)的完整性功能來保證電子門禁系統(tǒng)進出視頻記錄數(shù)應使用密碼技術(shù)的完整性功能來保證視頻監(jiān)控音像記錄測評單元測評指標應在通信前基于密碼技術(shù)對通信雙方進行驗證或認證,使用密保證傳輸過程中鑒別信息的機密性和網(wǎng)絡(luò)設(shè)備實體身份的真實應采用密碼技術(shù)對連接到內(nèi)部網(wǎng)絡(luò)的設(shè)備進行身份鑒別,確保性測評單元測評指標應使用密碼技術(shù)對登錄的用戶進行身份標識和鑒別,在遠程理時,應使用密碼技術(shù)的機密性服務(wù)來實現(xiàn)鑒性應采用密碼技術(shù)的完整性服務(wù)來保證系統(tǒng)資源訪問控應使用密碼技術(shù)的完整性服務(wù)來保證重要信息資源敏應采用可信計算技術(shù)建立從系統(tǒng)到應用信任鏈,實現(xiàn)系統(tǒng)運行系統(tǒng)運行過程中重要程序或文件完整性保應使用密碼技術(shù)的完整性功能來對日志記錄進行完整證書的身份認證系統(tǒng)及署智能密碼鑰匙(或其它的具備身份鑒別功能的密碼產(chǎn)應使用密碼技術(shù)的完整性服務(wù)來保證業(yè)務(wù)應用系統(tǒng)訪問控應使用密碼技術(shù)的完整性功能來實現(xiàn)對日志記錄完整性的應采用密碼技術(shù)對重要應用程序的加載和卸載進行安全控密鑰導入用公鑰之前應用對其進行驗證;應有安全措施防止密鑰泄露和替密鑰備份鑰只能用于解密該密鑰加密的歷史信息或驗證該密鑰簽名的歷史而大數(shù)據(jù)能力平臺下各子系統(tǒng)通過自己的應用主密鑰對以下三類密鑰進行保護:密鑰管理服務(wù)的另一個功能是在云密碼服務(wù)系統(tǒng)需要將租戶密鑰導入到指安全管理制度應包括密碼建設(shè)、運維、人員、設(shè)備、密鑰等密際情況,設(shè)置密鑰管理人員、安全審計人員、密碼操作人員等關(guān)鍵崗位;建立相應的崗位責任制度,明確相關(guān)人員在安全系實施應用方案,組織專家進行評審,評審意見作為項目規(guī)劃立項的少于信息系統(tǒng)概述、安全需求分析、商用密碼系統(tǒng)設(shè)計方案、商用密碼產(chǎn)品清單(包括產(chǎn)品資質(zhì)、功能及性能列表和產(chǎn)品生展密碼應用安全性評估,并根據(jù)評估意見進行整改;有重大安全隱患的,應停止系統(tǒng)運行,制定整改方案,整改完成并通過體設(shè)計,對哪些安全機制發(fā)揮什么作用。保障框架應與第4章“密碼應用需求”平臺應用平臺應用虛擬密碼機虛擬密碼機云密碼機加密存儲虛擬密碼機虛擬密碼機云密碼機加密存儲支持MAC/HMAC等多種形式,可為大數(shù)據(jù)能力平臺各子系統(tǒng)提供敏感數(shù)據(jù)完整證書管理等功能,支持SM1/SM2/SM3/SM4國密算法,可為用戶解決敏>身份鑒別平臺身份鑒別平臺對應用管理員和運維人員的身份鑒別通>數(shù)據(jù)傳輸保密性和完整性具體而言大數(shù)據(jù)能力平臺上管理應用及運維人員都需要簽發(fā)證書,當兩端需要進行數(shù)據(jù)通信時,可以通過SM2>數(shù)據(jù)存儲保密性和完整性保護大數(shù)據(jù)能力平臺各種子系統(tǒng)調(diào)用相應云服務(wù)器密碼機是密碼應用的基礎(chǔ)設(shè)備,高性能的云服務(wù)器密碼機各種密碼密鑰對生成為219100對/秒,簽名為129600次/秒,驗簽為232500次/秒。云服務(wù)器密碼機可提供64個虛擬密碼機,每個虛擬密碼機的性能大致會均分吞吐率??紤]到性護護護護性機護性機護器護護全調(diào)用密碼機接口實現(xiàn)視頻記錄的完整性保護或使用加密存儲設(shè)備或采用合規(guī)的視頻全符合,設(shè)備管理員和網(wǎng)站管理員的終端部支持SSL協(xié)議實現(xiàn)管理端終端和網(wǎng)關(guān)之間的身份鑒別、關(guān)鍵數(shù)據(jù)的完整性和機密性集中管理通道安全全符合,設(shè)備管理員使用口令和智能密碼鑰符合,各服務(wù)器調(diào)用服務(wù)器密碼機采用性符合,各服務(wù)器調(diào)用服務(wù)器密碼機采用實現(xiàn)了對遠程管理通道數(shù)據(jù)的身份鑒別信符合,通用服務(wù)器中所有重要程序或文件生成時利用SM2數(shù)字簽名技術(shù)進行完整性保護,使用或讀取時調(diào)用驗簽算法驗證其全符合,使用身份鑒別信息和授權(quán)通過身份據(jù)庫表訪問控制信息和重要資源訪問控制性符合,日志信息進行統(tǒng)一管理,調(diào)用服務(wù)符合,管理員登錄后所有信息都通過安全通道進行加密傳輸;而普通應用的數(shù)據(jù)傳符合,不同子系統(tǒng)調(diào)用密碼機實現(xiàn)對數(shù)據(jù)的加密存儲,需要根據(jù)不同子系統(tǒng)應用場符合,僅有設(shè)備管理員可進行重要程序或文件的加載或卸載,設(shè)備管理員的身份鑒理度需要從人員、制度和文檔方面建立密碼應圖片檢驗碼、短信認證、郵件認證、口令、OTP令牌認證、UKEY認證、指紋、敏感數(shù)據(jù)掃描:支持對HADOOP結(jié)構(gòu)化文件、半結(jié)構(gòu)化文件、非結(jié)構(gòu)化文3.6.5統(tǒng)一的數(shù)據(jù)脫敏管理據(jù)源間的靜態(tài)數(shù)據(jù)脫敏,需支持HADOOP結(jié)構(gòu)化文件、半結(jié)構(gòu)化文件、非結(jié)構(gòu)脫敏任務(wù)管理:提供統(tǒng)一WEB控制臺進行靜態(tài)任務(wù)的配置,脫敏任務(wù)中包度查詢api接口。其他子平臺平臺可以通過接口調(diào)用的方式,來完成對敏感數(shù)據(jù)3.6.6統(tǒng)一的分類分級管理分類分級結(jié)果上報:對分類分級掃描結(jié)果實時或定時上報數(shù)據(jù)治理子平臺3.6.7統(tǒng)一的加密秘鑰管理片生成的隨機數(shù)。密鑰生成后由加密卡中的內(nèi)部密鑰加密后存儲。支持SM系列密鑰安全傳輸:客戶端密鑰獲取支持SSL、用戶名口令及wrappingkey等多3.6.8統(tǒng)一的安全審計分析采集大數(shù)據(jù)能力平臺基礎(chǔ)環(huán)境網(wǎng)絡(luò)安全設(shè)備日志和各子平臺的操作系統(tǒng)日安全日志檢索:支持以多種組合條件的安全日志查詢檢索,支持使統(tǒng)一運維管理平臺負責對XX市大數(shù)據(jù)能力平臺所涉及到的所有基礎(chǔ)資源,使得XX市大數(shù)據(jù)能力平臺上快速發(fā)現(xiàn)異常,及時發(fā)現(xiàn)并告知維護人員,快速恢構(gòu)建XX市大數(shù)據(jù)能力平臺的統(tǒng)一運維管理能力體系,對基礎(chǔ)設(shè)備、數(shù)據(jù)、到端管理、數(shù)據(jù)質(zhì)量保障等多個領(lǐng)域的綜合運維管理能力,保障構(gòu)建XX市大數(shù)統(tǒng)一監(jiān)控運維平臺采用中臺技術(shù)架構(gòu),整個平臺架構(gòu)核心由基礎(chǔ)能力平臺(資源管理、監(jiān)控預警、作業(yè)管理、運維流程、分析)和統(tǒng)一門戶(支持PC、手機資源全生命周期管理資源上線資源應用資源下線系統(tǒng)交互監(jiān)控管理中心操作管理中心運維管理中心運營分析中心操作管理中心運維管理中心運營分析中心監(jiān)控管理中心運維管理中心監(jiān)控管理中心狀態(tài)變化測試測試測試完畢上線后測試中測試中通知動作維護動作維護動作動作維護動作維護動作維護中維護中使用中使用中報廢報廢備用備用后3.7.3基礎(chǔ)資源監(jiān)測置的告警自動清除策略自動將已經(jīng)恢復或處理完畢的告警自動清除(即將告警狀3.作業(yè)計劃的執(zhí)行人(或角色)3.執(zhí)行過程的歷史數(shù)據(jù)記錄4.執(zhí)行完成后必須通過確認人的確認5.執(zhí)行結(jié)果通知定義的相關(guān)人員建設(shè)可視化指揮大屏,基于全市公共數(shù)據(jù)歸集基礎(chǔ),以XX市高質(zhì)量發(fā)展實構(gòu)建全市統(tǒng)一的總體態(tài)勢感知展示窗口,重點聚焦在“大數(shù)據(jù)應用”相關(guān)以圖表、文字、地圖形式,設(shè)計大屏指標,展示XX市大數(shù)據(jù)資源在相關(guān)場4大數(shù)據(jù)資源中心建設(shè)方案集全市各單位的政府公共數(shù)據(jù),形成XX市的政務(wù)數(shù)據(jù)資源湖。同時經(jīng)過對數(shù)據(jù)進行清洗、轉(zhuǎn)換、融合、治理后,形成高質(zhì)量的公共數(shù)據(jù)資源,構(gòu)建形成XX市XX市大數(shù)據(jù)能力平臺包括市級數(shù)據(jù)湖、基礎(chǔ)庫求,支撐數(shù)字XX市建設(shè)上層應用算法模型訓練需求,支撐上層應用系統(tǒng)的數(shù)據(jù)XX市大數(shù)據(jù)能力平臺的建設(shè)采用市級數(shù)據(jù)湖+基礎(chǔ)庫+主題庫的數(shù)據(jù)存儲架構(gòu),市級數(shù)據(jù)湖與主題庫依托于大數(shù)據(jù)支撐子系統(tǒng)建設(shè)。數(shù)據(jù)來源主要來自于XX市各級委辦單位、各鄉(xiāng)鎮(zhèn)街道,數(shù)據(jù)包括市政府及市級委辦局政務(wù)數(shù)據(jù)、視4.由數(shù)據(jù)數(shù)據(jù)交換子平臺將經(jīng)過治理的數(shù)據(jù)寫入至基礎(chǔ)庫和各類融合業(yè)從上述各原始數(shù)據(jù)源→市大數(shù)據(jù)資源中心→外部應用/各委辦的數(shù)據(jù)流向可據(jù)文件、空間地理數(shù)據(jù)、半/非結(jié)構(gòu)化數(shù)據(jù)、IoT數(shù)據(jù)、視頻影像數(shù)據(jù)等的存儲,據(jù)庫加入不合語義的數(shù)據(jù),對輸入到數(shù)據(jù)庫中的數(shù)據(jù)要有審核和約束機制。法用戶非法使用數(shù)據(jù)庫造成數(shù)據(jù)泄露、更改或破壞。要有認證和授權(quán)機制。綜合前文對于數(shù)據(jù)分析、數(shù)據(jù)存儲和數(shù)據(jù)庫的分析與設(shè)計,本期次建設(shè)的根據(jù)以上需求,本項目中XX市大數(shù)據(jù)能力平臺的建設(shè),將采用如下底層存平臺用于半、非結(jié)構(gòu)化數(shù)據(jù)的存儲,以及聚合、多維數(shù)據(jù)分析的支撐使用,立一個信息安全通道,來保證數(shù)據(jù)傳輸?shù)陌踩?;另一種就是確認網(wǎng)站的真實性。市級數(shù)據(jù)湖是所有從外部數(shù)據(jù)源落地到市數(shù)據(jù)管理部門的統(tǒng)一數(shù)據(jù)存儲空SRC近源數(shù)據(jù)層定位在于將原始數(shù)據(jù)源進行全量映射保存,是外部各類數(shù)同時需要進行相應的設(shè)計,以此匯聚后下一步處理提供基礎(chǔ)支撐。結(jié)合XX市大要匯集XX市各政務(wù)業(yè)務(wù)條線的數(shù)據(jù),數(shù)據(jù)類型需要涵蓋結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化非結(jié)構(gòu)化數(shù)據(jù)是數(shù)據(jù)結(jié)構(gòu)不規(guī)則或不完整,沒有預定義的數(shù)據(jù)模型,不方為了構(gòu)建有效的數(shù)據(jù)分層治理,構(gòu)建起逐層遞進的數(shù)據(jù)流轉(zhuǎn)模式,數(shù)據(jù)湖構(gòu)建過程中,需要構(gòu)建ODS源數(shù)據(jù)層。ODS源數(shù)據(jù)層的數(shù)據(jù)是對SRC近源數(shù)據(jù)層數(shù)據(jù)進行數(shù)據(jù)全/增量合并以及數(shù)據(jù)清洗和標準化動作之后的數(shù)據(jù)存儲層,XX市大數(shù)據(jù)能力平臺的數(shù)據(jù)湖支持大范圍內(nèi)的各種類型各類數(shù)據(jù)的存儲與.1構(gòu)建自然人畫像.2人口庫數(shù)據(jù)服務(wù)以人為主題的信息檢索、應用分析需求最廣、所含信息要素也最多?!耙蝗?1個人基本信息模型碼0身份證;10港澳居民來往內(nèi)地SE.2個人死亡記錄模型碼澳居民來往內(nèi)地通行證;11臺士;省市區(qū))VARCHAR(20VARCHAR(20居民死亡殯葬證編號VARCHAR(20VARCHAR(.3個人健康記錄模型碼E脈率狀態(tài)1=偏高2=日月年.4個人就醫(yī)記錄模型碼BIRTH_DATE0入院登記1病區(qū)分床2病區(qū)出院3病人出院4取消結(jié)算5進入ICU6進入產(chǎn)房7轉(zhuǎn)科狀態(tài)8數(shù)據(jù)轉(zhuǎn)出9DISEASE_TYPEDISEASE_NAME醫(yī)保中心編號(外地.5個人就醫(yī)明細記錄模型碼0入院登記1病區(qū)分床2病區(qū)出院3病人出院4取消結(jié)算5進入ICU6進入產(chǎn)房7轉(zhuǎn)科狀態(tài)8數(shù)據(jù)轉(zhuǎn)出9MJZBZ.6個人職業(yè)信息模型碼MAJOR.7個人房產(chǎn)信息模型碼HOUSETYPEHOUSEARCHUSABLEDATEBLOCKAREA.8個人車輛信息模型碼.9個人失信記錄模型碼MOBILEVOLUMEID_DISPLAY_DATECREATED_DATEMODIFIED_CREATOR_MODIFIER.1個人婚姻關(guān)系模型碼MARRIAGE_STATE.2個人雙親關(guān)系模型碼BIRTH_DATEMOTHER_CERT_TYPEMOTHER_CCERT_CODEMOTHER_CINDIV_NAME.3家庭關(guān)系圖譜
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 2024年度環(huán)保設(shè)備采購與維護服務(wù)合同
- 2024年抹灰工程勞務(wù)分包合同
- 2024年應急電源調(diào)度合同
- 2024年建筑方案設(shè)計師聘請合同
- 《基于企業(yè)價值創(chuàng)造理論的GRN公司現(xiàn)金流管理研究》
- 《嶺南傳統(tǒng)裝飾紋樣在陶瓷餐具中的應用研究》
- 《MOFs@柔性TiO2納米纖維的可控制備及其CO2光催化還原研究》
- 《原創(chuàng)歌劇《八女投江》中冷云角色的藝術(shù)特征研究》
- 《我國大學生跆拳道運動員技戰(zhàn)術(shù)運用特征分析》
- 《電力調(diào)度管理系統(tǒng)數(shù)據(jù)門戶的研究與應用》
- 【工商企業(yè)管理專業(yè)實操實訓報告2600字(論文)】
- HJ 636-2012 水質(zhì) 總氮的測定 堿性過硫酸鉀消解紫外分光光度法
- 主播薪資核算方案
- 機電儀運維中心巡檢工作提升方案
- 10以內(nèi)口算題每頁50道
- 大學生職業(yè)生涯規(guī)劃與就業(yè)指導(高校學生學習職業(yè)生涯規(guī)劃與就業(yè)指導課程)全套教學課件
- 《道德與法治》三年級學情分析
- 校園禁煙承諾書(12篇)
- 國家開放大學《計算機網(wǎng)絡(luò)》課程實驗報告實驗六-計算機網(wǎng)絡(luò)綜合性實-
- 學校教育統(tǒng)計工作計劃方案
- 售后服務(wù)方案及運維方案
評論
0/150
提交評論