公共數(shù)據(jù)歸集指南

ICS35.240.01CCSL67□B3310浙江省臺州市地方標準DB3310/T91—2022公共數(shù)據(jù)歸集指南Guidanceforpublicdataaggregation2022-12-12發(fā)布 2022-12-16實施臺州市市場監(jiān)督管理局發(fā)布DB3310/T91—2022DB3310/T91—2022#公共數(shù)據(jù)歸集指南1范圍本文件描述了公共數(shù)據(jù)歸集的基本原則、歸集方式和考慮要素等內(nèi)容。本文件適用于公共數(shù)據(jù)管理中的數(shù)據(jù)歸集的規(guī)劃、實施、評價、審計、報告和持續(xù)改進。2規(guī)范性引用文件下列文件中的內(nèi)容通過文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中，注日期的引用文件,僅該日期對應(yīng)的版本適用于本文件；不注日期的引用文件，其最新版本（包括所有的修改單）適用于本文件。DB33/T2351—2021數(shù)字化改革公共數(shù)據(jù)分類分級指南DB33/T2359—2021公共數(shù)據(jù)交換技術(shù)規(guī)范DB33/T2426—2022公共數(shù)據(jù)元管理規(guī)范DB3310/T90—2022公共數(shù)據(jù)安全可信保障指南3術(shù)語和定義下列術(shù)語和定義適用于本文件。3.1公共數(shù)據(jù)pubIicdata國家機關(guān)、法律法規(guī)規(guī)章授權(quán)的具有管理公共事務(wù)職能的組織，在依法履行職責和提供公共服務(wù)過程中獲取的數(shù)據(jù)資源以及法隼法規(guī)規(guī)章規(guī)定納入公共數(shù)據(jù)管理范圍的其他數(shù)據(jù)資源。[來源：DB33/T2351—2021,%.1]3.2數(shù)據(jù)收集datacoIIectioningovernmentdeparit公共管理和服務(wù)機構(gòu)按照法定權(quán)限、范圍、程序和標準規(guī)范，收集、匯集、整理數(shù)據(jù)的行為和過程。3.3數(shù)據(jù)歸集dataaggregationfromgovernmentdepartment公共數(shù)據(jù)主管部門面向公共管理和服務(wù)機構(gòu)，對公共數(shù)據(jù)進行收集、匯聚、整合的行為和過程。3.4數(shù)據(jù)目錄datacatalog以核心元數(shù)據(jù)為主要描述方式，按照資源分類體系對公共數(shù)據(jù)進行有序排列的一組信息，用以描述公共數(shù)據(jù)的特征，以便對公共數(shù)據(jù)進行檢索、定位與獲取。[來源:DB33/T2349—2021，3.4]4基本原則公共數(shù)據(jù)歸集宜遵循以下基本原則：――合規(guī)性：按照法定職責和歸集標準，獲取公共管理和服務(wù)機構(gòu)依法收集的數(shù)據(jù)；――準確性：公共數(shù)據(jù)應(yīng)真實反映客觀事物的狀態(tài)；――完整性：明確數(shù)據(jù)歸集的范圍、內(nèi)容及目標，數(shù)據(jù)歸集宜覆蓋項目所規(guī)定的內(nèi)容，不宜造成數(shù)據(jù)的缺失和遺漏；――時效性：明確數(shù)據(jù)歸集的頻率和方式，實現(xiàn)數(shù)據(jù)的動態(tài)更新；――安全性：加強公共數(shù)據(jù)歸集過程中的安全保障。5歸集方式5.1離線交換實時性低、數(shù)據(jù)量少的數(shù)據(jù)，宜以靜態(tài)文件的方式，通過離線導入實現(xiàn)數(shù)據(jù)的歸集。5.2庫表交換實時性較高、數(shù)據(jù)量較大的數(shù)據(jù)，宜以數(shù)據(jù)庫交換的方式，通過分批分次實現(xiàn)數(shù)據(jù)的歸集。3數(shù)據(jù)高鐵實時性高、數(shù)據(jù)量大的數(shù)據(jù)，宜以數(shù)據(jù)高鐵的方式，通過日志采集和解析實現(xiàn)數(shù)據(jù)的歸集。6考慮要素1業(yè)務(wù)要素6.1.1需求管理：公共管理和服務(wù)機構(gòu)可通過共享機制向公共數(shù)據(jù)主管部門提交數(shù)據(jù)需求清單，由公共數(shù)據(jù)主管部門與相關(guān)公共管理和服務(wù)機構(gòu)協(xié)商歸集。6.1.2審核管理：公共數(shù)據(jù)主管部門對數(shù)據(jù)目錄和數(shù)據(jù)元的注冊、更新與注銷進行審核。6.1.3質(zhì)量管理：公共數(shù)據(jù)主管部門、公共管島B服務(wù)機構(gòu)宜建立數(shù)據(jù)全流程質(zhì)量管控體系，加強數(shù)據(jù)質(zhì)量事前、事中和事后的監(jiān)督檢查，實現(xiàn)問題數(shù)據(jù)可追溯、可定責。6.1.4糾錯管理：公共數(shù)據(jù)主管部門宜建立數(shù)據(jù)質(zhì)量校驗機制，對收集的公共數(shù)據(jù)進行程序化質(zhì)量校驗；數(shù)源單位通過公共數(shù)據(jù)平臺數(shù)據(jù)處理系統(tǒng)，整改問題數(shù)據(jù)并更新、歸慝。6.2技術(shù)要素6.2.1數(shù)據(jù)目錄：公共數(shù)據(jù)主管部門宜遵循DB33/T2349-2021,組織編制本級公共數(shù)據(jù)目錄，并報上一級公共數(shù)據(jù)主管部門審核。6.2.2數(shù)據(jù)元：對數(shù)據(jù)項的標準中文名、英文名、區(qū)域、權(quán)威單位、標準分類、枚舉值等屬性進行管理，可參照DB33/T2426—2022o6.2.3數(shù)據(jù)字典：數(shù)據(jù)值轉(zhuǎn)換時宜保持語義一致化表達，明確權(quán)威數(shù)據(jù)項值域，形成統(tǒng)一數(shù)據(jù)標準。6.2.4數(shù)據(jù)格式：公共數(shù)據(jù)主管部門與公共管理和服務(wù)機構(gòu)宜指明源數(shù)據(jù)與目標數(shù)據(jù)的技術(shù)格式考慮要素，如最大字符、最小字符、長度等，具體可參照DB33/T2349—202106.2.5數(shù)據(jù)標識：收集公共數(shù)據(jù)宜分別以下列號碼或代碼作為必要標識：a） 居民身份證號碼或個人其他有效身份證件號碼；b） 法人統(tǒng)一社會信用代碼；c） 非法人組織統(tǒng)一社會信用代碼或其他識別代碼。6.2.6數(shù)據(jù)分類：宜參照DB33/T2351—2021,基于數(shù)據(jù)元所描述的內(nèi)容、屬性、類型進行分類分級。6.2.7數(shù)據(jù)資源庫：基于DB33/T2426—2022標準形成全市統(tǒng)一的數(shù)據(jù)資源庫，支持部門快速檢索查詢現(xiàn)有數(shù)據(jù)，主要包括數(shù)據(jù)元庫和數(shù)據(jù)集庫。6.3系統(tǒng)要素6.3.1架構(gòu)設(shè)計：公共數(shù)據(jù)主管部門宜參照6.1的業(yè)務(wù)要素，構(gòu)建統(tǒng)一的技術(shù)架構(gòu)以保障公共數(shù)據(jù)的互操作性。6.3.2數(shù)據(jù)交換：公共管理和服務(wù)機構(gòu)按照交換規(guī)范和數(shù)據(jù)目錄，對已有數(shù)據(jù)增加時間戳、唯一標識、數(shù)據(jù)版本和交換標記，滿足數(shù)據(jù)交換操作、數(shù)據(jù)交換跟蹤和審計。6.3.3數(shù)據(jù)倉：公共管理和服務(wù)機構(gòu)宜依托公共數(shù)據(jù)平臺建立數(shù)據(jù)倉，實現(xiàn)自有業(yè)務(wù)數(shù)據(jù)和批量共享數(shù)據(jù)的存放、治理、計算、分析和利用。6.3.4數(shù)據(jù)探查：公共數(shù)據(jù)主管部門宜開展數(shù)據(jù)目錄動態(tài)監(jiān)測，實時發(fā)現(xiàn)公共管理和服務(wù)機構(gòu)數(shù)據(jù)表元數(shù)據(jù)的變化情況，實現(xiàn)數(shù)據(jù)目錄動態(tài)化。6.3.5數(shù)據(jù)圖譜：公共數(shù)據(jù)主管部門宜建立數(shù)據(jù)資產(chǎn)管理系統(tǒng)，對數(shù)據(jù)收集、數(shù)據(jù)歸集、數(shù)據(jù)清洗和數(shù)據(jù)共享等環(huán)節(jié)的整體情況進行跟蹤分析，提高歸集數(shù)據(jù)的使用效率。6.4安全要素6.4.1社會責任：公共數(shù)據(jù)主管部門、公共管理和服務(wù)機構(gòu)在數(shù)據(jù)收集和歸集中宜遵守社會公德和倫理道德，履行數(shù)據(jù)安全保護義務(wù)，承擔社會責任，不損害個人、組織的合法權(quán)益。6.