數(shù)據(jù)開放平臺技術(shù)規(guī)范

DB36/TXXXX—XXXX范圍本標準規(guī)定了江西省政務(wù)信息資源開放數(shù)據(jù)的分類組織方式、開放元數(shù)據(jù)、數(shù)據(jù)開放流程、開放內(nèi)容要求及開放管理制度。本標準適用于江西省各級政府部門開放各類政務(wù)數(shù)據(jù)，并為各相關(guān)部門政務(wù)數(shù)據(jù)資源開放提供實操性指導(dǎo)。規(guī)范性引用文件下列文件對于本文件的引用是必不可少的。凡是已經(jīng)標注日期的引用文件，僅所注明日期的版本適用于本規(guī)范。凡是未標注日期的引用文件，其最新版本（包括所有的修改版）適用于本規(guī)范。GB/T7027信息分類編碼的基本原則和方法GB/T21063.1政務(wù)信息資源目錄體系第1部分：總體框架GB/T21063.1政務(wù)信息資源目錄體系第3部分：核心元數(shù)據(jù)GB/T21063.1政務(wù)信息資源目錄體系第4部分：政務(wù)信息資源分類GB/T21063.1政務(wù)信息資源目錄體系第6部分：技術(shù)管理要求《國務(wù)院關(guān)于批轉(zhuǎn)發(fā)展改革委等部門法人和其他組織統(tǒng)一社會信用代碼制度建設(shè)總體方案的通知》（國發(fā)〔2015〕33號）《江西省政務(wù)信息資源目錄編制規(guī)范（試行）》（贛發(fā)改高技〔2017〕965號）術(shù)語和定義GB/T7027、GB/T21063.1確定的術(shù)語和定義適用于本規(guī)范。元數(shù)據(jù)元數(shù)據(jù)是描述信息資源特征的數(shù)據(jù)。一般包括信息資源的分類、名稱、開放屬性、提供方、發(fā)布日期等。元數(shù)據(jù)元素元數(shù)據(jù)的基本單元，用以描述信息資源的某個特性。元數(shù)據(jù)實體一組說明數(shù)據(jù)相同特性的元數(shù)據(jù)元素。政務(wù)信息資源政務(wù)信息資源是指政務(wù)部門在履行職責(zé)過程中制作或獲取的，以一定形式記錄、保存的文件、資料、圖表和數(shù)據(jù)等各類信息資源，包括政務(wù)部門直接或通過第三方依法采集的、依法授權(quán)管理和因履行職責(zé)需要依托政務(wù)信息系統(tǒng)形成的信息資源等。政務(wù)信息資源目錄政務(wù)信息資源目錄是通過對各政務(wù)信息資源依據(jù)規(guī)范的元數(shù)據(jù)描述，按照一定的分類方法進行排序和編碼的一組信息，用以描述各個政務(wù)信息資源的特征，以便于對政務(wù)信息資源進行檢索、定位與獲取。分類組織方式政務(wù)信息資源開放的數(shù)據(jù)分類組織方式遵循《江西省政務(wù)信息資源目錄編制規(guī)范（試行）》（贛發(fā)改高技〔2017〕965號）。開放元數(shù)據(jù)概述本規(guī)范對開放數(shù)據(jù)的政務(wù)信息資源目錄元數(shù)據(jù)進行定義和描述，內(nèi)容包括的屬性見表1。元數(shù)據(jù)內(nèi)容元數(shù)據(jù)實體元數(shù)據(jù)元素類型信息資源基本信息信息資源名稱核心元數(shù)據(jù)信息資源代碼核心元數(shù)據(jù)信息資源分類核心元數(shù)據(jù)信息資源摘要核心元數(shù)據(jù)信息資源格式核心元數(shù)據(jù)更新周期核心元數(shù)據(jù)發(fā)布日期核心元數(shù)據(jù)信息資源提供方資源提供方核心元數(shù)據(jù)資源提供方代碼核心元數(shù)據(jù)信息資源開放屬性是否向社會開放核心元數(shù)據(jù)開放條件核心元數(shù)據(jù)信息項描述信息項名稱核心元數(shù)據(jù)數(shù)據(jù)類型核心元數(shù)據(jù)數(shù)據(jù)長度開放屬性信息項描述元數(shù)據(jù)描述5.2.1信息資源名稱定義：開放數(shù)據(jù)集的名稱數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：必選項5.2.2信息資源代碼定義：開放數(shù)據(jù)集的唯一標識代碼。信息資源代碼的編碼遵循《江西省政務(wù)信息資源目錄編制規(guī)范（試行）》中的編碼規(guī)則。數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：必選項5.2.3信息資源分類定義：開放數(shù)據(jù)集的分類信息，具體分類詳見4.分類組織方式數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：必選項5.2.4信息資源摘要定義：對信息資源內(nèi)容的概要描述信息數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：必選項5.2.5信息資源格式定義：描述信息資源的存在方式。信息資源提供方應(yīng)盡可能提供可機讀的電子格式及相關(guān)軟件版本信息，如只有紙質(zhì)介質(zhì)應(yīng)盡量提供電子掃描格式。電子格式的信息資源，可采用但不限于：電子文件的存儲格式為OFD、wps、xml、txt、doc、docx、html、pdf、ppt等；電子表格的存儲格式為et、xls、xlsx等；數(shù)據(jù)庫類的存儲格式為DM、KingbaseES、Access、Mysql、DBase、Sybase、Oracle、SqlServer、DB2等；圖形圖像類的存儲格式為jpg、gif、bmp、png等；流媒體類的存儲格式為swf、rm、mpg等；自描述格式，由提供方提出其特殊行業(yè)領(lǐng)域的通用格式，如氣象部門采用的“表格驅(qū)動碼”格式。數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：必選項5.2.6更新周期定義：信息資源的更新頻率。分為實時、每日、每周、每月、每季度、每年等數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：必選項5.2.7發(fā)布日期定義：資源提供方發(fā)布開放數(shù)據(jù)集的日期數(shù)據(jù)類型：字符串型，格式為CCYY-MM-DD最大出現(xiàn)次數(shù)：1備注：必選項5.2.8資源提供方定義：提供開放數(shù)據(jù)集的政務(wù)部門數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：必選項5.2.9資源提供方代碼定義：提供開放數(shù)據(jù)集的政務(wù)部門代碼。代碼采用《國務(wù)院關(guān)于批轉(zhuǎn)發(fā)展改革委等部門法人和其他組織統(tǒng)一社會信用代碼制度建設(shè)總體方案的通知》的法人和其他組織統(tǒng)一社會信用代碼結(jié)構(gòu)。數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：必選項5.2.10是否向社會開放定義：信息資源面向社會公眾開放的屬性，包括“是”和“否”，對應(yīng)取值分別為1和0。數(shù)據(jù)類型：數(shù)值型最大出現(xiàn)次數(shù)：1備注：必選項5.2.11開放條件定義：對社會開放資源的條件描述，當“是否向社會開放”取值為1時，描述開放條件。數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：必選項5.2.12信息項名稱定義：描述開放數(shù)據(jù)集中具體信息項的中文標題。數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：必選項5.2.13數(shù)據(jù)類型定義：標明該信息項的數(shù)據(jù)類型。其中，結(jié)構(gòu)化數(shù)據(jù)（數(shù)據(jù)庫類、電子表格類）的，應(yīng)標明數(shù)據(jù)類型及數(shù)據(jù)長度，包括：字符串型C、數(shù)值型N、貨幣型Y、日期型D、日期時間型T、邏輯型L、備注型M、通用型G、雙精度型B、整形I、浮點型F、二進制型blob、文本型text。數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：可選項；當信息資源為結(jié)構(gòu)化數(shù)據(jù)集時，為必選項。5.2.14數(shù)據(jù)長度定義：標明該信息項在計算機中存儲時占用的字節(jié)數(shù)，適用于結(jié)構(gòu)化數(shù)據(jù)（數(shù)據(jù)庫類、電子表格類）。屬于數(shù)據(jù)庫類的，數(shù)據(jù)長度即該信息項對應(yīng)的字段在數(shù)據(jù)庫中的指定長度或默認長度；屬于電子表格類的，估算該信息項內(nèi)容字數(shù)的上限，并折算成字節(jié)數(shù)，該字節(jié)數(shù)即為數(shù)據(jù)長度。數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：必選項5.2.15開放屬性定義：對該信息項是否向社會開放的描述，包括“是”和“否”，對應(yīng)取值分別1和0。數(shù)據(jù)類型：數(shù)值型最大出現(xiàn)次數(shù)：1備注：必選項5.2.16信息項描述定義：對該信息項的內(nèi)容進行簡要描述數(shù)據(jù)類型：字符串型最大出現(xiàn)次數(shù)：1備注：可選項；當信息資源為結(jié)構(gòu)化數(shù)據(jù)集時，為必選項。數(shù)據(jù)開放平臺技術(shù)架構(gòu)數(shù)據(jù)開放平臺應(yīng)采用“數(shù)據(jù)+服務(wù)+應(yīng)用”的模式，通過信息資源編目，融合各類數(shù)據(jù)，形成數(shù)據(jù)管理體系，統(tǒng)一提供據(jù)數(shù)據(jù)開放、共享服務(wù)，逐步形成數(shù)據(jù)資源中心。需要開放共享的數(shù)據(jù)，都通過數(shù)據(jù)資源中心進行統(tǒng)一的管理。總體框架如圖1所示：開放平臺總體框架圖

開放門戶主要功能6.1.1首頁展示首頁的展示，根據(jù)時政熱點和群眾所關(guān)心的領(lǐng)域、話題，精挑細選出對應(yīng)的數(shù)據(jù)，進行統(tǒng)計分析后，將主要的內(nèi)容進行直觀的展示。主要包括熱門數(shù)據(jù)圖表展示、數(shù)據(jù)主題列表、最新數(shù)據(jù)提示、最熱門數(shù)據(jù)提示以及數(shù)據(jù)下載排行榜等。對于用戶所關(guān)心的數(shù)據(jù)信息，在前臺數(shù)據(jù)目錄頁面顯著位置展現(xiàn)，方便社會公眾和數(shù)據(jù)使用者了解數(shù)據(jù)結(jié)構(gòu)和所包含的原始信息。6.1.2數(shù)據(jù)目錄數(shù)據(jù)目錄是一個開放數(shù)據(jù)的信息集合，也可以稱為數(shù)據(jù)集。數(shù)據(jù)目錄中包含了該數(shù)據(jù)的元數(shù)據(jù)基礎(chǔ)信息、歷史數(shù)據(jù)信息、關(guān)聯(lián)數(shù)據(jù)信息、以及下載地址或數(shù)據(jù)API接口地址等內(nèi)容。建立數(shù)據(jù)目錄，可以更好的進行數(shù)據(jù)管理工作，提高數(shù)據(jù)開放平臺的數(shù)據(jù)全文檢索能力。6.1.3數(shù)據(jù)指數(shù)數(shù)據(jù)指數(shù)，通過設(shè)置一些衡量指標參數(shù)以一定的規(guī)則計算出分析結(jié)果，為社會公眾提供一種直觀的數(shù)據(jù)可視化展現(xiàn)形式，數(shù)據(jù)指數(shù)可以包括部門開放指數(shù)、主題開放指數(shù)、熱搜指數(shù)等。6.1.4數(shù)據(jù)服務(wù)數(shù)據(jù)服務(wù)模塊允許數(shù)據(jù)分析人員、專業(yè)數(shù)據(jù)公司以及數(shù)據(jù)主管部門利用數(shù)據(jù)開放平臺中開放的數(shù)據(jù)進行移動應(yīng)用和第三方數(shù)據(jù)服務(wù)的開發(fā)。數(shù)據(jù)開放平臺為社會公眾、軟件開發(fā)公司和人員、數(shù)據(jù)主管部門等提供上傳的入口，讓數(shù)據(jù)發(fā)揮其應(yīng)有的價值。6.1.5數(shù)據(jù)預(yù)覽數(shù)據(jù)預(yù)覽功能可以至少提供前5條樣例數(shù)據(jù)進行預(yù)覽，為數(shù)據(jù)使用者提供一個數(shù)據(jù)概貌，方便數(shù)據(jù)使用者快速判斷數(shù)據(jù)內(nèi)容是否符合要求，提高平臺頁面響應(yīng)速度，提高數(shù)據(jù)使用者對數(shù)據(jù)的理解。6.1.6關(guān)聯(lián)數(shù)據(jù)推薦和數(shù)據(jù)圖譜描述數(shù)據(jù)與數(shù)據(jù)之間存在的多種關(guān)聯(lián)關(guān)系，比如：強關(guān)聯(lián)關(guān)系或弱關(guān)聯(lián)關(guān)系等。數(shù)據(jù)圖譜提供了從"關(guān)系"的角度去分析問題的能力，結(jié)合圖數(shù)據(jù)庫技術(shù)將各種不同類型的信息聯(lián)系在一起，形成一張數(shù)據(jù)關(guān)系網(wǎng)絡(luò)。6.1.7數(shù)據(jù)互動數(shù)據(jù)開放平臺為社會公眾提供數(shù)據(jù)互動功能，互動內(nèi)容包括允許數(shù)據(jù)使用者將開放的數(shù)據(jù)頁面鏈接分享到社交網(wǎng)絡(luò)，如分享給QQ好友、QQ空間、微信和微博等。“收藏”功能支持將感興趣的數(shù)據(jù)目錄進行收藏。“糾錯”功能實現(xiàn)將社會公眾發(fā)現(xiàn)數(shù)據(jù)錯誤的問題及時反饋給該數(shù)據(jù)目錄的系統(tǒng)管理員、數(shù)據(jù)管理員、數(shù)據(jù)提供單位或機構(gòu)人員，積極發(fā)揮社會公眾的力量，幫助數(shù)據(jù)開放平臺完善數(shù)據(jù)質(zhì)量。6.1.8交流與反饋完善數(shù)據(jù)開放主管部門、數(shù)據(jù)提供部門和社會公眾之間的溝通交流機制，通過該功能可以快速了解社會公眾對數(shù)據(jù)的需求、咨詢和建議，通過設(shè)置一些常見問題查詢，也可以讓社會公眾清晰地知道數(shù)據(jù)開放平臺是什么、對外提供什么服務(wù)、數(shù)據(jù)開放的政策以及他們所擁有的權(quán)益，為數(shù)據(jù)開放平臺增添活力，提高數(shù)據(jù)開放的透明度。開放平臺部署架構(gòu)6.2.1部署架構(gòu)數(shù)據(jù)開放平臺的數(shù)據(jù)來源均是從政務(wù)外網(wǎng)發(fā)審核流程后，再按需求整理數(shù)據(jù)資源推送到互聯(lián)網(wǎng)區(qū)，供互聯(lián)網(wǎng)用戶使用?？紤]到安全性和可靠性，開放平臺的數(shù)據(jù)流向由政務(wù)外網(wǎng)單向流出到互聯(lián)網(wǎng)區(qū)。對于互聯(lián)網(wǎng)區(qū)產(chǎn)生的日志數(shù)據(jù)或用戶數(shù)據(jù)，通過網(wǎng)閘，定時導(dǎo)入政務(wù)外網(wǎng)。部署架構(gòu)參考示意圖，如圖2所示：開放平臺部署架構(gòu)參考示意圖6.2.2訪問策略根據(jù)圖2所示，互聯(lián)網(wǎng)區(qū)和政務(wù)外網(wǎng)區(qū)服務(wù)器之間，以及用戶與服務(wù)器之間的訪問策略如表2、表3所示：互聯(lián)網(wǎng)區(qū)服務(wù)器訪問策略所在區(qū)域源IP/服務(wù)器名稱方向目標IP/服務(wù)器名稱目標端口所在區(qū)域互聯(lián)網(wǎng)區(qū)數(shù)據(jù)開放門戶應(yīng)用服務(wù)器--à數(shù)據(jù)開放數(shù)據(jù)庫服務(wù)器自行定義互聯(lián)網(wǎng)區(qū)數(shù)據(jù)庫互聯(lián)網(wǎng)用戶--à數(shù)據(jù)開放門戶應(yīng)用服務(wù)器80政務(wù)外網(wǎng)區(qū)服務(wù)器訪問策略所在區(qū)域源IP方向目標IP目標端口所在區(qū)域政務(wù)外網(wǎng)區(qū)數(shù)據(jù)開放后臺--à數(shù)據(jù)開放數(shù)據(jù)庫服務(wù)器自行定義互聯(lián)網(wǎng)區(qū)政務(wù)外網(wǎng)區(qū)政務(wù)外網(wǎng)用戶--à數(shù)據(jù)開放后臺80政務(wù)外網(wǎng)區(qū)數(shù)據(jù)開放流程根據(jù)《江西省政務(wù)信息資源目錄編制規(guī)范》，數(shù)據(jù)資源的共享和開放可分為無條件共享、有條件共享、不予共享、是否向社會開放等幾種類型，數(shù)據(jù)開放的流程需遵循完成數(shù)據(jù)采集、入庫、開放，數(shù)據(jù)提供方需負責(zé)維護和更新本部門和開放數(shù)據(jù)資源目錄，保證上述信息的真實性、準確性、完整性、及時性和有效性。如圖3所示：政務(wù)數(shù)據(jù)資源開放流程開放內(nèi)容要求政務(wù)信息資源的開放范圍政務(wù)信息資源的開放范圍應(yīng)重點包括信用、交通、醫(yī)療、衛(wèi)生、就業(yè)、社保、地理、文化、教育、科技、能源、農(nóng)業(yè)、環(huán)境、經(jīng)濟、金融、安全、統(tǒng)計、氣象、企業(yè)登記監(jiān)管等民生保障服務(wù)相關(guān)領(lǐng)域，將可開放的政府數(shù)據(jù)集中向社會開放。開放數(shù)據(jù)資源的提供形式數(shù)據(jù)開放平臺盡可能的提高開放數(shù)據(jù)資源的機器可讀率，盡量不以PDF文件、網(wǎng)頁或圖片等格式發(fā)布，而應(yīng)以標準的結(jié)構(gòu)化文件發(fā)布，如CSV、XML、JSON、XLS、XLSX等。同時，進一步建立完善的數(shù)據(jù)發(fā)布審核流程，結(jié)合系統(tǒng)自動化檢查和人工審查的方式，對發(fā)布的數(shù)據(jù)格式進行檢查，確保所發(fā)布的數(shù)據(jù)滿足數(shù)據(jù)格式的開放性要求。

附錄1開放管理制度法律法規(guī)制定地方政府通過立法和出臺相關(guān)政策，規(guī)范政府數(shù)據(jù)在“聚、通、用”各個環(huán)節(jié)的合法性、合規(guī)性。對政府數(shù)據(jù)實行動態(tài)管理，在部門職責(zé)、平臺