校園數(shù)據(jù)中臺(tái)技術(shù)方案

校園數(shù)據(jù)中臺(tái)技術(shù)方案序號(hào)具體技術(shù)(參數(shù))要求13、數(shù)據(jù)中臺(tái)滿足我校長期進(jìn)行數(shù)據(jù)資產(chǎn)建設(shè)的各類要求，包括校級(jí)標(biāo)準(zhǔn)制定與管理、規(guī)范全校數(shù)據(jù)的采集、存儲(chǔ)、管理、處理、使用，構(gòu)建校級(jí)數(shù)據(jù)倉庫；并理清數(shù)據(jù)關(guān)系，構(gòu)建業(yè)務(wù)域數(shù)據(jù)模型，實(shí)現(xiàn)“一數(shù)一源”，為全校業(yè)務(wù)運(yùn)行及數(shù)據(jù)決策分析提供統(tǒng)一的數(shù)據(jù)支撐。為滿足平臺(tái)安全性，數(shù)據(jù)中臺(tái)滿足信息系統(tǒng)安全等級(jí)保護(hù)2.0第三級(jí)或以上的網(wǎng)絡(luò)安全等級(jí)保護(hù)測評(píng)要求的符合性測試報(bào)告。數(shù)據(jù)中臺(tái)需包括：信息標(biāo)準(zhǔn)管理、數(shù)據(jù)集成管理、數(shù)據(jù)存儲(chǔ)管理、貼源層管理、數(shù)據(jù)倉庫管理、交換庫管理、指標(biāo)管理工具、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)補(bǔ)采工具、數(shù)據(jù)目錄管理、數(shù)據(jù)安全管理、數(shù)據(jù)開放門戶。3.1.信息標(biāo)準(zhǔn)管理提供數(shù)據(jù)標(biāo)準(zhǔn)、標(biāo)準(zhǔn)代碼管理，根據(jù)學(xué)校信息標(biāo)準(zhǔn)需求，規(guī)范化、系統(tǒng)化的動(dòng)態(tài)管理各數(shù)據(jù)的業(yè)務(wù)屬性、技術(shù)屬性和管理屬性。基于數(shù)據(jù)元素標(biāo)準(zhǔn)與代碼標(biāo)準(zhǔn)的細(xì)粒度標(biāo)準(zhǔn)管理，實(shí)現(xiàn)學(xué)校數(shù)據(jù)標(biāo)準(zhǔn)的制定、發(fā)布、落標(biāo)、變更。具體要求如下：（1）數(shù)據(jù)元素1)需支持批量導(dǎo)入《GB/T36351.2-2018信息技術(shù)學(xué)習(xí)、教育和培訓(xùn)教育管理數(shù)據(jù)元素第2部分：公共數(shù)據(jù)元素》中的標(biāo)準(zhǔn)數(shù)據(jù)元素到平臺(tái)。導(dǎo)入時(shí)，需能檢測數(shù)據(jù)元素依賴的標(biāo)準(zhǔn)代碼是否存在，不存在時(shí)，需要同步導(dǎo)入依賴的標(biāo)準(zhǔn)代碼。2)需支持對(duì)數(shù)據(jù)元素進(jìn)行查詢、新增、注冊、標(biāo)準(zhǔn)落實(shí)、變更、廢止等管理功能。3)數(shù)據(jù)元素屬性需包含業(yè)務(wù)屬性、技術(shù)屬性、管理屬性等；數(shù)據(jù)元素的業(yè)務(wù)屬性需包含數(shù)據(jù)元素分類、標(biāo)識(shí)符、數(shù)據(jù)元素名稱、漢語簡拼、定義等；數(shù)據(jù)元素的技術(shù)屬性需包含數(shù)據(jù)類型、長度、精度、值域；數(shù)據(jù)元素的管理屬性需包含標(biāo)準(zhǔn)級(jí)別、標(biāo)準(zhǔn)引用來源、批準(zhǔn)日期、版本等。4)需支持按狀態(tài)管理數(shù)據(jù)元素，需包括草稿、標(biāo)準(zhǔn)、廢止等不同狀態(tài)。只有草稿狀態(tài)的數(shù)據(jù)元素，才能刪除，其他狀態(tài)的數(shù)據(jù)元素，不可以刪除。對(duì)于多個(gè)草稿狀態(tài)的數(shù)據(jù)元素，需支持批量注冊。5)同一個(gè)數(shù)據(jù)元素的多個(gè)版本，僅能有一個(gè)版本處于標(biāo)準(zhǔn)狀態(tài)，當(dāng)注冊一個(gè)新版本時(shí)，其他標(biāo)準(zhǔn)狀態(tài)版本自動(dòng)變更為廢止?fàn)顟B(tài)。變更時(shí)，需能生成一個(gè)高版本的草稿狀態(tài)的數(shù)據(jù)元素標(biāo)準(zhǔn)；當(dāng)某數(shù)據(jù)元素已經(jīng)存在變更的草稿狀態(tài)的數(shù)據(jù)元素時(shí)，不能重復(fù)變更。6)需支持對(duì)數(shù)據(jù)元素取值范圍進(jìn)行管理，需包含“限定范圍”，“引用標(biāo)準(zhǔn)代碼值”，“枚舉值”等形式。7)標(biāo)準(zhǔn)落實(shí)時(shí)，需支持自動(dòng)匹配數(shù)據(jù)中心內(nèi)哪些字段與數(shù)據(jù)元素一致，需支持批量選擇進(jìn)行標(biāo)準(zhǔn)落實(shí)，保證字段定義的標(biāo)準(zhǔn)化。8)需支持?jǐn)?shù)據(jù)元素分類的管理，包括新增、編輯、刪除功能；只有該數(shù)據(jù)元素分類下沒有數(shù)據(jù)元素時(shí)，才可以刪除該分類。（2）標(biāo)準(zhǔn)代碼1)需支持批量導(dǎo)入國標(biāo)《GB/T33782-2017信息技術(shù)學(xué)習(xí)、教育和培訓(xùn)教育管理基礎(chǔ)代碼》標(biāo)準(zhǔn)代碼到平臺(tái)。導(dǎo)入時(shí)，需能自動(dòng)過濾已導(dǎo)入的標(biāo)準(zhǔn)代碼。導(dǎo)入的不能對(duì)已有的代碼進(jìn)行更改和刪除，僅新增。2)需支持對(duì)標(biāo)準(zhǔn)代碼進(jìn)行查詢、新增、編輯、配置代碼等管理功能；新增標(biāo)準(zhǔn)代碼時(shí)，標(biāo)準(zhǔn)代碼名稱不可重復(fù)，新增的標(biāo)準(zhǔn)代碼默認(rèn)為已啟用狀態(tài)。3)需支持對(duì)標(biāo)準(zhǔn)代碼中的代碼值進(jìn)行新增，需支持添加輔助代碼與上級(jí)代碼。4)需支持查看標(biāo)準(zhǔn)代碼的引用關(guān)系，可查看引用該標(biāo)準(zhǔn)代碼的表名和字段名。5)需支持標(biāo)準(zhǔn)代碼刪除操作，刪除前必須先停用，不可以直接刪除。6)需支持標(biāo)準(zhǔn)代碼分類的管理，包括新增、編輯、刪除功能。只有該標(biāo)準(zhǔn)代碼分類下沒有標(biāo)準(zhǔn)代碼時(shí)，才可以刪除該分類。（3）標(biāo)準(zhǔn)發(fā)布1)需支持代碼標(biāo)準(zhǔn)、數(shù)據(jù)標(biāo)準(zhǔn)、編碼規(guī)范生成或?qū)搿l(fā)布申請(qǐng)、發(fā)布審核流程管理，需支持查詢、作廢、刪除、門戶可見、門戶隱藏等操作。2)需支持編碼規(guī)范文件上傳管理，需支持pdf、doc、docx、png、jpg、jpeg、xls、xlsx、zip等文件格式。3)代碼標(biāo)準(zhǔn)、數(shù)據(jù)標(biāo)準(zhǔn)、編碼規(guī)范發(fā)布時(shí)支持設(shè)置標(biāo)準(zhǔn)號(hào)、實(shí)施日期、替代標(biāo)準(zhǔn)；標(biāo)準(zhǔn)號(hào)管理支持三段式管理，第一段為學(xué)校編碼，默認(rèn)值可在系統(tǒng)配置中調(diào)整，第二段為標(biāo)準(zhǔn)編號(hào)，第三段為年月。4)代碼標(biāo)準(zhǔn)和數(shù)據(jù)標(biāo)準(zhǔn)支持PDF文件下載及預(yù)覽;新版本的發(fā)布不影響歷史版本的查詢。編碼規(guī)范支持上傳文件格式的下載。3.2.數(shù)據(jù)集成管理提供數(shù)據(jù)采集、處理能力，對(duì)數(shù)據(jù)采集、數(shù)據(jù)清洗、數(shù)據(jù)標(biāo)準(zhǔn)化、數(shù)據(jù)關(guān)聯(lián)合并等不同的數(shù)據(jù)集成任務(wù)進(jìn)行統(tǒng)一管理與調(diào)度；用來完成面向分散數(shù)據(jù)的集成匯聚工作，解決我校數(shù)據(jù)孤島的問題。具體要求如下：（1）需提供外部數(shù)據(jù)源管理，可按來源庫與目標(biāo)庫的維度對(duì)數(shù)據(jù)源進(jìn)行分類管理。（2）為方便數(shù)據(jù)源的管理，需支持添加數(shù)據(jù)源標(biāo)識(shí)與責(zé)任單位；需支持對(duì)數(shù)據(jù)源進(jìn)行新增、編輯、測試、復(fù)制、停用、啟用、刪除等操作。（3）需支持國內(nèi)外主流數(shù)據(jù)庫,且支持以下形式的數(shù)據(jù)采集，包括Oracle、MySQL、SQLServer、PostgreSQL、MariaDB、達(dá)夢等的輸入與輸出。（4）需支持集成任務(wù)管理，可按數(shù)據(jù)采集、數(shù)據(jù)清洗轉(zhuǎn)換、數(shù)據(jù)建模、自定義對(duì)集成任務(wù)進(jìn)行分類。（5）數(shù)據(jù)集成任務(wù)需支持以可視化、零代碼的數(shù)據(jù)集成方式完成，需支持按數(shù)據(jù)輸入、關(guān)聯(lián)合并、數(shù)據(jù)過濾、數(shù)據(jù)映射、數(shù)據(jù)輸出等流程化的形式完成數(shù)據(jù)集成操作。（6）為滿足一些復(fù)雜集成操作，需支持自定義集成任務(wù)，將外部的數(shù)據(jù)集成任務(wù)以文件形式進(jìn)行導(dǎo)入，需至少支持json、ktr等類型的集成任務(wù)文件。（7）需支持對(duì)數(shù)據(jù)集成任務(wù)運(yùn)行情況進(jìn)行監(jiān)控，需能通過健康度指標(biāo)來反映任務(wù)在近期運(yùn)行中的穩(wěn)定程度，需通過不同顏色來區(qū)分展示。（8）集成任務(wù)可按“數(shù)據(jù)采集”、“數(shù)據(jù)清洗轉(zhuǎn)換”、“數(shù)據(jù)建?！钡炔煌愋头诸惞芾?；需可通過健康度來反應(yīng)任務(wù)在近期運(yùn)行中的穩(wěn)定程度，根據(jù)近期任務(wù)執(zhí)行的成功率來反應(yīng)健康度，需通過不同顏色狀態(tài)或其它直觀的展示形式反映不同的健康度，以提高管理人員對(duì)任務(wù)的精細(xì)化運(yùn)維管理。（9）需支持新建調(diào)度計(jì)劃，通過可視化界面以“拖拉拽”的簡易操作形式即可完成任務(wù)調(diào)度排布；需支持串行、并行執(zhí)行的任務(wù)調(diào)度形式；需支持按調(diào)度周期、每秒、循環(huán)、指定時(shí)間等自定義cron表達(dá)式執(zhí)行調(diào)度，cron表達(dá)式支持可視化配置，無需編寫表達(dá)式規(guī)則。（10）需支持可視化展示平臺(tái)任務(wù)運(yùn)行情況，包括調(diào)度監(jiān)控、數(shù)據(jù)源監(jiān)控、任務(wù)監(jiān)控、任務(wù)運(yùn)行設(shè)備監(jiān)控等信息，方便管理者對(duì)任務(wù)的運(yùn)維管理。（11）調(diào)度監(jiān)控需支持以運(yùn)行時(shí)刻圖的方式展示構(gòu)建數(shù)倉、質(zhì)量檢查、數(shù)據(jù)交換和其他調(diào)度的每日?qǐng)?zhí)行情況。應(yīng)展示每次調(diào)度的開始時(shí)間、結(jié)束時(shí)間、耗費(fèi)時(shí)長和運(yùn)行結(jié)果。（12）數(shù)據(jù)源監(jiān)控需能展示來源庫和目標(biāo)庫的正常連接和錯(cuò)誤連接的數(shù)據(jù)源統(tǒng)計(jì)情況。（13）任務(wù)監(jiān)控需能以圖表形式展示交換、采集、清洗轉(zhuǎn)換、建模和其他自定義任務(wù)的運(yùn)行次數(shù)和成功次數(shù)。應(yīng)能展示最近5次及以上任務(wù)運(yùn)行詳情，包括任務(wù)開始時(shí)間、任務(wù)類型、任務(wù)名稱、運(yùn)行時(shí)長、運(yùn)行結(jié)果等信息。（14）任務(wù)運(yùn)行設(shè)備監(jiān)控應(yīng)展示每個(gè)運(yùn)行任務(wù)的服務(wù)器設(shè)備情況，包括每臺(tái)設(shè)備的IP地址、CPU數(shù)、內(nèi)存和指定時(shí)間范圍內(nèi)的任務(wù)運(yùn)行次數(shù)。3.3.數(shù)據(jù)存儲(chǔ)管理數(shù)據(jù)存儲(chǔ)圍繞高校數(shù)據(jù)特征，滿足大容量、高性能、高可用、可管理等需求。具體要求如下：（1）需支持sharednothing等具有高擴(kuò)展性的先進(jìn)數(shù)據(jù)庫架構(gòu)。（2）需提供分布式事務(wù)機(jī)制。通過將數(shù)據(jù)分布到多個(gè)節(jié)點(diǎn)上來實(shí)現(xiàn)規(guī)模數(shù)據(jù)的存儲(chǔ)，通過并行查詢處理來提高查詢性能。每個(gè)節(jié)點(diǎn)僅查詢自己的數(shù)據(jù)。所得到的結(jié)果再經(jīng)過主節(jié)點(diǎn)處理得到最終結(jié)果。（3）需支持行存儲(chǔ)和列存儲(chǔ)，采用hash分布的數(shù)據(jù)分布機(jī)制，計(jì)算節(jié)點(diǎn)和數(shù)據(jù)存儲(chǔ)緊密耦合。（4）擁有完善的SQL標(biāo)準(zhǔn)支持，全面支持SQL92、SQL99、SQL2003以及OLAP擴(kuò)展；需支持對(duì)于JDBC、ODBC、C、PythonAPI等接口的支持。（5）可以在同一個(gè)并行數(shù)據(jù)流引擎上執(zhí)行所有查詢和分析（SQL、MapReduce、R語言等）操作，從而允許分析人員、開發(fā)人員和統(tǒng)計(jì)人員使用同一個(gè)基礎(chǔ)構(gòu)架進(jìn)行數(shù)據(jù)分析。（6）需支持B+Tree、哈希、位圖、GiST和GIN，從而能夠?qū)崿F(xiàn)多種索引功能，提供給數(shù)據(jù)架構(gòu)師實(shí)施優(yōu)化設(shè)計(jì)所必需的工具。（7）需支持基于行和列的細(xì)粒度數(shù)據(jù)訪問權(quán)限訪問控制，讓不同權(quán)限的訪問者只能看到被授權(quán)的部分?jǐn)?shù)據(jù)，確保數(shù)據(jù)共享不影響防范數(shù)據(jù)泄露。（8）需采用業(yè)內(nèi)領(lǐng)先的壓縮技術(shù)，提高性能的同時(shí)，減少存儲(chǔ)數(shù)據(jù)所需的空間。（9）需支持行存儲(chǔ)、列存儲(chǔ)、外部表等多態(tài)存儲(chǔ)，學(xué)?？梢愿鶕?jù)數(shù)據(jù)熱度或者訪問模式的不同使用不同的存儲(chǔ)方式。（10）需提供高效的資源管理機(jī)制，主要包括對(duì)并發(fā)查詢數(shù)量的限制，查詢執(zhí)行時(shí)內(nèi)存、CPU資源使用的限制等；支持資源隊(duì)列(ResourceQueue)和資源組(ResourceGroup)兩種資源管理方式。（11）需支持各種過程化編程語言，包括PL/PostgreSQL、PL/R、PL/Python、PL/Java、PL/Perl等語言擴(kuò)展。在高級(jí)數(shù)據(jù)分析方面，通過MADlib擴(kuò)展模塊，學(xué)?？梢院芊奖愕赝瓿纱笠?guī)模并行分析。3.4.貼源層管理從業(yè)務(wù)系統(tǒng)數(shù)據(jù)源或離線表單采集的原始數(shù)據(jù)組成貼源層。（1）需支持按貼源層、標(biāo)準(zhǔn)層、主題層、主數(shù)據(jù)進(jìn)行分層管理，貼源層支持對(duì)學(xué)校原始數(shù)據(jù)的采集、存儲(chǔ)；標(biāo)準(zhǔn)層支持對(duì)原始數(shù)據(jù)按學(xué)校數(shù)據(jù)標(biāo)準(zhǔn)進(jìn)行標(biāo)準(zhǔn)轉(zhuǎn)化與數(shù)據(jù)清洗；主題層提供按學(xué)校業(yè)務(wù)場景進(jìn)行主題數(shù)據(jù)建模；主數(shù)據(jù)提供學(xué)校核心交換數(shù)據(jù)的建模與處理。（2）貼源層支持批量將外部數(shù)據(jù)源中的表和數(shù)據(jù)采集到貼源層，采集時(shí)支持全量或增量采集。采集時(shí)支持忽略錯(cuò)誤數(shù)據(jù)條目，繼續(xù)執(zhí)行采集任務(wù)。（3）為方便對(duì)貼源層中數(shù)據(jù)表的管理，需支持將貼源層的表按照貼源表和貼源代碼進(jìn)行分類管理。（4）需支持查看貼源表的詳情概覽，需展示源頭表信息與本表信息；源頭表信息中需包含數(shù)據(jù)源名稱，源頭表名稱，源頭表數(shù)據(jù)量；本表信息需包含表名、物理表名、字段數(shù)量、數(shù)據(jù)量、數(shù)據(jù)上次更新時(shí)間、責(zé)任單位、集成任務(wù)等信息。（5）需支持自定義數(shù)據(jù)清洗規(guī)則過濾臟數(shù)據(jù)，過濾的數(shù)據(jù)歸集為黑名單數(shù)據(jù)，支持對(duì)黑名單數(shù)據(jù)進(jìn)行查詢。（6）需支持貼源代碼值映射功能，支持貼源代碼表與標(biāo)準(zhǔn)代碼匹配映射關(guān)系。支持代碼自動(dòng)映射機(jī)制，當(dāng)源頭表代碼發(fā)生變化,代碼未映射成功時(shí),會(huì)使用名稱與代碼標(biāo)準(zhǔn)的名稱、簡稱進(jìn)行匹配映射。（7）需支持貼源表、標(biāo)準(zhǔn)表的數(shù)據(jù)血緣關(guān)系管理，以外部數(shù)據(jù)源、貼源層、標(biāo)準(zhǔn)層、主題層等節(jié)點(diǎn)查看數(shù)據(jù)的上游與下游數(shù)據(jù)流轉(zhuǎn)關(guān)系。（8）需支持停用和刪除貼源表、標(biāo)準(zhǔn)表、主題表，只有停用的表才能刪除。3.5.數(shù)據(jù)倉庫管理為了規(guī)范全校數(shù)據(jù)的采集、處理、存儲(chǔ)與管理，數(shù)據(jù)倉庫支持對(duì)全校數(shù)據(jù)進(jìn)行分層操作管理，使學(xué)校的數(shù)據(jù)資產(chǎn)結(jié)構(gòu)更加清晰，數(shù)據(jù)血緣透明可追溯，數(shù)據(jù)關(guān)系條理化。（1）標(biāo)準(zhǔn)層管理1)需支持按業(yè)務(wù)域、業(yè)務(wù)子域和業(yè)務(wù)單元三級(jí)對(duì)標(biāo)準(zhǔn)層數(shù)據(jù)模型進(jìn)行分類管理；已預(yù)置標(biāo)準(zhǔn)模型需嚴(yán)格遵循三級(jí)分類。2)需支持批量導(dǎo)入標(biāo)準(zhǔn)層數(shù)據(jù)模型；導(dǎo)入時(shí)支持對(duì)相關(guān)引用表、引用代碼表進(jìn)行同步導(dǎo)入。3)需支持查看標(biāo)準(zhǔn)表的概覽信息，需展示表名、物理表名、引用模型信息、字段數(shù)、數(shù)據(jù)量、數(shù)據(jù)上次更新時(shí)間、責(zé)任單位、集成情況等信息。支持標(biāo)準(zhǔn)表的數(shù)據(jù)明細(xì)查詢；支持查看數(shù)據(jù)的變更記錄；需能檢測標(biāo)準(zhǔn)表內(nèi)字段與數(shù)據(jù)元素之間差異，并自動(dòng)進(jìn)行標(biāo)準(zhǔn)落實(shí)以實(shí)現(xiàn)和數(shù)據(jù)元素標(biāo)準(zhǔn)保持一致。4)需支持新增和查看與標(biāo)準(zhǔn)表相關(guān)的清洗轉(zhuǎn)換任務(wù)；數(shù)據(jù)清洗轉(zhuǎn)化任務(wù)支持通過零代碼配置，支持可視化配置數(shù)據(jù)輸入、左右關(guān)聯(lián)、過濾、計(jì)算字段、字段映射、數(shù)據(jù)輸出等屬性來完成清洗轉(zhuǎn)換任務(wù)。（2）主題層管理1)主題層數(shù)據(jù)模型需支持面向業(yè)務(wù)對(duì)象和面向業(yè)務(wù)過程進(jìn)行分類管理。支持批量導(dǎo)入主題層數(shù)據(jù)模型。2)主題層事實(shí)模型結(jié)構(gòu)需支持以ER圖方式呈現(xiàn)事實(shí)表以及關(guān)聯(lián)維度。支持關(guān)聯(lián)維度展開或收縮的功能，便于查看瀏覽。3)需支持查看事實(shí)表的概覽信息，需展示事實(shí)名稱、引用模型、事實(shí)類型、事務(wù)事實(shí)、維度數(shù)量(個(gè))、度量數(shù)量(個(gè))、數(shù)據(jù)量(條)、數(shù)據(jù)上次更新、集成情況等信息。3.6.交換庫管理交換庫管理需支持按主數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)分類，分別構(gòu)建主數(shù)據(jù)庫和業(yè)務(wù)數(shù)據(jù)庫，解決業(yè)務(wù)系統(tǒng)數(shù)據(jù)交換需求。（1）需支持批量導(dǎo)入主數(shù)據(jù)模型；支持對(duì)主數(shù)據(jù)模型進(jìn)行編輯、啟用、停用、刪除等操作。（2）需支持主數(shù)據(jù)表的數(shù)據(jù)明細(xì)查詢，支持查看表結(jié)構(gòu)的變更記錄，支持查看主數(shù)據(jù)的變更記錄。（3）需支持以主數(shù)據(jù)表為中心，以外部數(shù)據(jù)源、貼源層、主數(shù)據(jù)等節(jié)點(diǎn)查看數(shù)據(jù)的上游與下游數(shù)據(jù)流轉(zhuǎn)關(guān)系。（4）需支持在清洗轉(zhuǎn)換任務(wù)的輸出階段配置過濾規(guī)則，過濾后的數(shù)據(jù)方能進(jìn)入主數(shù)據(jù)表中。3.7.指標(biāo)管理工具為滿足學(xué)校數(shù)據(jù)應(yīng)用過程中對(duì)于各類指標(biāo)，例如統(tǒng)計(jì)指標(biāo)，評(píng)價(jià)指標(biāo)等對(duì)比分析統(tǒng)計(jì)，需進(jìn)行指標(biāo)體系化管理。（1）指標(biāo)管理需支持指標(biāo)分類管理；當(dāng)指標(biāo)分類下面數(shù)據(jù)指標(biāo)不為空時(shí)，不允許刪除。（2）指標(biāo)管理需支持創(chuàng)建原子指標(biāo)、派生指標(biāo)、衍生指標(biāo)管理；需支持查看指標(biāo)基本信息、指標(biāo)數(shù)據(jù)、指標(biāo)血緣關(guān)系及指標(biāo)計(jì)算任務(wù)運(yùn)行日志信息。（3）需能按需創(chuàng)建、啟用、停用、刪除原子指標(biāo)、派生指標(biāo)和衍生指標(biāo)。需支持派生指標(biāo)可視化配置過程，可通過配置統(tǒng)計(jì)周期、過濾條件、聚合粒度、聚合函數(shù)設(shè)置，并可按設(shè)定指標(biāo)周期查詢數(shù)據(jù)指標(biāo)計(jì)算數(shù)據(jù)。（4）派生指標(biāo)需支持自定義統(tǒng)計(jì)周期、統(tǒng)計(jì)范圍限定、統(tǒng)計(jì)算法設(shè)置；統(tǒng)計(jì)范圍限定需支持與、或、不等于、空、為空、包含、模糊匹配等設(shè)置，統(tǒng)計(jì)函數(shù)支持求和、平均、計(jì)數(shù)、去重計(jì)數(shù)、最大值、最小值等算法；支持調(diào)度規(guī)則設(shè)置，完成數(shù)據(jù)自動(dòng)化計(jì)算。（5）衍生指標(biāo)需支持可視化配置，支持從指標(biāo)庫拖拽數(shù)據(jù)指標(biāo)，支持算術(shù)運(yùn)算符、比較運(yùn)算符、邏輯運(yùn)算符等計(jì)算；支持調(diào)試及結(jié)果查看；支持調(diào)度規(guī)則設(shè)置，完成數(shù)據(jù)自動(dòng)化計(jì)算。（6）需支持統(tǒng)計(jì)周期的靈活可視化配置，需支持基準(zhǔn)日期、偏移量及單位設(shè)置，基準(zhǔn)日期支持該日、該周首日、該月首日、該季度首日、該年首日、該學(xué)期首日、該學(xué)年首日等選擇。3.8.數(shù)據(jù)質(zhì)量管理為持續(xù)發(fā)現(xiàn)我校數(shù)據(jù)質(zhì)量問題，需預(yù)置數(shù)據(jù)質(zhì)量檢測規(guī)則，對(duì)數(shù)據(jù)質(zhì)量問題進(jìn)行管理、檢測、跟蹤、處理，常態(tài)化自動(dòng)生成數(shù)據(jù)質(zhì)量報(bào)告，持續(xù)提升我校數(shù)據(jù)質(zhì)量。（1）數(shù)據(jù)質(zhì)量管理需包含質(zhì)檢規(guī)則、質(zhì)檢方案、質(zhì)檢結(jié)果管理。規(guī)則庫需至少包含非空檢查、值域檢查、規(guī)范檢查、唯一性檢查、引用完整性檢查、邏輯檢查等類型的檢測規(guī)則。需支持按數(shù)據(jù)元素批量新增質(zhì)檢規(guī)則。（2）需支持設(shè)置進(jìn)行質(zhì)檢的表、檢查字段；支持通過正則表達(dá)式自定義數(shù)據(jù)質(zhì)量檢測規(guī)則。（3）需支持?jǐn)?shù)據(jù)質(zhì)量規(guī)則配置及數(shù)據(jù)質(zhì)檢方案配置，需支持質(zhì)檢規(guī)則的正則表達(dá)式設(shè)置，需支持質(zhì)檢方案的執(zhí)行周期，預(yù)警規(guī)則，質(zhì)檢報(bào)告發(fā)送策略和發(fā)送人員設(shè)置功能。（4）需支持對(duì)質(zhì)量檢測規(guī)則進(jìn)行問題級(jí)別定義，需至少包含“建議”“輕微”“一般”“嚴(yán)重”等維度，便于對(duì)數(shù)據(jù)質(zhì)量問題采取不同響應(yīng)措施。（5）需支持自定義保留最近檢測次數(shù)的質(zhì)檢結(jié)果，而質(zhì)檢方案匯總數(shù)據(jù)將永久保存。（6）需支持質(zhì)檢方案的執(zhí)行周期，預(yù)警規(guī)則，質(zhì)檢報(bào)告發(fā)送策略和發(fā)送人員進(jìn)行設(shè)置。支持按每日、每周、每月、每年進(jìn)行質(zhì)檢任務(wù)調(diào)度；支持通過問題級(jí)別、質(zhì)檢分?jǐn)?shù)設(shè)置閾值，通過不同閾值將預(yù)警級(jí)別分為高、中、低三個(gè)級(jí)別。質(zhì)檢報(bào)告發(fā)送策略支持每執(zhí)行多少次發(fā)送一次、預(yù)警結(jié)果高于或等于某預(yù)警級(jí)別時(shí)、質(zhì)檢分?jǐn)?shù)低于多少分時(shí)三種方式，也支持三種方式組合。（7）需支持查看數(shù)據(jù)質(zhì)量分析報(bào)告，質(zhì)檢報(bào)告支持PDF格式下載；報(bào)告內(nèi)容需包含數(shù)據(jù)質(zhì)檢綜合評(píng)分、質(zhì)檢評(píng)分歷史趨勢、質(zhì)檢結(jié)果分析、評(píng)估概況、數(shù)據(jù)表質(zhì)檢明細(xì)、各部門質(zhì)檢明細(xì)等部分內(nèi)容。3.9.數(shù)據(jù)補(bǔ)采工具對(duì)于學(xué)校業(yè)務(wù)系統(tǒng)中缺少的數(shù)據(jù)內(nèi)容，通過配置表單實(shí)現(xiàn)面向師生用戶或業(yè)務(wù)部門的收集。具體要求如下：（1）需支持?jǐn)?shù)據(jù)表配置，支持設(shè)置數(shù)據(jù)表的表名和物理表名，支持依次添加表中的字段，設(shè)置每一個(gè)字段的字段名、物理字段名、字段類型、字段屬性、是否設(shè)為主鍵等字段信息。支持刪除已新增字段，支持通過拖拽調(diào)整已新增字段順序。（2）需支持對(duì)數(shù)據(jù)表作停用和刪除操作，停用表時(shí)支持輸入表名進(jìn)行確認(rèn)，刪除表時(shí)需先停用，防止誤操作。（3）需支持?jǐn)?shù)據(jù)模型配置，支持按步驟依次設(shè)置模型信息。需能逐個(gè)設(shè)置模型所選擇的數(shù)據(jù)表中各個(gè)字段是否必填以及選擇引用的字典數(shù)據(jù)，支持設(shè)置字段的驗(yàn)證規(guī)則，需支持整數(shù)驗(yàn)證、數(shù)字驗(yàn)證、英文字符驗(yàn)證、數(shù)值范圍驗(yàn)證、郵箱格式驗(yàn)證、手機(jī)格式驗(yàn)證、日期驗(yàn)證規(guī)則等驗(yàn)證規(guī)則。（4）需支持WEB方式可視化設(shè)計(jì)數(shù)據(jù)補(bǔ)采表單，需能設(shè)置采集數(shù)據(jù)的字段，支持添加、拖拽字段自動(dòng)生成布局。支持單行文本、只讀文本、多行文本、序列號(hào)、下拉選擇、下拉樹、單選、多選、日期、數(shù)字、開關(guān)、選擇部門、選擇人員、批次編號(hào)等控件。（5）需支持已新增模型管理，需支持模型授權(quán)、模型啟用、模型停用、模型刪除等功能。模型授權(quán)時(shí)支持從系統(tǒng)教職工列表內(nèi)選擇授權(quán)人員。模型停用前之前檢測，若該模型已被授權(quán)且正在進(jìn)行補(bǔ)采填報(bào)的數(shù)據(jù)收集任務(wù)，將無法停用，模型刪除前需檢測其是否停用，模型停用后支持刪除。（6）需能通過單條數(shù)據(jù)新增、excel批量導(dǎo)入、下發(fā)收集任務(wù)3種不同方式完成授權(quán)數(shù)據(jù)的補(bǔ)采工作。系統(tǒng)支持多級(jí)任務(wù)下發(fā)，在下發(fā)任務(wù)時(shí)需能選擇是否允許再次下發(fā)。（7）導(dǎo)入時(shí)需能下載excel導(dǎo)入模版，在excel模版中完成數(shù)據(jù)編輯后即可上傳，上傳完成后，需能下載導(dǎo)入失敗的數(shù)據(jù)查看失敗原因。需能查看本人的導(dǎo)入記錄，需能查看導(dǎo)入時(shí)間、導(dǎo)入數(shù)據(jù)總量、導(dǎo)入成功數(shù)據(jù)量、導(dǎo)入失敗數(shù)據(jù)量，在導(dǎo)入記錄中支持下載導(dǎo)入失敗的數(shù)據(jù)和下載導(dǎo)入數(shù)據(jù)的原文件。（8）在下發(fā)收集任務(wù)時(shí)，需支持按步驟設(shè)置下發(fā)數(shù)據(jù)范圍和下發(fā)方式，任務(wù)接收人，任務(wù)的提交截止時(shí)間、超時(shí)是否允許提交和填寫注意事項(xiàng)等信息。管理員確認(rèn)收集任務(wù)的配置信息后，需能通過二維碼或鏈接方式將任務(wù)分享給對(duì)應(yīng)接收人。需支持接收人通過移動(dòng)端掃描二維碼打開任務(wù)填寫表單。（9）需支持將任務(wù)接收人提交的數(shù)據(jù)匯總給任務(wù)下發(fā)人，任務(wù)下發(fā)人需能對(duì)匯總的數(shù)據(jù)進(jìn)行確認(rèn)，需支持單條確認(rèn)、批量確認(rèn)、全量確認(rèn)。已確認(rèn)的數(shù)據(jù)支持再次編輯。（10）需支持管理員對(duì)本人所下發(fā)的任務(wù)進(jìn)行管理，支持任務(wù)刪除、任務(wù)詳情查看功能。查看詳情時(shí)需能編輯任務(wù)提交截止時(shí)間、查看接收人的任務(wù)處理進(jìn)度。（11）需能查看和處理本人接收到的任務(wù)。需能查看接收到的每項(xiàng)任務(wù)的任務(wù)名稱，分發(fā)人，提交截止時(shí)間，最新修改時(shí)間，任務(wù)狀態(tài)等信息。在處理任務(wù)時(shí)，支持導(dǎo)入、導(dǎo)出、新增、數(shù)據(jù)提交、全量提交功能。系統(tǒng)支持任務(wù)接收人查看當(dāng)前任務(wù)的數(shù)據(jù)導(dǎo)入記錄。若接收人接收到的任務(wù)允許再次下發(fā)，則需能看到當(dāng)前任務(wù)再次下發(fā)的收集任務(wù)記錄。3.10.數(shù)據(jù)目錄管理為逐步解決學(xué)校數(shù)據(jù)來源不明確、權(quán)責(zé)不清晰、數(shù)據(jù)不全面等相關(guān)問題。需通過建設(shè)數(shù)據(jù)資源目錄形成全校數(shù)據(jù)資源的一個(gè)有序清單?？梢允褂迷獢?shù)據(jù)來幫助學(xué)校管理數(shù)據(jù)，幫助數(shù)據(jù)專業(yè)人員收集、組織、訪問和充實(shí)數(shù)據(jù)資產(chǎn)，從而為數(shù)據(jù)發(fā)現(xiàn)和開放提供支持。具體要求如下：3.10.1基礎(chǔ)數(shù)據(jù)目錄管理（1）需支持自動(dòng)檢測尚未生成基礎(chǔ)數(shù)據(jù)資源的主數(shù)據(jù)模型和主數(shù)據(jù)表信息，需支持批量生成基礎(chǔ)數(shù)據(jù)資源。（2）需支持對(duì)已生成的基礎(chǔ)數(shù)據(jù)資源進(jìn)行查詢、編輯、注冊、提交發(fā)布、取消發(fā)布、變更、刪除等操作。支持批量注冊、批量發(fā)布、批量取消發(fā)布、批量變更。支持撤回已提交發(fā)布的基礎(chǔ)數(shù)據(jù)資源。（3）基礎(chǔ)數(shù)據(jù)資源需支持設(shè)置更新頻率、提供方、共享類型、使用方式等信息。數(shù)據(jù)資源項(xiàng)需支持在線拖拽調(diào)整順序。（4）需支持查看本人待審核和已審核的基礎(chǔ)數(shù)據(jù)資源列表。需支持查看基礎(chǔ)數(shù)據(jù)資源目錄的審核信息，查看各流程環(huán)節(jié)的開始時(shí)間、結(jié)束時(shí)間、執(zhí)行人、審核結(jié)果、審核意見等信息。需支持查看當(dāng)前流程節(jié)點(diǎn)的執(zhí)行人。3.10.2部門目錄管理（1）提供部門數(shù)據(jù)資源模板庫，需支持批量導(dǎo)入部門數(shù)據(jù)資源模版。需支持自動(dòng)匹配校內(nèi)提供部門，未匹配的支持手動(dòng)調(diào)整提供部門。（2）需支持業(yè)務(wù)部門根據(jù)部門數(shù)據(jù)資源模版批量創(chuàng)建部門數(shù)據(jù)資源，也需支持部門管理員自定義新增部門數(shù)據(jù)資源；需支持業(yè)務(wù)部門查看其它部門的數(shù)據(jù)資源模板，但不可對(duì)其他部門模版進(jìn)行增刪改等操作。（3）部門數(shù)據(jù)資源管理需支持設(shè)置數(shù)據(jù)資源屬性和數(shù)據(jù)資源項(xiàng)屬性；數(shù)據(jù)資源屬性包含基礎(chǔ)屬性和共享開放屬性；數(shù)據(jù)資源的基礎(chǔ)屬性需包含數(shù)據(jù)資源名稱、更新頻率、提供方、內(nèi)容摘要；數(shù)據(jù)資源的共享開放屬性需包含數(shù)據(jù)資源的共享類型與使用方式，共享類型需包含“有條件共享、無條件共享、不予共享”，使用方式需包含“ETL推送”“API接口”“Excel導(dǎo)出”。（4）需支持教職工將本部門的數(shù)據(jù)資源進(jìn)行數(shù)據(jù)掛接，需支持?jǐn)?shù)據(jù)資源項(xiàng)與庫表的字段進(jìn)行關(guān)聯(lián)綁定。（5）需支持對(duì)部門的數(shù)據(jù)資源進(jìn)行統(tǒng)一管理，數(shù)據(jù)資源應(yīng)支持多狀態(tài)進(jìn)行分類管理。（6）需支持對(duì)部門數(shù)據(jù)資源進(jìn)行注冊申請(qǐng)、注冊審核、發(fā)布申請(qǐng)、發(fā)布審核等看流程操作。需支持查看已提交注冊的數(shù)據(jù)資源的申請(qǐng)信息和審核信息，申請(qǐng)信息需包含提交申請(qǐng)的時(shí)間、狀態(tài)、及申請(qǐng)內(nèi)容，審核信息需包含審核流程圖及審核流轉(zhuǎn)記錄。（7）需支持?jǐn)?shù)據(jù)運(yùn)營方對(duì)部門提交注冊的數(shù)據(jù)資源進(jìn)行審核，需按“待審核”“已審核”進(jìn)行分類管理，審核可查看提交的注冊的數(shù)據(jù)資源信息，提交審核意見。為提高注冊審核的工作效率，審核模塊需支持按數(shù)據(jù)資源名稱、申請(qǐng)人、部門、申請(qǐng)時(shí)間等維度對(duì)待審核任務(wù)進(jìn)行查詢、篩選。（8）需支持運(yùn)營方將已注冊的數(shù)據(jù)資源發(fā)布至數(shù)據(jù)門戶，可查看資源發(fā)布申請(qǐng)信息及審核記錄。需支持對(duì)已提交發(fā)布申請(qǐng)的數(shù)據(jù)資源進(jìn)行審核，對(duì)待審核任務(wù)及已審核任務(wù)可以查詢及處理。（9）提供部門數(shù)據(jù)資源目錄看板，需支持按權(quán)限查看全部部門或單個(gè)部門的數(shù)據(jù)資源概況，數(shù)據(jù)資源注冊情況，數(shù)據(jù)資源掛接情況，數(shù)據(jù)資源共享情況，數(shù)據(jù)資源使用情況進(jìn)行統(tǒng)計(jì)與展示。（10）需支持對(duì)近30天通過Excel下載數(shù)據(jù)、通過ETL使用數(shù)據(jù)、通過API調(diào)用數(shù)據(jù)的趨勢進(jìn)行分析。需支持按數(shù)據(jù)資源注冊數(shù)量和注冊率對(duì)全部部門數(shù)據(jù)資源注冊情況進(jìn)行排名。需支持按數(shù)據(jù)資源掛接數(shù)量和掛接率對(duì)全部部門數(shù)據(jù)資源掛接情況進(jìn)行排名。主題目錄管理（1）需支持自動(dòng)檢測尚未生成主題數(shù)據(jù)資源的主題模型信息，需支持批量生成主題數(shù)據(jù)資源。（2）需支持對(duì)已生成的主題數(shù)據(jù)資源進(jìn)行查詢、編輯、注冊、提交發(fā)布、取消發(fā)布、變更、刪除等操作。需支持批量注冊、批量發(fā)布、批量取消發(fā)布、批量變更。需支持撤回已提交發(fā)布的主題數(shù)據(jù)資源。（3）主題數(shù)據(jù)資源需支持設(shè)置更新頻率、提供方、共享類型、使用方式等信息。數(shù)據(jù)資源項(xiàng)需支持在線拖拽調(diào)整順序。（4）需支持查看本人待審核和已審核的主題數(shù)據(jù)資源列表。需支持查看主題數(shù)據(jù)資源目錄的審核信息，查看各流程環(huán)節(jié)的開始時(shí)間、結(jié)束時(shí)間、執(zhí)行人、審核結(jié)果、審核意見等信息。需支持查看當(dāng)前流程節(jié)點(diǎn)的執(zhí)行人。3.11.數(shù)據(jù)安全管理系統(tǒng)需要提供數(shù)據(jù)分類分級(jí)、加密脫敏等功能，實(shí)現(xiàn)對(duì)敏感數(shù)據(jù)的保護(hù)。具體要求如下：（1）需支持?jǐn)?shù)據(jù)資源分類管理、數(shù)據(jù)資源分級(jí)管理、數(shù)據(jù)脫敏管理。（2）數(shù)據(jù)資源分類管理需包含分類維度、分類規(guī)則、分類管理等管理功能。分類維度需預(yù)置公民個(gè)人維度、敏感個(gè)人信信息維度；分類規(guī)則支持通過正則表達(dá)式進(jìn)行設(shè)置，可自動(dòng)匹配符合規(guī)則的數(shù)據(jù)資源項(xiàng)并將其放入對(duì)應(yīng)的分類；分類管理需支持按部門數(shù)據(jù)目錄、基礎(chǔ)數(shù)據(jù)目錄、主題數(shù)據(jù)目錄進(jìn)行管理，需支持自動(dòng)生成和人工管理兩種方式。（3）數(shù)據(jù)資源分級(jí)管理需包含分級(jí)定義、分級(jí)規(guī)則、分級(jí)管理等管理功能。分級(jí)管理需支持按部門數(shù)據(jù)目錄、基礎(chǔ)數(shù)據(jù)目錄、主題數(shù)據(jù)目錄進(jìn)行管理，需支持按分級(jí)規(guī)則自動(dòng)生成和人工管理兩種方式。（4）數(shù)據(jù)脫敏需支持哈希脫敏、字符掩碼、取整脫敏幾種方式，其中算法需支持SHA256、SHA512、MD5、SM3，操作加密方式需支持保留前m位和后n位、保留第m