電信行業(yè)數(shù)據(jù)庫適配測試技術(shù)規(guī)范（征求意見稿）

T/BSIA00X-2024電信行業(yè)數(shù)據(jù)庫適配測試技術(shù)規(guī)范本文件定義了電信行業(yè)數(shù)據(jù)庫適配測試的環(huán)境、適配測試的總體要求、測試方法和評價方法。本文件適用與國內(nèi)數(shù)據(jù)庫產(chǎn)品的的適配測試。2規(guī)范性引用文件下列文件對于本文的應(yīng)用是必不可少的。凡是注日期版本的引用文件，僅注日期版本適用本文件。凡是不注日期的引用文件，其最新版本(包括所有的修改版)適用本文件。GB18030-2022信息技術(shù)中文編碼字符集3術(shù)語和定義下列術(shù)語和縮略語適用于本文件。3.1術(shù)語3.1.1聯(lián)機(jī)事務(wù)處理OLTP（on-linetransactionprocessing）面向事務(wù)任務(wù)的一類數(shù)據(jù)處理，通常涉及在數(shù)據(jù)庫中插入，更新或刪除少量數(shù)據(jù)，主要是處理大量用戶下的大量事務(wù)。最重要的特性是需要符合ACID（數(shù)據(jù)庫事務(wù)正確執(zhí)行的四個基本要素）標(biāo)準(zhǔn)。衡量聯(lián)機(jī)事務(wù)處理的重要性能指標(biāo)是系統(tǒng)性能，具體體現(xiàn)為實(shí)時響應(yīng)時間(Response3.1.2聯(lián)機(jī)分析處理OLAP（on-lineanalyticalprocessing）聯(lián)機(jī)分析處理OLAP是一種軟件技術(shù)，它使分析人員能夠迅速、一致、交互地從各個方MultidimensionalInformation)，即共享多維信息的快速分析的特征。作為OLAP的識別標(biāo)準(zhǔn)之一，本文認(rèn)定具有分布式存儲和應(yīng)用的數(shù)據(jù)庫系統(tǒng)為OLAP數(shù)據(jù)庫。3.2縮略語2T/BSIA00X-2024BOSSBusinessOperationSupportSystem業(yè)務(wù)運(yùn)營支撐系統(tǒng)CRMCustomerRelationshipManagement客戶關(guān)系管理TPSTransactionPerSecond每秒事務(wù)數(shù)4電信數(shù)據(jù)庫適配測試環(huán)境要求4.1硬件環(huán)境要求應(yīng)支持通過安全可靠測評的CPU平臺架構(gòu)。4.2軟件環(huán)境要求應(yīng)支持通過安全可靠測評的服務(wù)器操作系統(tǒng)。5電信數(shù)據(jù)庫適配測試技術(shù)要求5.1產(chǎn)品安裝要求a）應(yīng)提供圖形化客戶端/服務(wù)端集成安裝版本；b）應(yīng)提供命令行下的文本字符界面的客戶端/服務(wù)端集成安裝工具；c）分布式數(shù)據(jù)庫應(yīng)具備多節(jié)點(diǎn)快速、便捷部署管理(配置、啟動、停止)的能力。5.2應(yīng)用工具要求a）應(yīng)提供圖形化的數(shù)據(jù)庫客戶端工具，對數(shù)據(jù)庫進(jìn)行操作；b）應(yīng)提供csv等文件格式導(dǎo)入/導(dǎo)出工具。5.3應(yīng)用管理要求數(shù)據(jù)庫應(yīng)滿足如下管理要求：a）可操作性：應(yīng)具備可操作性，可以使得便于數(shù)據(jù)庫運(yùn)維團(tuán)隊更容易維護(hù)數(shù)據(jù)庫的平穩(wěn)運(yùn)行；b）簡單易用性：用戶交互的操作界面應(yīng)盡可能簡單，便于用戶的理解和使用；通過盡可能消除數(shù)據(jù)庫的復(fù)雜性，使新的工程師更容易理解，快速上手使用。c）可演進(jìn)性：使工程師在將來更容易支持對數(shù)據(jù)庫進(jìn)行更改，版本變更，在業(yè)務(wù)需求發(fā)生變化時能夠快速適應(yīng)滿足需求。5.4數(shù)據(jù)庫應(yīng)用技術(shù)要求數(shù)據(jù)庫應(yīng)滿足如下技術(shù)要求：a）應(yīng)兼容SQL標(biāo)準(zhǔn)要求；b）應(yīng)支持ACID事務(wù)，保證故障場景下事務(wù)的強(qiáng)一致；T/BSIA00X-2024c）應(yīng)支持四個隔離級別下的共享鎖與排它鎖管理，支持三種鎖的級別：頁級、表級、行d）應(yīng)支持GB18030-2022等規(guī)定的常見中文字符集；e）應(yīng)支持用戶的創(chuàng)建、修改、刪除等操作能力；f）應(yīng)支持指定分隔符的結(jié)構(gòu)化數(shù)據(jù)文件的導(dǎo)入與導(dǎo)出，支持將查詢結(jié)果按照給定的分割符導(dǎo)出到本地的服務(wù)器和客戶端；g）應(yīng)提供JDBC驅(qū)動，支持Java程序通過JDBC連接與數(shù)據(jù)操作；h）應(yīng)提供ODBC驅(qū)動，支持C/C++程序通過ODBC連接與數(shù)據(jù)操作。5.5數(shù)據(jù)庫擴(kuò)展技術(shù)要求數(shù)據(jù)庫應(yīng)滿足如下擴(kuò)展技術(shù)要求：a）應(yīng)支持高可用性，即系統(tǒng)提供的正常服務(wù)周期需滿足其設(shè)計規(guī)定的期限；b）應(yīng)滿足以下信息安全要求，即指物理數(shù)據(jù)庫的完整性、邏輯數(shù)據(jù)庫的完整性、存儲數(shù)據(jù)的安全性、可審計性、訪問控制權(quán)限、身份驗(yàn)證、數(shù)據(jù)可用性等；c）應(yīng)具備可維護(hù)性；d）宜兼容多種通過安全可靠測評的CPU平臺架構(gòu)或服務(wù)器操作系統(tǒng)；e）宜兼容多種中間件產(chǎn)品；f）宜支持可擴(kuò)展性，以保證軟件系統(tǒng)計算處理能力。5.6數(shù)據(jù)庫數(shù)值類型要求數(shù)據(jù)庫應(yīng)滿足如下數(shù)值類型要求：a）應(yīng)支持以下數(shù)值類型的數(shù)據(jù)庫適配測試，包括：INT、LONG、FLOAT、DOUBLE、CHAR、STRING、DATE、TIME、DATETIME、DECIMAL(/NUMBER)和CLOB(BLOB)；b）應(yīng)提供多種數(shù)據(jù)類型支持，并通過適配技術(shù)實(shí)現(xiàn)各業(yè)務(wù)表的創(chuàng)建；c）應(yīng)支持自增1字段，并且許可自定義值插入到庫表中。5.7數(shù)據(jù)庫函數(shù)要求數(shù)據(jù)庫應(yīng)提供對各查詢SQL的適配，滿足適配測試平臺的業(yè)務(wù)功能調(diào)用。數(shù)據(jù)庫應(yīng)滿足但不限于以下功能函數(shù)清單。表1數(shù)據(jù)庫功能函數(shù)清單4T/BSIA00X-20245.8適配功能要求數(shù)據(jù)庫應(yīng)滿足如下適配功能要求：a）應(yīng)能根據(jù)電信業(yè)務(wù)場景，生成相應(yīng)SQL語句，滿足運(yùn)行和測試的要求；b）應(yīng)支持WITH語句；c）應(yīng)支持JDBC英文分號分隔的多條(非SELECT)語句；d）應(yīng)支持CSV等文件的導(dǎo)出和導(dǎo)入功能，并提供操作記錄量和操作時長輸出功能。6適配測試方法6.1性能效率TPS測試6.1.1測試方法采用壓力測試工具進(jìn)行數(shù)據(jù)采集和性能效率測試。包含在業(yè)務(wù)處理過程中，通過并發(fā)壓測方式，提請數(shù)據(jù)庫操作。每次業(yè)務(wù)提交操作計為一次交易，測試在一定時間內(nèi)(或者一定次數(shù)內(nèi))，總體的交易數(shù)。計算每秒平均交易數(shù)、平均交易時長、95%交易時長、99%交易時長。測試指標(biāo)：成功率、每秒交易數(shù)、平均交易時長、95%交易時長、99%交易時長。6.1.2測試結(jié)果合并規(guī)則測試結(jié)果合并，包括以下兩種情況：a）同一業(yè)務(wù)場景，有不同并發(fā)存在。取TPS最高值為本場景的測試結(jié)果；5T/BSIA00X-2024b）同一數(shù)據(jù)庫產(chǎn)品，有不同業(yè)務(wù)場景存在。取所有場景的平均值為產(chǎn)品的測試結(jié)果。6.2數(shù)據(jù)加載性能在基礎(chǔ)數(shù)據(jù)準(zhǔn)備過程中，完成某類業(yè)務(wù)數(shù)據(jù)加載的整體時長和業(yè)務(wù)記錄數(shù)，結(jié)果表現(xiàn)為每秒處理的業(yè)務(wù)記錄數(shù)。6.2.1測試方法數(shù)據(jù)加載性能指標(biāo)，通過在數(shù)據(jù)處理過程中，添加處理日志的方式，進(jìn)行計量。其中，涉及到獲取記錄數(shù)的日志，在時長計算時，予以扣除。對數(shù)據(jù)加載過程生成的日志數(shù)據(jù)表，進(jìn)行導(dǎo)出并保存。6.2.2測試結(jié)果合并含義測試結(jié)果合并，包括兩種含義：a）同一業(yè)務(wù)場景，存在不同的業(yè)務(wù)數(shù)據(jù)，然后將這些不同的業(yè)務(wù)數(shù)據(jù)合并為一個結(jié)果；b）同一數(shù)據(jù)庫產(chǎn)品，測試不同的業(yè)務(wù)場景。在產(chǎn)品的最終測試報告中，將不同業(yè)務(wù)場景的數(shù)據(jù)，合并為一個測試結(jié)果。6.2.3測試結(jié)果合并規(guī)則同一業(yè)務(wù)場景，不同業(yè)務(wù)數(shù)據(jù)的合并規(guī)則：a）不考慮任何內(nèi)部操作，只取每種業(yè)務(wù)數(shù)據(jù)的begin/end的時間長度，進(jìn)行時長計算(扣除日志的count(*)操作時間)；b）不同業(yè)務(wù)數(shù)據(jù)直接按其業(yè)務(wù)數(shù)據(jù)量，計算合并時的權(quán)重；c）數(shù)據(jù)量規(guī)則：所有數(shù)據(jù)量計算結(jié)果，采用四舍五入方法規(guī)整到需要的位數(shù)；d）權(quán)重計量：所有權(quán)重保留到小數(shù)點(diǎn)后2位，最小權(quán)重用100-其它權(quán)重和。6.3數(shù)據(jù)導(dǎo)出/導(dǎo)入性能6.3.1測試方法數(shù)據(jù)導(dǎo)入/導(dǎo)出處理性能指標(biāo)的數(shù)據(jù)采集，包括操作時長和操作數(shù)據(jù)量采集兩項(xiàng)內(nèi)容。a）操作時長數(shù)據(jù)采集方式：采用數(shù)據(jù)庫導(dǎo)出/導(dǎo)出工具本身計量出操作時長，此時提取其時長為操作時長，或在處理過程中，記錄開始處理時間和結(jié)束處理時間。b）操作數(shù)據(jù)量采集方式：采用操作系統(tǒng)命令行wc-l命令，采集CSV等文件行數(shù)，或采用數(shù)據(jù)庫表count(*)。6T/BSIA00X-2024c）業(yè)務(wù)處理過程中，將數(shù)據(jù)庫數(shù)據(jù)導(dǎo)出到CSV格式的文件或?qū)SV文件導(dǎo)入到數(shù)據(jù)庫的處理過程，包括操作記錄總數(shù)和操作時長，結(jié)果表現(xiàn)為每秒處理的業(yè)務(wù)記錄數(shù)；d）一種業(yè)務(wù)場景的導(dǎo)入/導(dǎo)出處理，存在多種業(yè)務(wù)數(shù)據(jù)的導(dǎo)入或?qū)С?。?dǎo)出/導(dǎo)入指標(biāo)計量時，是每個指標(biāo)獨(dú)立計量，不混雜；e）數(shù)據(jù)導(dǎo)入/導(dǎo)出處理，只進(jìn)行一次操作，并進(jìn)行并發(fā)處理；f）記錄測試結(jié)果：每秒記錄條數(shù)。6.3.2測試結(jié)果合并規(guī)則測試結(jié)果合并，包括兩種含義：a）同一業(yè)務(wù)場景，存在不同的業(yè)務(wù)數(shù)據(jù)的導(dǎo)入/導(dǎo)出，然后將這些不同的業(yè)務(wù)數(shù)據(jù)合并為一個結(jié)果；1)只考量導(dǎo)入/導(dǎo)出操作；2)取本場景的各業(yè)務(wù)操作的結(jié)果平均值為場景結(jié)果，平均值4舍5入到整數(shù)位；b）同一數(shù)據(jù)庫產(chǎn)品，測試不同的業(yè)務(wù)場景。在產(chǎn)品的最終測試報告中，將不同業(yè)務(wù)場景的數(shù)據(jù)，合并為一個測試結(jié)果：1)不同場景的數(shù)據(jù)，加和平均；2)每個數(shù)據(jù)庫產(chǎn)品，至少有一個導(dǎo)出/導(dǎo)入業(yè)務(wù)場景。6.4TP數(shù)據(jù)業(yè)務(wù)處理性能6.4.1測試方法a）OLTP場景下，對電信業(yè)務(wù)進(jìn)行模擬操作，通過并發(fā)處理，實(shí)現(xiàn)對業(yè)務(wù)處理能力的測試。主指開戶業(yè)務(wù)。也可以是操作員權(quán)限管理、營銷推薦、話單批價、賬務(wù)出賬、批量套餐變更；b）結(jié)果表現(xiàn)：總體業(yè)務(wù)筆數(shù)、單筆業(yè)務(wù)最長時長(毫秒)、最短時長(毫秒)、平均時長(毫秒)；c）通過并發(fā)方式，進(jìn)行性能壓力測試。在處理中，插入日志數(shù)據(jù)，獲取數(shù)據(jù)采集點(diǎn)。6.5測試結(jié)果針對建表等的操作，采用通過/不通過的方式，進(jìn)行結(jié)果度量。7均值補(bǔ)差評價方法a）針對同一指標(biāo)，相同的主要限制條件。7T/BSIA00X-2024比如，普通開戶場景，采用相同線程數(shù)進(jìn)行測試（