信息技術(shù)應(yīng)用創(chuàng)新 軟件測(cè)試方法

信息技術(shù)應(yīng)用創(chuàng)新軟件測(cè)試方法(征求意見(jiàn)稿)中國(guó)基本建設(shè)優(yōu)化研究會(huì)發(fā)布I I II 12規(guī)范性引用文件 13術(shù)語(yǔ)和定義 14一般要求 14.1測(cè)試目的 14.2測(cè)試類(lèi)別 14.3測(cè)試內(nèi)容 14.4測(cè)試方法 24.5測(cè)試過(guò)程 24.6測(cè)試工具 24.7測(cè)試環(huán)境 24.8測(cè)試文檔 24.9被測(cè)對(duì)象要求 25產(chǎn)品測(cè)試 25.1文檔審查 25.2代碼審查 35.3系統(tǒng)測(cè)試 36國(guó)產(chǎn)化適配測(cè)試 6附錄A(資料性)信創(chuàng)軟件文檔審查內(nèi)容 7 8表1功能性測(cè)試內(nèi)容 3表2性能效率測(cè)試內(nèi)容 3表3兼容性測(cè)試內(nèi)容 3表4可靠性測(cè)試內(nèi)容 4表5維護(hù)性測(cè)試內(nèi)容 4 4表7通用安全性測(cè)試內(nèi)容 4表8可移植性測(cè)試內(nèi)容 5表9國(guó)產(chǎn)基礎(chǔ)軟硬件適配參照表 6表A.1文檔審查單 7在信息技術(shù)應(yīng)用創(chuàng)新(以下簡(jiǎn)稱(chēng)信創(chuàng))的國(guó)產(chǎn)化替代浪潮下，針對(duì)不同技術(shù)路線的軟件產(chǎn)品也孕育這為信創(chuàng)軟件的開(kāi)發(fā)和交付帶來(lái)了困難。如何保證信創(chuàng)軟件的質(zhì)量成為信創(chuàng)國(guó)產(chǎn)化替代發(fā)展過(guò)程中需減少信創(chuàng)軟件開(kāi)發(fā)方對(duì)于軟件測(cè)試的成本投入，同時(shí)也為信創(chuàng)軟件是否完成了某種技術(shù)路線的適配提1信息技術(shù)應(yīng)用創(chuàng)新軟件測(cè)試方法僅該日期對(duì)應(yīng)的版本適用于本文件；不注日期的引用文件，其最新版本(包括所有的修改單)適用于本信創(chuàng)軟件測(cè)試的目的是驗(yàn)證信創(chuàng)軟件是否滿(mǎn)足相關(guān)標(biāo)準(zhǔn)，或軟件合同/任務(wù)2a)測(cè)試大綱/方案(含測(cè)試計(jì)劃);b)測(cè)試用例(集);c)測(cè)試用例執(zhí)行記錄(集);d)測(cè)試問(wèn)題報(bào)告(集);b)軟件文檔(任務(wù)書(shū)、需求規(guī)格說(shuō)明、設(shè)計(jì)說(shuō)明文檔、軟件自測(cè)試報(bào)告、用戶(hù)使用手冊(cè)等);c)產(chǎn)品模塊架構(gòu)及功能清單和主要應(yīng)用場(chǎng)文檔審查的目的是驗(yàn)證送測(cè)方提交的相關(guān)文檔(例如產(chǎn)品說(shuō)明、用戶(hù)文檔)是否滿(mǎn)足標(biāo)準(zhǔn)、或者軟3代碼審查的目的是驗(yàn)證軟件代碼的規(guī)范性和自主安全可控性。代碼審查的內(nèi)容包括代碼和設(shè)計(jì)的信創(chuàng)軟件功能測(cè)試包括信創(chuàng)軟件基本功能測(cè)試和信創(chuàng)軟件擴(kuò)展功能測(cè)試，主要是對(duì)被測(cè)信創(chuàng)軟件測(cè)試項(xiàng)目項(xiàng)目說(shuō)明注：基本功能和擴(kuò)展功能可根據(jù)被測(cè)軟件具體規(guī)測(cè)試項(xiàng)目項(xiàng)目說(shuō)明時(shí)間特性響應(yīng)時(shí)間測(cè)試軟件完成典型功能操作和關(guān)鍵業(yè)務(wù)流程等規(guī)定任務(wù)所需的時(shí)間資源利用性?xún)?nèi)存占用率GPU占用針對(duì)軟件的數(shù)據(jù)處理或存儲(chǔ)功能，測(cè)試其可達(dá)到的針對(duì)涉及多用戶(hù)同時(shí)操作的軟件，測(cè)試其能夠承受的同時(shí)使用系統(tǒng)服務(wù)或資源的用注1:應(yīng)重點(diǎn)關(guān)注國(guó)產(chǎn)化平臺(tái)運(yùn)行的性能；注2:對(duì)于同類(lèi)軟件的性能效率測(cè)試，需要統(tǒng)一測(cè)試環(huán)境。測(cè)試項(xiàng)目項(xiàng)目說(shuō)明測(cè)試軟件是否能夠與上下游、同類(lèi)軟件正確交換、使用數(shù)據(jù)信息API接口測(cè)試軟件能成功與外部交互的API接口，并提供API數(shù)4測(cè)試軟件與其他軟件共享通用環(huán)境和資源的情況下，產(chǎn)品功能有效執(zhí)行及對(duì)其他軟件的影響測(cè)試項(xiàng)目項(xiàng)目說(shuō)明測(cè)試軟件系統(tǒng)在一定時(shí)間內(nèi)，正常操作情況是否穩(wěn)定運(yùn)行，續(xù)運(yùn)行時(shí)間缺省為24小時(shí)，需求有要求時(shí)依據(jù)需求。測(cè)試軟件在出現(xiàn)故障(例如：斷電、容量超出極限等情況)時(shí)，軟件是否出現(xiàn)異常、測(cè)試軟件在邊界條件(例如：容量的最大值、運(yùn)行的最小值等測(cè)試軟件是否對(duì)用戶(hù)的誤操作(例如：錯(cuò)誤輸入、未按順序操作、重要數(shù)據(jù)刪除等)易恢復(fù)性測(cè)試項(xiàng)目項(xiàng)目說(shuō)明測(cè)試軟件是否具有完整的系統(tǒng)日志信息版本控制測(cè)試軟件是否進(jìn)行了版本控制測(cè)試項(xiàng)目項(xiàng)目說(shuō)明性易瀏覽性易學(xué)性測(cè)試軟件是否提供聯(lián)機(jī)幫助或相關(guān)幫助文檔，幫助信息是易操作性測(cè)試軟件的窗口、菜單、圖標(biāo)、快捷鍵等設(shè)計(jì)是否符合用戶(hù)使捷測(cè)試軟件是否具備抵御誤操作的能力，對(duì)異測(cè)試項(xiàng)目項(xiàng)目說(shuō)明5安全漏洞日志記錄測(cè)試軟件是否具備日志記錄和管理功能，對(duì)關(guān)鍵數(shù)據(jù)的變更和操作的日志記錄是否正確認(rèn)證機(jī)制測(cè)試軟件是否具備用戶(hù)身份認(rèn)證機(jī)制(例如：用戶(hù)身份鑒別機(jī)制、登錄失策略和會(huì)話(huà)超時(shí)機(jī)制等),防止非授權(quán)的操作發(fā)數(shù)字簽名測(cè)試軟件是否使用數(shù)字簽名歷史漏洞補(bǔ)丁漏洞測(cè)試軟件是否需要更新相關(guān)的系統(tǒng)漏洞補(bǔ)丁，或過(guò)其它技上傳控制測(cè)試軟件是否限定文件上傳類(lèi)型、大小和權(quán)限，禁訪問(wèn)控制測(cè)試軟件是否需要信任的IP地址才能訪問(wèn)軟審計(jì)控制測(cè)試軟件是否具有審計(jì)功能，對(duì)用戶(hù)登陸進(jìn)行記錄，記錄內(nèi)容包括用是否成功、登陸時(shí)間以及遠(yuǎn)程登陸時(shí)用戶(hù)使用的IP地址；記錄用限于以下內(nèi)容：帳號(hào)創(chuàng)建、刪除和權(quán)限修改、口令修改、讀取和修改數(shù)據(jù)庫(kù)配置、讀取和修改業(yè)務(wù)用戶(hù)的話(huà)費(fèi)數(shù)據(jù)、身份數(shù)據(jù)、涉及通信隱私數(shù)據(jù)。記錄需要包含用戶(hù)作內(nèi)容以及操作結(jié)果；通過(guò)設(shè)置讓系統(tǒng)記錄安全事件，方便管理員分析。信息控制從系統(tǒng)中導(dǎo)出的客戶(hù)信息，應(yīng)采用文檔加密、測(cè)試項(xiàng)目項(xiàng)目說(shuō)明測(cè)試軟件是否能夠有效適應(yīng)不同的硬件、軟件、或者其他易安裝性用例庫(kù)測(cè)試方法主要采用或編制標(biāo)準(zhǔn)用例庫(kù)作為測(cè)試驗(yàn)證的標(biāo)準(zhǔn)輸入輸出基準(zhǔn)，以評(píng)估該模塊實(shí)a)被測(cè)對(duì)象的計(jì)算輸出是有標(biāo)準(zhǔn)c)按照對(duì)標(biāo)測(cè)試的指標(biāo)類(lèi)型逐項(xiàng)列出各項(xiàng)指標(biāo)的比對(duì)結(jié)果。6件在國(guó)產(chǎn)生態(tài)下的質(zhì)量評(píng)價(jià)、適配及其改進(jìn)提供依據(jù)，其測(cè)試內(nèi)容見(jiàn)5.3。國(guó)產(chǎn)化選取可參考表9,但不限于表中給出的類(lèi)別。信創(chuàng)軟件廠商可以根據(jù)自身使用需求來(lái)選擇適配對(duì)象范圍范圍國(guó)產(chǎn)硬件(CPU)飛騰、海光、鯤鵬、龍芯、申威、兆芯等2國(guó)產(chǎn)操作系統(tǒng)數(shù)據(jù)庫(kù)達(dá)夢(mèng)、華為、巨衫、昆侖、南大通用、人大4中間件東方通、金蝶、金格、宏天、普元信息、中創(chuàng)等注：適配對(duì)象選取時(shí)可參照但不限于本表。7針對(duì)信創(chuàng)軟件產(chǎn)品文檔(如產(chǎn)品說(shuō)明、用戶(hù)文檔)進(jìn)行審查，編制相應(yīng)的檢查單，再根據(jù)檢查單對(duì)相