體育賽事信息化 軟件測(cè)試規(guī)范

體育賽事信息化軟件測(cè)試規(guī)范本文件規(guī)定了體育賽事信息化軟件測(cè)試的總體要求，以及測(cè)試計(jì)劃、供應(yīng)商測(cè)試、集成測(cè)試、用戶接受測(cè)試和一致性測(cè)試的相關(guān)要求。本文件適用于體育賽事信息化軟件測(cè)試與測(cè)試管理。2規(guī)范性引用文件下列文件中的內(nèi)容通過文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中，注日期的引用文件，僅該日期對(duì)應(yīng)的版本適用于本文件；不注日期的引用文件，其最新版本(包括所有的修改單)適用于本文件。GB/T25000.10系統(tǒng)與軟件工程系統(tǒng)與軟件質(zhì)量要求和評(píng)價(jià)(SQuaRE)第10部分：系統(tǒng)與軟件質(zhì)量模型GB/T25000.51系統(tǒng)與軟件工程系統(tǒng)與軟件質(zhì)量要求和評(píng)價(jià)(SQuaRE)第51部分：就緒可用軟件產(chǎn)品(RUSP)的質(zhì)量要求和測(cè)試細(xì)則3術(shù)語和定義下列術(shù)語和定義適用于本文件。工作產(chǎn)品中出現(xiàn)的瑕疵或缺點(diǎn)，導(dǎo)致軟件產(chǎn)品無法滿足用戶雪求或者規(guī)格說明，需要修復(fù)或者處于用戶和產(chǎn)品開發(fā)商利益之外，根據(jù)有關(guān)標(biāo)準(zhǔn)或規(guī)范對(duì)產(chǎn)品進(jìn)行客觀質(zhì)量檢驗(yàn)的專業(yè)測(cè)試機(jī)構(gòu)。軟件系統(tǒng)供應(yīng)商在軟件交付集成實(shí)驗(yàn)室之前對(duì)其系統(tǒng)的功能和非功能需求進(jìn)行的一次全面測(cè)試。從單系統(tǒng)測(cè)試到端到端測(cè)試覆蓋各應(yīng)用系統(tǒng)及接口的一系列綜合性的、跨系統(tǒng)的測(cè)試。用戶接受測(cè)試useracceptancetesting為使最終用戶能夠決定是否接受系統(tǒng)或組件而進(jìn)行的正式測(cè)試一致性測(cè)試homologationtest針對(duì)成績系統(tǒng)各相關(guān)方共同執(zhí)行的驗(yàn)收測(cè)試。24總體要求4.1測(cè)試目的通過測(cè)試發(fā)現(xiàn)軟件缺陷，驗(yàn)證軟件是否滿足體育賽事用戶需求或者規(guī)格說明包含的功能及非功能4.2測(cè)試階段及流程4.2.1測(cè)試階段賽事信息化系統(tǒng)軟件測(cè)試由以下階段組成；a)測(cè)試計(jì)劃；b)供應(yīng)商測(cè)試；c)集成測(cè)試；d迅戶接受測(cè)試4.2.2測(cè)試流程4.2.2.1測(cè)試流程見圖1。4.2.2.2流程中各關(guān)鍵環(huán)節(jié)的主要內(nèi)容見附錄A。圖1各階段款件測(cè)試流程4.3測(cè)試類型及選擇4.3.1測(cè)試類型測(cè)試類型應(yīng)按照GB/T25000.10和GB/T25000.51分為功能性測(cè)試及非功能性測(cè)試。具體示例見附錄B。4.3.2測(cè)試類型選擇供應(yīng)商測(cè)試、集成測(cè)試、用戶接受測(cè)試、一致性測(cè)試各測(cè)試階段應(yīng)選取相對(duì)應(yīng)的測(cè)試類型，見表1。表1測(cè)試類型與測(cè)試階段的對(duì)應(yīng)關(guān)系表4.4測(cè)試入口/出口準(zhǔn)則4.4.1測(cè)試入口測(cè)試入口準(zhǔn)則規(guī)定了開始測(cè)試時(shí)應(yīng)滿足的基本條件，包括：a)測(cè)試環(huán)境已經(jīng)準(zhǔn)備就緒并可用，其中測(cè)試環(huán)境應(yīng)在考察體育賽事所部署系統(tǒng)的環(huán)境的基礎(chǔ)上進(jìn)行布設(shè)，保持與賽時(shí)環(huán)境一致；b)測(cè)試工具在測(cè)試環(huán)境中已經(jīng)準(zhǔn)備就緒：c)代碼可用；d)測(cè)試數(shù)據(jù)可用；e)測(cè)試需求、用例文檔準(zhǔn)備就緒。4.4.2測(cè)試出口測(cè)試出口準(zhǔn)則規(guī)定了結(jié)束測(cè)試時(shí)應(yīng)滿足的基本條件，包括a)測(cè)試用例執(zhí)行覆蓋率達(dá)到規(guī)定要求；b)S3級(jí)及S3級(jí)以上缺陷修復(fù)率達(dá)到規(guī)定要求，缺陷等級(jí)劃分見附錄Cc所有嚴(yán)重缺陷經(jīng)回歸測(cè)試，均已修改且未引入新的嚴(yán)重缺陷；d)超過測(cè)試計(jì)劃時(shí)間。4.5測(cè)試管理4.5.1職責(zé)管理各測(cè)試階段應(yīng)明確各相關(guān)方的職責(zé)。4.5.2質(zhì)量管理在測(cè)試項(xiàng)目實(shí)施過程中，應(yīng)建立相應(yīng)的測(cè)試質(zhì)量管理體系，對(duì)測(cè)試目標(biāo)、流程、各角色的職責(zé)以及實(shí)施過程進(jìn)行規(guī)范和監(jiān)控，保證測(cè)試項(xiàng)目實(shí)施過程中的文檔、過程的規(guī)范性，最終保證測(cè)試項(xiàng)目的質(zhì)量。4.5.3進(jìn)度管理應(yīng)依據(jù)測(cè)試計(jì)劃以及體育賽事組織開展的整體進(jìn)度情況進(jìn)行進(jìn)度跟蹤與監(jiān)控，對(duì)測(cè)試任務(wù)進(jìn)行分析，找出關(guān)鍵路徑，并分析此關(guān)鍵路徑上的關(guān)鍵點(diǎn)進(jìn)行有效控制，確保任務(wù)最終達(dá)成。4.5.4資源管理在測(cè)試計(jì)劃階段，應(yīng)根據(jù)資源管理要求識(shí)別并管理測(cè)試過程中所雷的人員資源、軟/硬件資源和測(cè)試環(huán)境。必要時(shí)，測(cè)試環(huán)境資源和體育賽事組委會(huì)進(jìn)行協(xié)商后設(shè)置4.5.5風(fēng)險(xiǎn)管理應(yīng)對(duì)體育賽事信息化軟件測(cè)試全過程進(jìn)行風(fēng)險(xiǎn)管理，并確保風(fēng)險(xiǎn)管理貫穿體育賽事的賽前、賽中、賽后各個(gè)階段。風(fēng)險(xiǎn)管理的內(nèi)容包括但不限于：a)對(duì)風(fēng)險(xiǎn)進(jìn)行識(shí)別和分析，包括：什么可能出錯(cuò)、如何出錯(cuò)，為什么、可能的后果是什么;b)進(jìn)行嚴(yán)重風(fēng)險(xiǎn)評(píng)估，包括，就暴露程度而言，哪些是最重要的風(fēng)險(xiǎn)，如何調(diào)節(jié)風(fēng)險(xiǎn)。c)風(fēng)險(xiǎn)減緩和應(yīng)急規(guī)劃，包括；系統(tǒng)地闡述應(yīng)對(duì)風(fēng)險(xiǎn)和管理風(fēng)險(xiǎn)記錄的策略。5測(cè)試計(jì)劃5.1測(cè)試對(duì)象測(cè)試對(duì)象為體育賽事信息化建設(shè)和運(yùn)行的各信息系統(tǒng)，包括但不限于表B.1的系統(tǒng)5.2測(cè)試設(shè)計(jì)應(yīng)依據(jù)整體體育賽事信息化建設(shè)進(jìn)度計(jì)劃進(jìn)行設(shè)計(jì)，并在體育賽事籌備階段完成測(cè)試，確保軟件系統(tǒng)滿足體育賽事開展的需求，側(cè)試計(jì)劃內(nèi)容應(yīng)包含供應(yīng)商測(cè)試、集成測(cè)試、用戶接受測(cè)試和一致性測(cè)試的進(jìn)度計(jì)劃安排。5.3輸入及輸出輸入的內(nèi)容應(yīng)包括體育賽事信息化項(xiàng)目建設(shè)方案、整體進(jìn)度計(jì)劃輸出的內(nèi)容應(yīng)包括體育賽事信息系統(tǒng)軟件測(cè)試計(jì)劃5.4評(píng)審要求整體測(cè)試計(jì)劃應(yīng)經(jīng)過各測(cè)試相關(guān)方評(píng)審確認(rèn)，按照項(xiàng)目漸進(jìn)明細(xì)的一般規(guī)律，測(cè)試計(jì)劃變更應(yīng)經(jīng)過各測(cè)試相關(guān)方評(píng)審并保持各相關(guān)方對(duì)于測(cè)試計(jì)劃的一致性。56供應(yīng)商測(cè)試6.1測(cè)試目標(biāo)驗(yàn)證設(shè)計(jì)開發(fā)實(shí)現(xiàn)后的各系統(tǒng)(測(cè)試對(duì)象見5.1)是否符合設(shè)計(jì)要求。6.2測(cè)試類型測(cè)試類型見4.3,1。6.3測(cè)試相關(guān)方體育賽事各業(yè)務(wù)部門、軟件系統(tǒng)供應(yīng)商、第三方測(cè)試機(jī)構(gòu)。6.4測(cè)試地點(diǎn)、環(huán)境6.4.1測(cè)試地點(diǎn)可在軟件系統(tǒng)供應(yīng)商內(nèi)部或體育賽事現(xiàn)場(chǎng)。6.4.2在體育賽事現(xiàn)場(chǎng)測(cè)試時(shí)，應(yīng)綜合考慮環(huán)境條件對(duì)系統(tǒng)設(shè)備的影響，應(yīng)能保證測(cè)試正常運(yùn)行。6.5測(cè)試入口/出口準(zhǔn)則6.5.1入口準(zhǔn)則應(yīng)符合4.4.1的要求。6.5.2出口準(zhǔn)則應(yīng)在符合4.4.2要求的基礎(chǔ)上增加供應(yīng)商測(cè)試用例、測(cè)試報(bào)告。7集成測(cè)試7.1測(cè)試目標(biāo)驗(yàn)證軟件系統(tǒng)與應(yīng)用系統(tǒng)、硬件、網(wǎng)絡(luò)和云基礎(chǔ)設(shè)施等能否協(xié)同工作，與現(xiàn)有體育賽事相關(guān)系統(tǒng)能否協(xié)同運(yùn)行，確保軟件系統(tǒng)達(dá)到設(shè)計(jì)要求。7.2測(cè)試類型測(cè)試類型見4.3,1。7.3測(cè)試相關(guān)方軟件系統(tǒng)供應(yīng)商、第三方測(cè)試機(jī)構(gòu)、需求提出方、體育賽事各業(yè)務(wù)部門。7.4測(cè)試地點(diǎn)、環(huán)境測(cè)試地點(diǎn)為集成實(shí)驗(yàn)室，滿足以下要求a)集成實(shí)驗(yàn)室的環(huán)境和設(shè)施應(yīng)服務(wù)于集成測(cè)試的各參與方，集成實(shí)驗(yàn)室環(huán)境應(yīng)模擬賽時(shí)現(xiàn)場(chǎng)環(huán)境；b)所有測(cè)試相關(guān)設(shè)備設(shè)施配置宜與賽時(shí)需求保持一致；c)測(cè)試終端應(yīng)按照賽時(shí)客戶端要求進(jìn)行配置及驗(yàn)證，網(wǎng)絡(luò)設(shè)計(jì)應(yīng)盡可能模擬賽時(shí)場(chǎng)館配置，確保測(cè)試環(huán)境的有效性d)集成實(shí)驗(yàn)室應(yīng)建立實(shí)驗(yàn)室管理制度，確保各測(cè)試活動(dòng)按計(jì)劃進(jìn)行，提高集成測(cè)試工作的效率。7.5測(cè)試入口/出口準(zhǔn)則7.5.1入口準(zhǔn)則應(yīng)符合4.4.1的要求。7.5.2出口準(zhǔn)則應(yīng)在符合4.4.2要求的基礎(chǔ)上增加第三方測(cè)試報(bào)告。8用戶接受測(cè)試8.1測(cè)試目標(biāo)驗(yàn)證軟件系統(tǒng)是否滿足體育賽事業(yè)務(wù)部門用戶定義的需求，簽署正式的驗(yàn)收測(cè)試報(bào)告。8.2測(cè)試類型測(cè)試類型見4.3.1。8.3測(cè)試相關(guān)方體育賽事業(yè)務(wù)部門、雷求提出方、軟件系統(tǒng)供應(yīng)商。8.4測(cè)試地點(diǎn)、環(huán)境測(cè)試地點(diǎn)為集成實(shí)驗(yàn)室或系統(tǒng)部署所在地，滿足以下要求：a)集成實(shí)驗(yàn)室的環(huán)境和設(shè)施應(yīng)服務(wù)于用戶接受測(cè)試的各參與方，實(shí)驗(yàn)室應(yīng)模擬賽時(shí)現(xiàn)場(chǎng)環(huán)境；b)所有測(cè)試相關(guān)設(shè)備設(shè)施配置宜與賽時(shí)雷求保持一致；c)測(cè)試終端應(yīng)按照賽時(shí)客戶端要求進(jìn)行配置及驗(yàn)證，網(wǎng)絡(luò)設(shè)計(jì)、硬件設(shè)計(jì)應(yīng)模擬賽時(shí)場(chǎng)館配置，以保證測(cè)試環(huán)境的有效性：d)集成實(shí)驗(yàn)室應(yīng)建立實(shí)驗(yàn)室管理制度，以確保各測(cè)試活動(dòng)按計(jì)劃進(jìn)行，提高用戶接受測(cè)試工作的效率。8.5測(cè)試入口/出口準(zhǔn)則8.5.1入口準(zhǔn)則應(yīng)符合4.4.1要求。8.5.2出口準(zhǔn)則應(yīng)在符合4.4.2要求的基礎(chǔ)上增加用戶接受測(cè)試的測(cè)試用例、測(cè)試報(bào)告。9.1測(cè)試目標(biāo)驗(yàn)證技術(shù)代表(TD,TechnicalDelegatb章賽負(fù)責(zé)人/主任(CM,CompetitionManager)及體育賽事成績系統(tǒng)相關(guān)方評(píng)價(jià)成績系統(tǒng)是否符合技術(shù)手冊(cè)(THB,TechnicalHandbook)、體育項(xiàng)目需求書(SRB.SportRequirementsBook)相關(guān)要求。9.2測(cè)試類型測(cè)試類型見4.3.1。9.3測(cè)試相關(guān)方體育賽事業(yè)務(wù)部門、雷求提出方、軟件系統(tǒng)供應(yīng)商、TD,CM。9.4測(cè)試地點(diǎn)、環(huán)境測(cè)試地點(diǎn)為集成實(shí)驗(yàn)室，滿足以下要求：a)集成實(shí)驗(yàn)室的環(huán)境和設(shè)施應(yīng)服務(wù)于用戶接受測(cè)試的各參與方，實(shí)驗(yàn)室應(yīng)模擬賽時(shí)理場(chǎng)環(huán)境：b)所有測(cè)試相關(guān)設(shè)備設(shè)施配置宜與賽時(shí)需求保持一致；c)測(cè)試終端應(yīng)按照賽時(shí)客戶端要求進(jìn)行配置及驗(yàn)證，網(wǎng)絡(luò)設(shè)計(jì)應(yīng)模擬賽時(shí)場(chǎng)館配置，以保證測(cè)試環(huán)境的有效性；d)集成實(shí)驗(yàn)室應(yīng)建立實(shí)驗(yàn)室管理制度，以確保各測(cè)試活動(dòng)按計(jì)劃進(jìn)行，提高一致性測(cè)試工作的效率。9.5測(cè)試入口/出口準(zhǔn)則9.5.1入口準(zhǔn)則應(yīng)符合4.4.1的要求9.5.2出口準(zhǔn)則應(yīng)在符合4.4.2要求的基礎(chǔ)上增加一致性測(cè)試的測(cè)試報(bào)告、缺陷報(bào)告。(資料性)測(cè)試流程A.1測(cè)試計(jì)劃和控制A.1.1測(cè)試計(jì)劃階段A.1.1.1測(cè)試計(jì)劃階段應(yīng)包括如下內(nèi)容。b)明確采用的測(cè)試策略。應(yīng)陳述本次測(cè)試所屬階段、測(cè)試技術(shù)以及測(cè)試工具等。c)定義入口準(zhǔn)則和出口準(zhǔn)則d)明確測(cè)試環(huán)境的搭建要求。c)明確人員安排。D明確測(cè)試進(jìn)度及階段性產(chǎn)出。g)明確最終交付成果。h)陳述潛在問題與風(fēng)險(xiǎn)。A.1.1.2本階段應(yīng)對(duì)測(cè)試計(jì)劃或測(cè)試方案進(jìn)行審核和確認(rèn)A.1.2測(cè)試控制階段A.1.2.1測(cè)試控制階段應(yīng)包括如下內(nèi)容。a)利用事先定義的度量評(píng)估和分析測(cè)試結(jié)果b)監(jiān)督記錄測(cè)試進(jìn)度、測(cè)試用例覆蓋率、偏離情況、測(cè)試執(zhí)行效率(測(cè)試用例/人/天)等。c)及時(shí)反饋測(cè)試計(jì)劃執(zhí)行情況。d)確定是否采取糾正措施或更改原計(jì)劃/原方案。e)對(duì)于有重要影南的糾正措施或計(jì)劃/方案更改，應(yīng)提交變更控制委員會(huì)決策。測(cè)試控制階段從測(cè)試開始到測(cè)試完成，應(yīng)貫穿整個(gè)測(cè)試過程。A.1.2.2本階段應(yīng)按時(shí)提交經(jīng)過評(píng)審的測(cè)試進(jìn)度表、過程監(jiān)督記錄等。A.2測(cè)試分析和設(shè)計(jì)A.2.1測(cè)試分析和設(shè)計(jì)階段應(yīng)包括：a)對(duì)用戶需求和測(cè)試對(duì)象的可測(cè)試性做分析和評(píng)審，并給出明確結(jié)論；b)對(duì)用戶需求、系統(tǒng)架構(gòu)設(shè)計(jì)、軟件接口規(guī)范等測(cè)試依據(jù)進(jìn)行分析和評(píng)審，為之后設(shè)計(jì)測(cè)試用例做準(zhǔn)備；c)在分析測(cè)試對(duì)象、規(guī)格說明、測(cè)試對(duì)象間的關(guān)系和結(jié)構(gòu)的基礎(chǔ)正細(xì)化測(cè)試條件；d)以測(cè)試策略為依據(jù)，設(shè)計(jì)并確定測(cè)試用例，測(cè)試用例的選擇應(yīng)具有代表性、可判定性和可復(fù)現(xiàn)性；e)細(xì)化測(cè)試環(huán)境要求，進(jìn)一步明確必要的基礎(chǔ)設(shè)施和測(cè)試工具，準(zhǔn)備測(cè)試數(shù)據(jù)或測(cè)試腳本A.2.2本階段應(yīng)提交經(jīng)過評(píng)審的測(cè)試設(shè)計(jì)規(guī)格說明、測(cè)試用例等。A.3測(cè)試實(shí)現(xiàn)和執(zhí)行A.3.1測(cè)試實(shí)現(xiàn)和執(zhí)行階段應(yīng)包括：a)搭建并檢查測(cè)試環(huán)境，檢查配置正確性；b)按照測(cè)試用例執(zhí)行測(cè)試；c)記錄實(shí)測(cè)結(jié)果并與預(yù)期結(jié)果做比較；d)分析實(shí)測(cè)結(jié)果與預(yù)期結(jié)果出現(xiàn)偏差的原因，初步定位問題，提交缺陷問題單至軟件系統(tǒng)供應(yīng)商確認(rèn)修改；e)執(zhí)行回歸測(cè)試，確認(rèn)缺陷是否已修改，檢查原缺陷的修改是否引入新缺陷：f檢測(cè)人員應(yīng)協(xié)助軟件系統(tǒng)供應(yīng)商復(fù)現(xiàn)和定位發(fā)現(xiàn)的缺陷A.3.2本階段應(yīng)提交經(jīng)過評(píng)審的測(cè)試日志、缺陷問題單等A.4測(cè)試評(píng)估和生成報(bào)告A.4.1測(cè)試評(píng)估和生成報(bào)告階段應(yīng)包括n)對(duì)測(cè)試過程進(jìn)行評(píng)估，判斷測(cè)試工作是否滿足出口準(zhǔn)則的要求；b)對(duì)賽事信息化系統(tǒng)的質(zhì)量狀況進(jìn)行評(píng)估。A.4.2本階段應(yīng)提交經(jīng)過評(píng)審的交付成果，主要包括如下內(nèi)容。a)缺陷列表。缺陷列表主要內(nèi)容應(yīng)包括但不限于；樣品名稱、缺陷描述、預(yù)期結(jié)果、實(shí)測(cè)結(jié)果、復(fù)現(xiàn)步驟、缺陷等級(jí)、缺陷模塊、缺陷類別。b)測(cè)試報(bào)告。測(cè)試報(bào)告主要內(nèi)容應(yīng)包括但不限于；樣品名稱、測(cè)試依據(jù)、測(cè)試項(xiàng)目、檢驗(yàn)結(jié)論，技術(shù)要求、實(shí)測(cè)結(jié)果、單項(xiàng)評(píng)定(如果要求出評(píng)定)。A.5測(cè)試結(jié)束A.5.1測(cè)試結(jié)束階段應(yīng)包括：a)檢查所有測(cè)試交付成果是否已完備并提交至體育賽事信息化系統(tǒng)的建設(shè)方和體育賽事信息技術(shù)部門；b)對(duì)測(cè)試過程文檔、數(shù)據(jù)等資料進(jìn)行整理和保存；c)分析并總結(jié)經(jīng)驗(yàn)教訓(xùn)。A.5.2本階段應(yīng)提交測(cè)試總結(jié)報(bào)告等。(資料性)功能性測(cè)試內(nèi)容及非功能性測(cè)試要求示例功能性測(cè)試內(nèi)容示例見表B,1;非功能性測(cè)試要求示例見表B.2。表B.1功能性測(cè)試內(nèi)容示例1配置管理、項(xiàng)目管理、時(shí)間管理、審核管理、報(bào)名管理、導(dǎo)出數(shù)據(jù)2證、報(bào)告、簽審管理、重新制證管理、設(shè)置34記錄計(jì)算分?jǐn)?shù)，比賽信息實(shí)時(shí)公示、智能終端成56信息技術(shù)運(yùn)行中心