第15章軟件產(chǎn)品評(píng)價(jià)

1、2022-5-10第15章 軟件產(chǎn)品評(píng)價(jià)在軟件業(yè)界普遍認(rèn)同通過(guò)評(píng)估和改進(jìn)軟件過(guò)程可以提高軟件質(zhì)量的趨勢(shì)下，通過(guò)采用規(guī)范化的軟件產(chǎn)品評(píng)價(jià)過(guò)程，對(duì)開發(fā)組織開發(fā)的、商業(yè)現(xiàn)貨提交或定制的軟件產(chǎn)品等進(jìn)行評(píng)價(jià)，也是推動(dòng)軟件產(chǎn)品質(zhì)量進(jìn)一步提高的一項(xiàng)重要手段。2022-5-102 1515.1 .1 軟件產(chǎn)品評(píng)價(jià)的概念軟件產(chǎn)品評(píng)價(jià)的概念通過(guò)軟件產(chǎn)品評(píng)價(jià)，為有關(guān)各方提供關(guān)于軟件產(chǎn)品質(zhì)量可以理解、可以接受并且是可以信賴的定量評(píng)價(jià)結(jié)果，為軟件的推廣或者采用提供可以依賴的客觀依據(jù)。其潛在的好處如下：（1）開發(fā)者可以利用評(píng)價(jià)結(jié)果確定糾正措施（2）產(chǎn)品的供方可以從評(píng)價(jià)中對(duì)其產(chǎn)品的價(jià)值充滿信心（3）產(chǎn)品的需方可以把評(píng)價(jià)結(jié)果

2、用作獲取決定所依據(jù)的客觀數(shù)據(jù)（4）推廣軟件產(chǎn)品的評(píng)價(jià)將有助于與把產(chǎn)品質(zhì)量作為一個(gè)營(yíng)銷參數(shù)2022-5-10315.1.1 軟件產(chǎn)品評(píng)價(jià)的定義-根據(jù)特定的規(guī)程，對(duì)軟件產(chǎn)品的一個(gè)或多個(gè)特性執(zhí)行評(píng)估的技術(shù)操作也就是說(shuō)，按照一定的程序要求，通過(guò)測(cè)量、評(píng)審等方式確定軟件產(chǎn)品與質(zhì)量要求間的符合程度，這種符合程度既與對(duì)軟件產(chǎn)品的明確要求有關(guān)，也涉及隱含的要求，即軟件產(chǎn)品的質(zhì)量。 1515.1 .1 軟件產(chǎn)品評(píng)價(jià)的概念軟件產(chǎn)品評(píng)價(jià)的概念2022-5-104 1515.1 .1 軟件產(chǎn)品評(píng)價(jià)的概念軟件產(chǎn)品評(píng)價(jià)的概念 15.1.2 軟件產(chǎn)品評(píng)價(jià)級(jí)別在 GB/T 18492-2001標(biāo)準(zhǔn)中，系統(tǒng)和軟件的完整性依據(jù)系

3、統(tǒng)風(fēng)險(xiǎn)的可容忍度被分為A、B、C、D共4個(gè)等級(jí)。2022-5-105 1515. .2 2 軟件產(chǎn)品評(píng)價(jià)的通用模型軟件產(chǎn)品評(píng)價(jià)的通用模型2022-5-106 1515. .2 2 軟件產(chǎn)品評(píng)價(jià)的通用模型軟件產(chǎn)品評(píng)價(jià)的通用模型 15.2.1 確定評(píng)價(jià)需求1.確立評(píng)價(jià)目的確立評(píng)價(jià)目的是為了直接支持開發(fā)和獲得能滿足用戶要求的軟件2.標(biāo)識(shí)產(chǎn)品類型標(biāo)識(shí)要評(píng)價(jià)產(chǎn)品的類型，確定本次要評(píng)價(jià)的軟件是中間產(chǎn)品還是最終軟件產(chǎn)品，類型取決于所處的生存周期的階段和評(píng)價(jià)的目的。3.規(guī)定質(zhì)量模型將一個(gè)被評(píng)價(jià)的軟件產(chǎn)品質(zhì)量分解成幾種不同特性，通過(guò)質(zhì)量特性、子特性或質(zhì)量屬性來(lái)描述產(chǎn)品的質(zhì)量需求。表15-22022-5-107

4、1515. .2 2 軟件產(chǎn)品評(píng)價(jià)的通用模型軟件產(chǎn)品評(píng)價(jià)的通用模型15.2.2 規(guī)定評(píng)價(jià)1.選擇度量GB/T 16260軟件工程 產(chǎn)品質(zhì)量 通過(guò)給出若干度量元的方式列出了一些行之有效的測(cè)量方法。2.確定度量評(píng)定等級(jí)將產(chǎn)品滿足質(zhì)量需求的程度進(jìn)行分類，也就是建立評(píng)價(jià)結(jié)果的度量標(biāo)度，以便將評(píng)價(jià)結(jié)果映射到某一標(biāo)度上。表15-2 度量等級(jí)3.確立評(píng)估準(zhǔn)則可以按照軟件的完整性級(jí)別、規(guī)定的質(zhì)量模型和優(yōu)先順序列出要評(píng)價(jià)的質(zhì)量特性和子特性，選擇的內(nèi)部、外部或使用質(zhì)量的度量，可能的驗(yàn)收準(zhǔn)則等。2022-5-108 1515. .2 2 軟件產(chǎn)品評(píng)價(jià)的通用模型軟件產(chǎn)品評(píng)價(jià)的通用模型15.2.3 設(shè)計(jì)評(píng)價(jià)設(shè)計(jì)評(píng)價(jià)的主

5、要活動(dòng)是制定評(píng)價(jià)計(jì)劃，這一活動(dòng)的輸入是評(píng)價(jià)規(guī)格說(shuō)明，輸出是評(píng)價(jià)計(jì)劃。評(píng)價(jià)計(jì)劃描述了評(píng)價(jià)方法和評(píng)價(jià)者活動(dòng)的進(jìn)度表，其結(jié)果是評(píng)價(jià)計(jì)劃或一個(gè)評(píng)價(jià)模塊。2022-5-109 1515. .2 2 軟件產(chǎn)品評(píng)價(jià)的通用模型軟件產(chǎn)品評(píng)價(jià)的通用模型15.2.4 執(zhí)行評(píng)價(jià) 這一活動(dòng)的輸入是評(píng)價(jià)計(jì)劃，輸出是評(píng)價(jià)報(bào)告和評(píng)價(jià)數(shù)據(jù)。執(zhí)行評(píng)價(jià)包括獲取測(cè)量數(shù)據(jù)、與評(píng)估準(zhǔn)則相比較和給出評(píng)價(jià)結(jié)果3個(gè)主要活動(dòng)。2022-5-1010 1515. .3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程 15.3.1評(píng)價(jià)者進(jìn)行評(píng)價(jià)的相關(guān)概念當(dāng)今軟件專業(yè)化分工越來(lái)越細(xì)化，有越來(lái)越多的軟件開發(fā)組織或軟件的需方傾向于將軟件產(chǎn)品提交給獨(dú)立的第三方專

6、業(yè)機(jī)構(gòu)進(jìn)行客觀的評(píng)價(jià)，不僅體現(xiàn)公正性，也有助于發(fā)現(xiàn)軟件中的問(wèn)題。第三方評(píng)價(jià)者用的評(píng)價(jià)過(guò)程與開發(fā)者和需方用的評(píng)價(jià)過(guò)程最大的不同是，它強(qiáng)調(diào)獨(dú)立性。評(píng)價(jià)原則如下：（1）可重復(fù)性（2）可再現(xiàn)行（3）公正性（4）客觀性2022-5-1011 1515. .3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程1.評(píng)價(jià)的參與者及其職責(zé)評(píng)價(jià)的請(qǐng)求者和評(píng)價(jià)者是參與評(píng)價(jià)者用的評(píng)價(jià)過(guò)程的兩類角色，評(píng)價(jià)過(guò)程是由兩者共同實(shí)施的一組活動(dòng)構(gòu)成。這里可能涉及的請(qǐng)求者包括：軟件的供方、需方、開發(fā)者、用戶；可能涉及的評(píng)價(jià)者包括：第三方測(cè)試實(shí)驗(yàn)室，實(shí)施產(chǎn)品比較評(píng)價(jià)的機(jī)構(gòu)或者供方組織、需方組織和系統(tǒng)集成組織中的測(cè)試評(píng)價(jià)實(shí)體。2022-5-1

7、012 1515. .3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程請(qǐng)求者的職責(zé)如下：（1）對(duì)評(píng)價(jià)的軟件產(chǎn)品擁有合法的權(quán)利（2）為標(biāo)識(shí)和描述產(chǎn)品提供必要的信息（3）提供最初的評(píng)價(jià)需求（4）說(shuō)明對(duì)評(píng)價(jià)提交的信息加以保密的要求（5）必要時(shí)還應(yīng)滿足其他的相關(guān)需求2022-5-1013 1515. .3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者的職責(zé)如下：（1）確認(rèn)申請(qǐng)者對(duì)提交評(píng)價(jià)的軟件產(chǎn)品擁有充分合法的權(quán)利（2）按照要求對(duì)申請(qǐng)者提供的所有信息保密（3）提供有資格的經(jīng)過(guò)培訓(xùn)的人員實(shí)施評(píng)價(jià)（4）提供適當(dāng)?shù)脑u(píng)價(jià)工具和技術(shù)（5）按照評(píng)價(jià)需求實(shí)施評(píng)價(jià)（6）保留評(píng)價(jià)期間影響評(píng)估結(jié)果的所有工作記錄（7）保證及

8、時(shí)間申請(qǐng)者交付評(píng)價(jià)報(bào)告（8）按照申請(qǐng)者要求的程度是評(píng)價(jià)的活動(dòng)可視化2022-5-1014 1515. .3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程2.評(píng)價(jià)者和請(qǐng)求者之間的相互影響在評(píng)價(jià)過(guò)程中評(píng)價(jià)者和請(qǐng)求者之間的活動(dòng)表現(xiàn)在如下幾個(gè)方面：（1）評(píng)價(jià)需求階段：通常是請(qǐng)求者指定評(píng)價(jià)需求和評(píng)價(jià)者接受評(píng)價(jià)需求（2）評(píng)價(jià)規(guī)格說(shuō)明階段：評(píng)價(jià)者將根據(jù)交付的產(chǎn)品信息的評(píng)價(jià)需求指定評(píng)價(jià)規(guī)格說(shuō)明（3）評(píng)價(jià)設(shè)計(jì)階段：評(píng)價(jià)者根據(jù)評(píng)價(jià)規(guī)格說(shuō)明中的條款制定一個(gè)評(píng)價(jià)計(jì)劃，請(qǐng)求者可以接受或者拒絕這一提議（4）評(píng)價(jià)執(zhí)行階段：評(píng)價(jià)者按照計(jì)劃執(zhí)行評(píng)價(jià)（5）評(píng)價(jià)結(jié)論階段：評(píng)價(jià)者將評(píng)價(jià)報(bào)告交付給請(qǐng)求者2022-5-1015 1515.

9、.3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程3.評(píng)價(jià)需要考慮的問(wèn)題（1）被評(píng)價(jià)的軟件產(chǎn)品是為滿足特定需求而開發(fā)的，評(píng)價(jià)的請(qǐng)求者可能會(huì)提出特定的評(píng)價(jià)需求，因而評(píng)價(jià)目標(biāo)也會(huì)隨之不同（2）被評(píng)價(jià)的軟件產(chǎn)品是由各個(gè)部件構(gòu)成的，但由于開發(fā)方法的不同，其劃分、形式等也可以有所不同（3）能用于評(píng)價(jià)的技術(shù)有很多，在選擇時(shí)應(yīng)考慮評(píng)價(jià)目標(biāo)和軟件產(chǎn)品組成特點(diǎn)2022-5-1016 1515. .3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程 15.3.2 評(píng)價(jià)過(guò)程的實(shí)施2022-5-1017 1515. .3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程1.確立評(píng)價(jià)需求確立評(píng)價(jià)需求的目的就是以軟件產(chǎn)品的不同用戶為視角，

10、如產(chǎn)品的需方、供方、開發(fā)者、操作者或維護(hù)者等，來(lái)描述評(píng)價(jià)目標(biāo)，而這些目標(biāo)關(guān)系到軟件產(chǎn)品的預(yù)期用途和相關(guān)風(fēng)險(xiǎn)。聯(lián)合評(píng)審應(yīng)注意如下問(wèn)題：（1）評(píng)價(jià)范圍（2）所需信息（3）質(zhì)量需求2022-5-1018 1515. .3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程2.規(guī)定評(píng)價(jià)規(guī)定評(píng)價(jià)規(guī)格說(shuō)明的輸入是上一步批準(zhǔn)的評(píng)價(jià)需求，輸出是雙方共同認(rèn)可批準(zhǔn)的評(píng)價(jià)規(guī)格說(shuō)明。這一活動(dòng)的主要任務(wù)如下：（1）標(biāo)識(shí)要評(píng)價(jià)的產(chǎn)品（2）規(guī)定評(píng)價(jià)所用的技術(shù)和方法（3）對(duì)照評(píng)價(jià)需求驗(yàn)證評(píng)價(jià)規(guī)格說(shuō)明2022-5-1019 1515. .3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程3.設(shè)計(jì)評(píng)價(jià) 評(píng)價(jià)者應(yīng)制定一個(gè)評(píng)價(jià)計(jì)劃來(lái)描述評(píng)價(jià)所需要的

11、資源，應(yīng)把評(píng)價(jià)者使用的測(cè)量規(guī)程編寫成文檔，以便于執(zhí)行評(píng)價(jià)規(guī)格說(shuō)明中規(guī)定的測(cè)量。它的輸入是評(píng)價(jià)規(guī)格說(shuō)明，輸出是評(píng)價(jià)計(jì)劃。這一活動(dòng)主要任務(wù)如下：（1）編寫評(píng)價(jià)計(jì)劃（2）優(yōu)化評(píng)價(jià)計(jì)劃（3）根據(jù)可用資源安排評(píng)價(jià)活動(dòng)的進(jìn)度2022-5-1020 1515. .3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程4.執(zhí)行評(píng)價(jià)按照評(píng)價(jià)規(guī)格說(shuō)明中的規(guī)定和評(píng)價(jià)計(jì)劃的安排，評(píng)價(jià)者執(zhí)行具體的評(píng)價(jià)動(dòng)作，得到測(cè)量和驗(yàn)證的結(jié)果。它的輸入是評(píng)價(jià)計(jì)劃，輸出是評(píng)價(jià)報(bào)告草案和評(píng)價(jià)記錄。本活動(dòng)的主要任務(wù)如下：（1）產(chǎn)品部件的管理（2）評(píng)價(jià)數(shù)據(jù)的管理（3）評(píng)價(jià)工具的管理（4）現(xiàn)場(chǎng)評(píng)價(jià)的管理（5）特定評(píng)價(jià)技術(shù)使用要求的管理2022-5-102

12、1 1515. .3 3 評(píng)價(jià)者用的評(píng)價(jià)過(guò)程評(píng)價(jià)者用的評(píng)價(jià)過(guò)程5.作出評(píng)價(jià)結(jié)論對(duì)執(zhí)行評(píng)價(jià)輸出的評(píng)價(jià)報(bào)告草案進(jìn)行評(píng)審和評(píng)價(jià)數(shù)據(jù)管理。評(píng)價(jià)者對(duì)評(píng)價(jià)數(shù)據(jù)的管理，可以采用多種方法，具體如下：（1）將評(píng)價(jià)的文檔歸還請(qǐng)求者（2）評(píng)價(jià)報(bào)告和評(píng)價(jià)記錄均在一個(gè)規(guī)定的期限保存（3）所用其他數(shù)據(jù)應(yīng)在一個(gè)規(guī)定的期限內(nèi)保存2022-5-1022 1515. .4 4 產(chǎn)品評(píng)價(jià)實(shí)例產(chǎn)品評(píng)價(jià)實(shí)例本節(jié)通過(guò)一個(gè)由某軟件開發(fā)機(jī)構(gòu)開發(fā)的ERP（Enterprise Resource Planning 企業(yè)資源計(jì)劃）軟件系統(tǒng)實(shí)例，介紹軟件評(píng)價(jià)的具體過(guò)程與方法。ERP簡(jiǎn)介：ERP 是一種主要面向制造行業(yè)進(jìn)行物質(zhì)資源、資金資源和信息資源

13、集成一體化管理的企業(yè)信息管理系統(tǒng)。ERP 是一個(gè)以管理會(huì)計(jì)為核心可以提供跨地區(qū)、跨部門、甚至跨公司整合實(shí)時(shí)信息的企業(yè)管理軟件。針對(duì)物資資源管理（物流）、人力資源管理（人流）、財(cái)務(wù)資源管理（財(cái)流）、信息資源管理（信息流）集成一體化的企業(yè)管理軟件1。2022-5-1023 1515. .4 4 產(chǎn)品評(píng)價(jià)實(shí)例產(chǎn)品評(píng)價(jià)實(shí)例 15.4.1 確立評(píng)價(jià)需求在本實(shí)例中，被評(píng)價(jià)的ERP系統(tǒng)是一款面向國(guó)內(nèi)執(zhí)照企業(yè)的ERP軟件產(chǎn)品，基于Windows操作系統(tǒng)、SQL Server數(shù)據(jù)庫(kù)、采用C/S運(yùn)行模式。該系統(tǒng)由公共子系統(tǒng)、計(jì)劃子系統(tǒng)、BOM（Bill Of Material 物料清單）子系統(tǒng)、庫(kù)存子系統(tǒng)、采購(gòu)子

14、系統(tǒng)、銷售子系統(tǒng)和財(cái)務(wù)子系統(tǒng)7個(gè)子系統(tǒng)組成。確立對(duì)該軟件系統(tǒng)的評(píng)價(jià)需求的活動(dòng)主要有確立評(píng)價(jià)目的、標(biāo)識(shí)產(chǎn)品類型、規(guī)定質(zhì)量模型（表15-3）組成。2022-5-1024 1515. .4 4 產(chǎn)品評(píng)價(jià)實(shí)例產(chǎn)品評(píng)價(jià)實(shí)例 15.4.2 規(guī)定評(píng)價(jià)規(guī)格說(shuō)明規(guī)定評(píng)價(jià)的活動(dòng)實(shí)際上就是規(guī)定評(píng)價(jià)的規(guī)格說(shuō)明。它由選擇度量、確立度量評(píng)定等級(jí)和確立評(píng)估準(zhǔn)則組成。這一活動(dòng)的輸入是上一步的輸出-評(píng)價(jià)需求，它的輸出是評(píng)價(jià)規(guī)格說(shuō)明。書上表格15-4規(guī)定了相關(guān)的評(píng)價(jià)的權(quán)重。根據(jù) GB/T 14598-6 對(duì)軟件評(píng)價(jià)規(guī)格應(yīng)包括如下內(nèi)容：（1）評(píng)價(jià)范圍（2）評(píng)價(jià)的輸入和度量（3）評(píng)價(jià)結(jié)果的解釋準(zhǔn)則（表15-5）2022-5-1025

15、 1515. .4 4 產(chǎn)品評(píng)價(jià)實(shí)例產(chǎn)品評(píng)價(jià)實(shí)例 15.4.3 設(shè)計(jì)評(píng)價(jià)評(píng)價(jià)的設(shè)計(jì)主要是針對(duì)評(píng)價(jià)的規(guī)格說(shuō)明進(jìn)一步細(xì)化，并給出具體的測(cè)試用例2022-5-1026 1515. .4 4 產(chǎn)品評(píng)價(jià)實(shí)例產(chǎn)品評(píng)價(jià)實(shí)例15.4.4 執(zhí)行評(píng)價(jià)對(duì)以上評(píng)價(jià)進(jìn)行綜合考慮計(jì)算得出相關(guān)的評(píng)價(jià)結(jié)果。功能性評(píng)價(jià)的結(jié)果Q1：88.38%可靠性評(píng)價(jià)的結(jié)果Q2：99.11%易用性評(píng)價(jià)的結(jié)果Q3：86.00%總體評(píng)價(jià)質(zhì)量Q = Q1*0.4 + Q2*0.3 + Q3*0.3 = 90.86%2022-5-1027 1515. .4 4 產(chǎn)品評(píng)價(jià)實(shí)例產(chǎn)品評(píng)價(jià)實(shí)例 15.4.5 編寫評(píng)價(jià)報(bào)告根據(jù)上述評(píng)價(jià)過(guò)程所產(chǎn)生的記錄和結(jié)果，編寫評(píng)價(jià)報(bào)告。2022-5-1028 1515. .5 5 評(píng)價(jià)的策劃和管理評(píng)價(jià)的策劃和管理 15.5.1 一般考慮和支持機(jī)構(gòu)的主要任務(wù)評(píng)價(jià)支持機(jī)構(gòu)的主要任務(wù)如下：（1）獲取與產(chǎn)品有關(guān)的標(biāo)準(zhǔn)和信息，以及必要時(shí)獲取有關(guān)專家的支持（2）基于項(xiàng)目需求和組織需求指定適當(dāng)?shù)膬?nèi)部標(biāo)準(zhǔn)和開發(fā)適當(dāng)?shù)墓ぞ撸?）制定為評(píng)價(jià)設(shè)立基準(zhǔn)的準(zhǔn)則（4）評(píng)審軟件獲取和開發(fā)的效益和質(zhì)量（5）收集和分析評(píng)價(jià)結(jié)果，并在組織內(nèi)通過(guò)數(shù)據(jù)庫(kù)進(jìn)行分發(fā)（6）基于組織內(nèi)部和各項(xiàng)目評(píng)價(jià)的經(jīng)驗(yàn)，為技術(shù)轉(zhuǎn)移提供便利（7）支持評(píng)價(jià)項(xiàng)目及其各自的項(xiàng)目管理者2022-5-1029 1515. .5 5 評(píng)價(jià)的策劃和管理評(píng)