第15章軟件產(chǎn)品評價(jià)

第15章軟件產(chǎn)品評價(jià)在軟件業(yè)界普遍認(rèn)同通過評估和改進(jìn)軟件過程可以提高軟件質(zhì)量的趨勢下，通過采用規(guī)范化的軟件產(chǎn)品評價(jià)過程，對開發(fā)組織開發(fā)的、商業(yè)現(xiàn)貨提交或定制的軟件產(chǎn)品等進(jìn)行評價(jià)，也是推動軟件產(chǎn)品質(zhì)量進(jìn)一步提高的一項(xiàng)重要手段。2025/1/12§

15.1軟件產(chǎn)品評價(jià)的概念 通過軟件產(chǎn)品評價(jià)，為有關(guān)各方提供關(guān)于軟件產(chǎn)品質(zhì)量可以理解、可以接受并且是可以信賴的定量評價(jià)結(jié)果，為軟件的推廣或者采用提供可以依賴的客觀依據(jù)。其潛在的好處如下：（1）開發(fā)者可以利用評價(jià)結(jié)果確定糾正措施（2）產(chǎn)品的供方可以從評價(jià)中對其產(chǎn)品的價(jià)值充滿信心（3）產(chǎn)品的需方可以把評價(jià)結(jié)果用作獲取決定所依據(jù)的客觀數(shù)據(jù)（4）推廣軟件產(chǎn)品的評價(jià)將有助于與把產(chǎn)品質(zhì)量作為一個營銷參數(shù)2025/1/12215.1.1軟件產(chǎn)品評價(jià)的定義

--根據(jù)特定的規(guī)程，對軟件產(chǎn)品的一個或多個特性執(zhí)行評估的技術(shù)操作

也就是說，按照一定的程序要求，通過測量、評審等方式確定軟件產(chǎn)品與質(zhì)量要求間的符合程度，這種符合程度既與對軟件產(chǎn)品的明確要求有關(guān)，也涉及隱含的要求，即軟件產(chǎn)品的質(zhì)量。§15.1軟件產(chǎn)品評價(jià)的概念2025/1/123§15.1軟件產(chǎn)品評價(jià)的概念15.1.2軟件產(chǎn)品評價(jià)級別 在GB/T18492-2001標(biāo)準(zhǔn)中，系統(tǒng)和軟件的完整性依據(jù)系統(tǒng)風(fēng)險(xiǎn)的可容忍度被分為A、B、C、D共4個等級。2025/1/124§

15.2軟件產(chǎn)品評價(jià)的通用模型2025/1/125§15.2軟件產(chǎn)品評價(jià)的通用模型15.2.1確定評價(jià)需求1.確立評價(jià)目的 確立評價(jià)目的是為了直接支持開發(fā)和獲得能滿足用戶要求的軟件2.標(biāo)識產(chǎn)品類型 標(biāo)識要評價(jià)產(chǎn)品的類型，確定本次要評價(jià)的軟件是中間產(chǎn)品還是最終軟件產(chǎn)品，類型取決于所處的生存周期的階段和評價(jià)的目的。3.規(guī)定質(zhì)量模型 將一個被評價(jià)的軟件產(chǎn)品質(zhì)量分解成幾種不同特性，通過質(zhì)量特性、子特性或質(zhì)量屬性來描述產(chǎn)品的質(zhì)量需求。表15-22025/1/126§15.2軟件產(chǎn)品評價(jià)的通用模型15.2.2規(guī)定評價(jià)1.選擇度量

GB/T16260《軟件工程產(chǎn)品質(zhì)量》通過給出若干度量元的方式列出了一些行之有效的測量方法。2.確定度量評定等級

將產(chǎn)品滿足質(zhì)量需求的程度進(jìn)行分類，也就是建立評價(jià)結(jié)果的度量標(biāo)度，以便將評價(jià)結(jié)果映射到某一標(biāo)度上。表15-2度量等級3.確立評估準(zhǔn)則

可以按照軟件的完整性級別、規(guī)定的質(zhì)量模型和優(yōu)先順序列出要評價(jià)的質(zhì)量特性和子特性，選擇的內(nèi)部、外部或使用質(zhì)量的度量，可能的驗(yàn)收準(zhǔn)則等。2025/1/127§15.2軟件產(chǎn)品評價(jià)的通用模型15.2.3設(shè)計(jì)評價(jià)

設(shè)計(jì)評價(jià)的主要活動是制定評價(jià)計(jì)劃，這一活動的輸入是評價(jià)規(guī)格說明，輸出是評價(jià)計(jì)劃。評價(jià)計(jì)劃描述了評價(jià)方法和評價(jià)者活動的進(jìn)度表，其結(jié)果是評價(jià)計(jì)劃或一個評價(jià)模塊。2025/1/128§15.2軟件產(chǎn)品評價(jià)的通用模型15.2.4執(zhí)行評價(jià)這一活動的輸入是評價(jià)計(jì)劃，輸出是評價(jià)報(bào)告和評價(jià)數(shù)據(jù)。執(zhí)行評價(jià)包括獲取測量數(shù)據(jù)、與評估準(zhǔn)則相比較和給出評價(jià)結(jié)果3個主要活動。2025/1/129§15.3評價(jià)者用的評價(jià)過程15.3.1評價(jià)者進(jìn)行評價(jià)的相關(guān)概念

當(dāng)今軟件專業(yè)化分工越來越細(xì)化，有越來越多的軟件開發(fā)組織或軟件的需方傾向于將軟件產(chǎn)品提交給獨(dú)立的第三方專業(yè)機(jī)構(gòu)進(jìn)行客觀的評價(jià)，不僅體現(xiàn)公正性，也有助于發(fā)現(xiàn)軟件中的問題。 第三方評價(jià)者用的評價(jià)過程與開發(fā)者和需方用的評價(jià)過程最大的不同是，它強(qiáng)調(diào)獨(dú)立性。評價(jià)原則如下：（1）可重復(fù)性（2）可再現(xiàn)行（3）公正性（4）客觀性2025/1/1210§15.3評價(jià)者用的評價(jià)過程

1.評價(jià)的參與者及其職責(zé) 評價(jià)的請求者和評價(jià)者是參與評價(jià)者用的評價(jià)過程的兩類角色，評價(jià)過程是由兩者共同實(shí)施的一組活動構(gòu)成。這里可能涉及的請求者包括：軟件的供方、需方、開發(fā)者、用戶；可能涉及的評價(jià)者包括：第三方測試實(shí)驗(yàn)室，實(shí)施產(chǎn)品比較評價(jià)的機(jī)構(gòu)或者供方組織、需方組織和系統(tǒng)集成組織中的測試評價(jià)實(shí)體。2025/1/1211§15.3評價(jià)者用的評價(jià)過程

請求者的職責(zé)如下：（1）對評價(jià)的軟件產(chǎn)品擁有合法的權(quán)利（2）為標(biāo)識和描述產(chǎn)品提供必要的信息（3）提供最初的評價(jià)需求（4）說明對評價(jià)提交的信息加以保密的要求（5）必要時還應(yīng)滿足其他的相關(guān)需求2025/1/1212§15.3評價(jià)者用的評價(jià)過程

評價(jià)者的職責(zé)如下：（1）確認(rèn)申請者對提交評價(jià)的軟件產(chǎn)品擁有充分合法的權(quán)利（2）按照要求對申請者提供的所有信息保密（3）提供有資格的經(jīng)過培訓(xùn)的人員實(shí)施評價(jià)（4）提供適當(dāng)?shù)脑u價(jià)工具和技術(shù)（5）按照評價(jià)需求實(shí)施評價(jià)（6）保留評價(jià)期間影響評估結(jié)果的所有工作記錄（7）保證及時間申請者交付評價(jià)報(bào)告（8）按照申請者要求的程度是評價(jià)的活動可視化2025/1/1213§15.3評價(jià)者用的評價(jià)過程

2.評價(jià)者和請求者之間的相互影響

在評價(jià)過程中評價(jià)者和請求者之間的活動表現(xiàn)在如下幾個方面：（1）評價(jià)需求階段：通常是請求者指定評價(jià)需求和評價(jià)者接受評價(jià)需求（2）評價(jià)規(guī)格說明階段：評價(jià)者將根據(jù)交付的產(chǎn)品信息的評價(jià)需求指定評價(jià)規(guī)格說明（3）評價(jià)設(shè)計(jì)階段：評價(jià)者根據(jù)評價(jià)規(guī)格說明中的條款制定一個評價(jià)計(jì)劃，請求者可以接受或者拒絕這一提議（4）評價(jià)執(zhí)行階段：評價(jià)者按照計(jì)劃執(zhí)行評價(jià)（5）評價(jià)結(jié)論階段：評價(jià)者將評價(jià)報(bào)告交付給請求者2025/1/1214§15.3評價(jià)者用的評價(jià)過程

3.評價(jià)需要考慮的問題（1）被評價(jià)的軟件產(chǎn)品是為滿足特定需求而開發(fā)的，評價(jià)的請求者可能會提出特定的評價(jià)需求，因而評價(jià)目標(biāo)也會隨之不同（2）被評價(jià)的軟件產(chǎn)品是由各個部件構(gòu)成的，但由于開發(fā)方法的不同，其劃分、形式等也可以有所不同（3）能用于評價(jià)的技術(shù)有很多，在選擇時應(yīng)考慮評價(jià)目標(biāo)和軟件產(chǎn)品組成特點(diǎn)2025/1/1215§15.3評價(jià)者用的評價(jià)過程15.3.2評價(jià)過程的實(shí)施2025/1/1216§15.3評價(jià)者用的評價(jià)過程 1.確立評價(jià)需求

確立評價(jià)需求的目的就是以軟件產(chǎn)品的不同用戶為視角，如產(chǎn)品的需方、供方、開發(fā)者、操作者或維護(hù)者等，來描述評價(jià)目標(biāo)，而這些目標(biāo)關(guān)系到軟件產(chǎn)品的預(yù)期用途和相關(guān)風(fēng)險(xiǎn)。聯(lián)合評審應(yīng)注意如下問題：（1）評價(jià)范圍（2）所需信息（3）質(zhì)量需求2025/1/1217§15.3評價(jià)者用的評價(jià)過程

2.規(guī)定評價(jià) 規(guī)定評價(jià)規(guī)格說明的輸入是上一步批準(zhǔn)的評價(jià)需求，輸出是雙方共同認(rèn)可批準(zhǔn)的評價(jià)規(guī)格說明。這一活動的主要任務(wù)如下：（1）標(biāo)識要評價(jià)的產(chǎn)品（2）規(guī)定評價(jià)所用的技術(shù)和方法（3）對照評價(jià)需求驗(yàn)證評價(jià)規(guī)格說明2025/1/1218§15.3評價(jià)者用的評價(jià)過程

3.設(shè)計(jì)評價(jià) 評價(jià)者應(yīng)制定一個評價(jià)計(jì)劃來描述評價(jià)所需要的資源，應(yīng)把評價(jià)者使用的測量規(guī)程編寫成文檔，以便于執(zhí)行評價(jià)規(guī)格說明中規(guī)定的測量。它的輸入是評價(jià)規(guī)格說明，輸出是評價(jià)計(jì)劃。這一活動主要任務(wù)如下：（1）編寫評價(jià)計(jì)劃（2）優(yōu)化評價(jià)計(jì)劃（3）根據(jù)可用資源安排評價(jià)活動的進(jìn)度2025/1/1219§15.3評價(jià)者用的評價(jià)過程 4.執(zhí)行評價(jià) 按照評價(jià)規(guī)格說明中的規(guī)定和評價(jià)計(jì)劃的安排，評價(jià)者執(zhí)行具體的評價(jià)動作，得到測量和驗(yàn)證的結(jié)果。它的輸入是評價(jià)計(jì)劃，輸出是評價(jià)報(bào)告草案和評價(jià)記錄。本活動的主要任務(wù)如下：（1）產(chǎn)品部件的管理（2）評價(jià)數(shù)據(jù)的管理（3）評價(jià)工具的管理（4）現(xiàn)場評價(jià)的管理（5）特定評價(jià)技術(shù)使用要求的管理2025/1/1220§15.3評價(jià)者用的評價(jià)過程

5.作出評價(jià)結(jié)論 對執(zhí)行評價(jià)輸出的評價(jià)報(bào)告草案進(jìn)行評審和評價(jià)數(shù)據(jù)管理。 評價(jià)者對評價(jià)數(shù)據(jù)的管理，可以采用多種方法，具體如下：（1）將評價(jià)的文檔歸還請求者（2）評價(jià)報(bào)告和評價(jià)記錄均在一個規(guī)定的期限保存（3）所用其他數(shù)據(jù)應(yīng)在一個規(guī)定的期限內(nèi)保存2025/1/1221§

15.4產(chǎn)品評價(jià)實(shí)例 本節(jié)通過一個由某軟件開發(fā)機(jī)構(gòu)開發(fā)的ERP（EnterpriseResourcePlanning企業(yè)資源計(jì)劃）軟件系統(tǒng)實(shí)例，介紹軟件評價(jià)的具體過程與方法。 ERP簡介：ERP是一種主要面向制造行業(yè)進(jìn)行物質(zhì)資源、資金資源和信息資源集成一體化管理的企業(yè)信息管理系統(tǒng)。ERP是一個以管理會計(jì)為核心可以提供跨地區(qū)、跨部門、甚至跨公司整合實(shí)時信息的企業(yè)管理軟件。針對物資資源管理（物流）、人力資源管理（人流）、財(cái)務(wù)資源管理（財(cái)流）、信息資源管理（信息流）集成一體化的企業(yè)管理軟件[1]。

2025/1/1222§15.4產(chǎn)品評價(jià)實(shí)例15.4.1確立評價(jià)需求

在本實(shí)例中，被評價(jià)的ERP系統(tǒng)是一款面向國內(nèi)執(zhí)照企業(yè)的ERP軟件產(chǎn)品，基于Windows操作系統(tǒng)、SQLServer數(shù)據(jù)庫、采用C/S運(yùn)行模式。該系統(tǒng)由公共子系統(tǒng)、計(jì)劃子系統(tǒng)、BOM（BillOfMaterial物料清單）子系統(tǒng)、庫存子系統(tǒng)、采購子系統(tǒng)、銷售子系統(tǒng)和財(cái)務(wù)子系統(tǒng)7個子系統(tǒng)組成。 確立對該軟件系統(tǒng)的評價(jià)需求的活動主要有確立評價(jià)目的、標(biāo)識產(chǎn)品類型、規(guī)定質(zhì)量模型（表15-3）組成。2025/1/1223§15.4產(chǎn)品評價(jià)實(shí)例15.4.2規(guī)定評價(jià)規(guī)格說明

規(guī)定評價(jià)的活動實(shí)際上就是規(guī)定評價(jià)的規(guī)格說明。它由選擇度量、確立度量評定等級和確立評估準(zhǔn)則組成。這一活動的輸入是上一步的輸出--評價(jià)需求，它的輸出是評價(jià)規(guī)格說明。書上表格15-4規(guī)定了相關(guān)的評價(jià)的權(quán)重。 根據(jù)GB/T14598-6對軟件評價(jià)規(guī)格應(yīng)包括如下內(nèi)容：（1）評價(jià)范圍（2）評價(jià)的輸入和度量（3）評價(jià)結(jié)果的解釋準(zhǔn)則（表15-5）2025/1/1224§15.4產(chǎn)品評價(jià)實(shí)例15.4.3設(shè)計(jì)評價(jià)

評價(jià)的設(shè)計(jì)主要是針對評價(jià)的規(guī)格說明進(jìn)一步細(xì)化，并給出具體的測試用例2025/1/1225§15.4產(chǎn)品評價(jià)實(shí)例15.4.4執(zhí)行評價(jià)對以上評價(jià)進(jìn)行綜合考慮計(jì)算得出相關(guān)的評價(jià)結(jié)果。功能性評價(jià)的結(jié)果Q1：88.38%可靠性評價(jià)的結(jié)果Q2：99.11%易用性評價(jià)的結(jié)果Q3：86.00%總體評價(jià)質(zhì)量Q=Q1*0.4+Q2*0.3+Q3*0.3=90.86%2025/1/1226§15.4產(chǎn)品評價(jià)實(shí)例15.4.5編寫評價(jià)報(bào)告根據(jù)上述評價(jià)過程所產(chǎn)生的記錄和結(jié)果，編寫評價(jià)報(bào)告。2025/1/1227§

15.5評價(jià)的策劃和管理15.5.1一般考慮和支持機(jī)構(gòu)的主要任務(wù)評價(jià)支持機(jī)構(gòu)的主要任務(wù)如下：（1）獲取與產(chǎn)品有關(guān)的標(biāo)準(zhǔn)和信息，以及必要時獲取有關(guān)專家的支持（2）基于項(xiàng)目需求和組織需求指定適當(dāng)?shù)膬?nèi)部標(biāo)準(zhǔn)和開發(fā)適當(dāng)?shù)墓ぞ撸?）制定為評價(jià)設(shè)立基準(zhǔn)的準(zhǔn)則（4）評審軟件獲取和開發(fā)的效益和質(zhì)量（5）收集和分析評價(jià)結(jié)果，并在組織內(nèi)通過數(shù)據(jù)庫進(jìn)行分發(fā)（6）基于組織內(nèi)部和各項(xiàng)目評價(jià)的經(jīng)驗(yàn)，為技術(shù)轉(zhuǎn)移提供便利（7）支持評價(jià)項(xiàng)目及其各自的項(xiàng)目管理者2025/1/1228§15.5評價(jià)的策劃和管理支持機(jī)構(gòu)和評價(jià)項(xiàng)目的