第13章 系統(tǒng)測(cè)試
第13章 系統(tǒng)測(cè)試 1 13.1 介紹 1 13.2 系統(tǒng)測(cè)試規(guī)程 2 13.2.1 目的 2 13.2.2 角色與職責(zé) 2 13.2.3 啟動(dòng)準(zhǔn)則 2 13.2.4 輸入 2 13.2.5 主要步驟 3 [Step1] 制定系統(tǒng)測(cè)試計(jì)劃 3 [Step2] 設(shè)計(jì)系統(tǒng)測(cè)試用例 3 [Step3] 執(zhí)行系統(tǒng)測(cè)試 3 [Step4] 缺陷管理與改錯(cuò) 3 13.2.6 輸出 3 13.2.7 結(jié)束準(zhǔn)則 4 13.2.8 度量 4 13.3 實(shí)施建議 4 第13章 系統(tǒng)測(cè)試 系統(tǒng)測(cè)試（System Test, ST）的目的是對(duì)最終軟件系統(tǒng)進(jìn)行全面的測(cè)試，確保最終軟件系統(tǒng)滿足產(chǎn)品需求并且遵 循系統(tǒng)設(shè)計(jì)。 系統(tǒng)測(cè)試過(guò)程域是SPP模型的重要組成部分。本規(guī)范闡述了系統(tǒng)測(cè)試的規(guī)程，該規(guī)程 的“目標(biāo)”、“角色與職責(zé)”、“啟動(dòng)準(zhǔn)則”、“輸入”、“主要步驟”、“輸出”、“完成準(zhǔn)則”和 “度量”均已定義。 本規(guī)范適用于國(guó)內(nèi)IT企業(yè)的軟件研發(fā)項(xiàng)目。建議用戶根據(jù)自身情況（如商業(yè)目標(biāo)、研 發(fā)實(shí)力等）適當(dāng)?shù)匦薷谋疽?guī)范，然后推廣使用。 13.1 介紹 系統(tǒng)測(cè)試流程如圖14- 1所示。由于系統(tǒng)測(cè)試的目的是驗(yàn)證最終軟件系統(tǒng)滿足產(chǎn)品需求并且遵循系統(tǒng)設(shè)計(jì)，所以 當(dāng)產(chǎn)品需求和系統(tǒng)設(shè)計(jì)文檔完成之后，系統(tǒng)測(cè)試小組就可以提前開(kāi)始制定測(cè)試計(jì)劃和設(shè) 計(jì)測(cè)試用例，而不必等到“實(shí)現(xiàn)與測(cè)試”階段結(jié)束。這樣可以提高系統(tǒng)測(cè)試的效率。 系統(tǒng)測(cè)試過(guò)程中發(fā)現(xiàn)的所有缺陷必須用統(tǒng)一的缺陷管理工具來(lái)管理，開(kāi)發(fā)人員應(yīng)當(dāng)及 時(shí)消除缺陷（改錯(cuò)）。 圖13-1 系統(tǒng)測(cè)試流程圖 項(xiàng)目經(jīng)理設(shè)法組建富有成效的系統(tǒng)測(cè)試小組。系統(tǒng)測(cè)試小組的成員主要來(lái)源于： ← 機(jī)構(gòu)獨(dú)立的測(cè)試小組（如果存在的話）。 ← 邀請(qǐng)其它項(xiàng)目的開(kāi)發(fā)人員參與系統(tǒng)測(cè)試。 ← 本項(xiàng)目的部分開(kāi)發(fā)人員。 ← 機(jī)構(gòu)的質(zhì)量保證人員。 系統(tǒng)測(cè)試小組應(yīng)當(dāng)根據(jù)項(xiàng)目的特征確定測(cè)試內(nèi)容。一般地，系統(tǒng)測(cè)試的主要內(nèi)容包括 ： ← 功能測(cè)試。即測(cè)試軟件系統(tǒng)的功能是否正確，其依據(jù)是需求文檔，如《產(chǎn)品需求規(guī) 格說(shuō)明書(shū)》。由于正確性是軟件最重要的質(zhì)量因素，所以功能測(cè)試必不可少。 ← 健壯性測(cè)試。即測(cè)試軟件系統(tǒng)在異常情況下能否正常運(yùn)行的能力。健壯性有兩層 含義：一是容錯(cuò)能力，二是恢復(fù)能力。 ← 性能測(cè)試。即測(cè)試軟件系統(tǒng)處理事務(wù)的速度，一是為了檢驗(yàn)性能是否符合需求， 二是為了得到某些性能數(shù)據(jù)供人們參考（例如用于宣傳）。 ← 用戶界面測(cè)試。重點(diǎn)是測(cè)試軟件系統(tǒng)的易用性和視覺(jué)效果等。 ← 安全性（security）測(cè)試。是指測(cè)試軟件系統(tǒng)防止非法入侵的能力?！鞍踩笔窍?對(duì)而言的，一般地，如果黑客為非法入侵花費(fèi)的代價(jià)（考慮時(shí)間、費(fèi)用、危險(xiǎn)等 因素）高于得到的好處，那么這樣的系統(tǒng)可以認(rèn)為是安全的。 ← 安裝與反安裝測(cè)試。 系統(tǒng)測(cè)試過(guò)程域產(chǎn)生的主要文檔有： ← 《系統(tǒng)測(cè)試計(jì)劃》，模板見(jiàn) [SPP-TEMP-ST-PLAN]。 ← 《系統(tǒng)測(cè)試用例》，模板見(jiàn) [SPP-TEMP-TEST-CASE]。 ← 《系統(tǒng)測(cè)試報(bào)告》，模板見(jiàn) [SPP-TEMP-TEST-REPORT]。 ← 《缺陷管理報(bào)告》，由缺陷管理工具自動(dòng)生成。 13.2 系統(tǒng)測(cè)試規(guī)程 13.2.1 目的 o 對(duì)最終軟件系統(tǒng)進(jìn)行全面的測(cè)試，確保最終軟件系統(tǒng)滿足產(chǎn)品需求并且遵循系統(tǒng)設(shè)計(jì)。 13.2.2 角色與職責(zé) o 項(xiàng)目經(jīng)理組建系統(tǒng)測(cè)試小組，并指定一名成員任測(cè)試組長(zhǎng)。 o 系統(tǒng)測(cè)試小組各成員共同制定測(cè)試計(jì)劃、設(shè)計(jì)測(cè)試用例、執(zhí)行測(cè)試，并撰寫(xiě)相應(yīng)的文檔 。測(cè)試組長(zhǎng)管理上述事務(wù)。 o 開(kāi)發(fā)人員及時(shí)消除測(cè)試人員發(fā)現(xiàn)的缺陷。 13.2.3 啟動(dòng)準(zhǔn)則 o 產(chǎn)品需求和系統(tǒng)設(shè)計(jì)文檔完成之后。 13.2.4 輸入 o 產(chǎn)品需求和系統(tǒng)設(shè)計(jì)文檔 13.2.5 主要步驟 [Step1] 制定系統(tǒng)測(cè)試計(jì)劃 o 系統(tǒng)測(cè)試小組各成員共同協(xié)商測(cè)試計(jì)劃。測(cè)試組長(zhǎng)按照指定的模板起草《系統(tǒng)測(cè)試計(jì)劃 》。該計(jì)劃主要包括： ← 測(cè)試范圍（內(nèi)容） ← 測(cè)試方法 ← 測(cè)試環(huán)境與輔助工具 ← 測(cè)試完成準(zhǔn)則 ← 人員與任務(wù)表 o 項(xiàng)目經(jīng)理審批《系統(tǒng)測(cè)試計(jì)劃》。該計(jì)劃被批準(zhǔn)后，轉(zhuǎn)向[Step2]。 [Step2] 設(shè)計(jì)系統(tǒng)測(cè)試用例 o 系統(tǒng)測(cè)試小組各成員依據(jù)《系統(tǒng)測(cè)試計(jì)劃》和指定的模板，設(shè)計(jì)（撰寫(xiě)）《系統(tǒng)測(cè)試用例 》。 o 測(cè)試組長(zhǎng)邀請(qǐng)開(kāi)發(fā)人員和同行專(zhuān)家，對(duì)《系統(tǒng)測(cè)試用例》進(jìn)行技術(shù)評(píng)審。該測(cè)試用例通過(guò) 技術(shù)評(píng)審后，轉(zhuǎn)向[Step3]。 [Step3] 執(zhí)行系統(tǒng)測(cè)試 o 系統(tǒng)測(cè)試小組各成員依據(jù)《系統(tǒng)測(cè)試計(jì)劃》和《系統(tǒng)測(cè)試用例》執(zhí)行系統(tǒng)測(cè)試。 o 將測(cè)試結(jié)果記錄在《系統(tǒng)測(cè)試報(bào)告》中，用“缺陷管理工具”來(lái)管理所發(fā)現(xiàn)的缺陷，并及時(shí) 通報(bào)給開(kāi)發(fā)人員。 [Step4] 缺陷管理與改錯(cuò) o 從[Step1]至[Step3]，任何人發(fā)現(xiàn)軟件系統(tǒng)中的缺陷時(shí)都必須使用指定的“缺陷管理工 具”。該工具將記錄所有缺陷的狀態(tài)信息，并可以自動(dòng)產(chǎn)生《缺陷管理報(bào)告》。 o 開(kāi)發(fā)人員及時(shí)消除已經(jīng)發(fā)現(xiàn)的缺陷。 o 開(kāi)發(fā)人員消除缺陷之后應(yīng)當(dāng)馬上進(jìn)行回歸測(cè)試，以確保不會(huì)引入新的缺陷。 13.2.6 輸出 o 消除了缺陷的最終軟件系統(tǒng) o 系統(tǒng)測(cè)試用例 o 系統(tǒng)測(cè)試報(bào)告 o 缺陷管理報(bào)告 13.2.7 結(jié)束準(zhǔn)則 o 對(duì)于非嚴(yán)格系統(tǒng)可以采用“基于測(cè)試用例”的準(zhǔn)則： ← 功能性測(cè)試用例通過(guò)率達(dá)到100％； ← 非功能性測(cè)試用例通過(guò)率達(dá)到80％時(shí)。 o 對(duì)于嚴(yán)格系統(tǒng)，應(yīng)當(dāng)補(bǔ)充“基于缺陷密度”的規(guī)則： ← 相鄰n個(gè)CPU小時(shí)內(nèi)“測(cè)試期缺陷密度”全部低于某個(gè)值m。例如n大于10，m小于等于 1。 o 本規(guī)程所有文檔已經(jīng)完成。 13.2.8 度量 o 測(cè)試人員和開(kāi)發(fā)人員統(tǒng)計(jì)測(cè)試和改錯(cuò)的工作量，文檔的規(guī)模，以及缺陷的個(gè)數(shù)與類(lèi)型， 并將此度量數(shù)據(jù)匯報(bào)給項(xiàng)目經(jīng)理。 13.3 實(shí)施建議 o 對(duì)系統(tǒng)測(cè)試人員進(jìn)行必要的培訓(xùn)，提高他們的測(cè)試效率。 o 項(xiàng)目經(jīng)理和測(cè)試小組根據(jù)項(xiàng)目的資源、時(shí)間等限制因素，設(shè)法合理地減少測(cè)試的工作量 ，例如減少“冗余或無(wú)效”的測(cè)試。 o 系統(tǒng)測(cè)試小組根據(jù)產(chǎn)品的特征，可以適當(dāng)?shù)匦薷谋疽?guī)范的各種文檔模板。 o 對(duì)系統(tǒng)測(cè)試過(guò)程中產(chǎn)生的所有代碼和有價(jià)值的文檔進(jìn)行配置管理。 o 為了調(diào)動(dòng)測(cè)試者的積極性，建議企業(yè)或項(xiàng)目設(shè)立獎(jiǎng)勵(lì)機(jī)制，例如：根據(jù)缺陷的危害程度 把獎(jiǎng)金分等級(jí)，每個(gè)新缺陷對(duì)應(yīng)一份獎(jiǎng)金，把獎(jiǎng)金發(fā)給第一個(gè)發(fā)現(xiàn)該缺陷的人。 ----------------------- 迭代 審批 執(zhí)行系統(tǒng)測(cè)試 制定測(cè)試計(jì)劃 缺陷管理與改錯(cuò) 設(shè)計(jì)測(cè)試用例 審批
第13章 系統(tǒng)測(cè)試