第八章—系統(tǒng)測試過程

1、1第八章 系統(tǒng)測試 安博測試空間技術(shù)中心http:/ 62303260 62303230 2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-2本章大綱p本章討論與系統(tǒng)測試的相關(guān)內(nèi)容 n系統(tǒng)測試過程n系統(tǒng)測試計劃n系統(tǒng)測試設(shè)計n系統(tǒng)測試執(zhí)行n回歸測試n驗收測試2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-3p說明說明n將已經(jīng)集成好的軟件系統(tǒng)，作為整個基于計算機系統(tǒng)的一個元素，與計算機硬件、外設(shè)、某些支持軟件、數(shù)據(jù)和人員等其他系統(tǒng)元素結(jié)合在一起， 在實際運行（使用）環(huán)

2、境下，對計算機系統(tǒng)進行一系列的組裝測試和確認測試。1.評估一個完整系統(tǒng)是否滿足該系統(tǒng)需求規(guī)格說明書的要求2.系統(tǒng)測試不僅關(guān)注系統(tǒng)的功能，也包括性能、安全等非功能的測試p在實際的項目里，因為時間和投資預(yù)算的關(guān)系，測試資源主要消耗在功能測試上，非功能測試經(jīng)常被很多項目忽略。這確實有點令人惋惜。盡管非功能測試的確非常難做而且大多數(shù)工作需要在項目開始的時候就開始做，但是認真對待非功能測試是非常必要的3.站在用戶角度進行的測試，通常使用黑盒方法什么是系統(tǒng)測試2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-4p與單元測試相似，主要的系統(tǒng)測試

3、活動包括n系統(tǒng)測試計劃n設(shè)計系統(tǒng)測試用例n實現(xiàn)測試用例n系統(tǒng)預(yù)測試設(shè)計和執(zhí)行系統(tǒng)預(yù)測試設(shè)計和執(zhí)行n搭建系統(tǒng)測試環(huán)境n執(zhí)行測試n結(jié)束報告n測試效率和系統(tǒng)評估p注意n非功能測試活動可能獨立于功能測試活動或包含在其中，具體情況與測試需求有關(guān)系統(tǒng)測試過程2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-5系統(tǒng)測試活動p角色和職責n軟件測試工程師：制定系統(tǒng)測試計劃和方案并組織評審、按照系統(tǒng)測試方案實現(xiàn)測試用例和測試代碼、設(shè)計所需測試工具、編寫測試規(guī)程、執(zhí)行系統(tǒng)測試用例、提交并跟蹤缺陷、完成系統(tǒng)測試報告并組織評審、輸出測試案例和總結(jié)等經(jīng)驗文檔

4、n在系統(tǒng)測試過程中還可能涉及到的主要角色包括1.系統(tǒng)分析設(shè)計人員：提出系統(tǒng)測試需求、進行測試需求跟蹤、進行軟件系統(tǒng)可測性分析、確定系統(tǒng)測試的對象、范圍和方法2.開發(fā)人員：需要在參與系統(tǒng)測試計劃和方案的評審、跟蹤解決軟件測試人員發(fā)現(xiàn)的缺陷、評審系統(tǒng)測試報告3.配置管理人員：對系統(tǒng)測試文檔進行配置管理4.質(zhì)量保證人員：系統(tǒng)測試過程進行審計。2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-6p與其它級別測試類似，系統(tǒng)測試計劃包括與其它級別測試類似，系統(tǒng)測試計劃包括n測試方法測試方法n測試范圍測試范圍n測試交付件測試交付件n測試過程準則

5、n工作任務(wù)分布n測試進度n測試資源n測試用例結(jié)構(gòu)及其用例n測試結(jié)論約定系統(tǒng)測試計劃2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-7p測試方法測試方法n黑盒方法，與系統(tǒng)實現(xiàn)方式無關(guān)p測試范圍測試范圍( (測試需求測試需求) )n功能1.各個功能2.功能之間的組合，業(yè)務(wù)流程的測試n非功能1.某些重要的整體屬性的驗證n受條件限制，通常只關(guān)注決定系統(tǒng)質(zhì)量高低的那些重要的非功能特性系統(tǒng)測試計劃2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-8p測試交付件測試交付件1.XX

6、XX系統(tǒng)測試計劃2.XXXX系統(tǒng)測試計劃評審報告3.XXXX系統(tǒng)測試用例4.XXXX系統(tǒng)測試用例評審報告5.XXXX系統(tǒng)測試腳本6.XXXX系統(tǒng)測試腳本評審報告7.XXXX系統(tǒng)測試報告8.XXXX系統(tǒng)測試報告評審報告9.缺陷問題單若干p過程準則（書過程準則（書P165P165）系統(tǒng)測試計劃2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-9p設(shè)計設(shè)計系統(tǒng)系統(tǒng)測試用例測試用例n系統(tǒng)測試是不需要了解系統(tǒng)內(nèi)部機理，站在用戶角度對系統(tǒng)進行的測試。系統(tǒng)測試通常由測試部門負責，而不是系統(tǒng)的開發(fā)人員n設(shè)計系統(tǒng)測試用例應(yīng)考慮如下因素1.驗證功能正

7、確的測試用例2.想辦法讓功能失效的測試用例3.與非功能屬性相關(guān)的測試用例4.系統(tǒng)測試使用的測試數(shù)據(jù)最好是從實際的客戶應(yīng)用環(huán)境中提取出的系統(tǒng)測試活動2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-10p搭建系統(tǒng)測試環(huán)境搭建系統(tǒng)測試環(huán)境n系統(tǒng)測試環(huán)境的主要元素1.執(zhí)行系統(tǒng)測試的軟硬件環(huán)境2.待測系統(tǒng)3.系統(tǒng)測試用例n既然系統(tǒng)測試是站在用戶角度進行的測試，系統(tǒng)測試環(huán)境的每個元素也都應(yīng)該盡量與終端用戶的應(yīng)用環(huán)境一致，面向用戶的測試環(huán)境在項目一開始就應(yīng)該著手準備p執(zhí)行系統(tǒng)測試執(zhí)行系統(tǒng)測試n當系統(tǒng)達到待測標準后，按照測試計劃要求執(zhí)行系統(tǒng)測試

8、n在執(zhí)行系統(tǒng)測試時使用測試工具非常有幫助，特別是對性能測試這種比較難作的專項測試。系統(tǒng)測試活動2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-11缺陷跟蹤2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-12回歸測試p定義定義n驗證缺陷是否修改正確是否引入新問題的活動1.回歸測試的規(guī)模（工作量）受多種因素的影響2.不是一個測試級別，但確是各個測試級別必須包括的內(nèi)容，只是回歸測試過程的策略有所不同3.測試用例的選取問題 4.避免出現(xiàn)回歸測試死循環(huán)的情況2006級本科軟

9、件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-13驗收測試p定義n有用戶參與的測試，包括用戶驗收測試和操作驗收測試p用戶驗收測試用于確認被測系統(tǒng)能滿足業(yè)務(wù)需求，并在將軟件正式交付給最終用戶之前，確保系統(tǒng)正常工作并可以使用。在測試組的協(xié)助下，由一個或多個用戶代表執(zhí)行或參與執(zhí)行。p操作驗收測試的目的是確認被測應(yīng)用滿足其操作需求病確保系統(tǒng)正式工作并可以使用，是在測試組的協(xié)助下由一個或多個操作代表執(zhí)行或參與執(zhí)行。p根據(jù)需要，用戶驗收測試和操作驗收測試也可以合二為一。2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of EC

10、NU 孫海英 版權(quán)所有 8-14驗收測試p方法n黑盒測試方法，驗證高級的系統(tǒng)業(yè)務(wù)需求和操作需求。n測試內(nèi)容1.典型任務(wù)2.用戶文檔n驗收測試用例n通常是系統(tǒng)測試用例的一個有代表性的子集n針對用戶代表的要求，還需要確定是否需要設(shè)計和實現(xiàn)附加的測試腳本測試被測系統(tǒng)的某個方面n由測試設(shè)計人員負責設(shè)計2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-15驗收測試p驗收測試執(zhí)行n一般由用戶代表在測試組的協(xié)助下執(zhí)行。n和獨立測試觀察員一起客觀地判斷系統(tǒng)是否存在缺陷p提交驗收測試報告2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-16p系統(tǒng)測試人員應(yīng)站在用戶的角度進行測試p在執(zhí)行正式系統(tǒng)測試前進行預(yù)測試p盡可能采用用戶實際的軟硬件環(huán)境和數(shù)據(jù)進行測試p在缺陷提交人驗證缺陷之前自己先驗證缺陷修改是否正確p限制回歸測試的輪數(shù)p系統(tǒng)測試人員應(yīng)保持與開發(fā)人員的良好關(guān)系建議2006級本科軟件測試與質(zhì)量保證 2008年9月-2009年0