第八章—系統(tǒng)測(cè)試過(guò)程

1、1第八章 系統(tǒng)測(cè)試 安博測(cè)試空間技術(shù)中心http:/ 62303260 62303230 2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-2本章大綱p本章討論與系統(tǒng)測(cè)試的相關(guān)內(nèi)容 n系統(tǒng)測(cè)試過(guò)程n系統(tǒng)測(cè)試計(jì)劃n系統(tǒng)測(cè)試設(shè)計(jì)n系統(tǒng)測(cè)試執(zhí)行n回歸測(cè)試n驗(yàn)收測(cè)試2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-3p說(shuō)明說(shuō)明n將已經(jīng)集成好的軟件系統(tǒng)，作為整個(gè)基于計(jì)算機(jī)系統(tǒng)的一個(gè)元素，與計(jì)算機(jī)硬件、外設(shè)、某些支持軟件、數(shù)據(jù)和人員等其他系統(tǒng)元素結(jié)合在一起， 在實(shí)際運(yùn)行（使用）環(huán)

2、境下，對(duì)計(jì)算機(jī)系統(tǒng)進(jìn)行一系列的組裝測(cè)試和確認(rèn)測(cè)試。1.評(píng)估一個(gè)完整系統(tǒng)是否滿足該系統(tǒng)需求規(guī)格說(shuō)明書(shū)的要求2.系統(tǒng)測(cè)試不僅關(guān)注系統(tǒng)的功能，也包括性能、安全等非功能的測(cè)試p在實(shí)際的項(xiàng)目里，因?yàn)闀r(shí)間和投資預(yù)算的關(guān)系，測(cè)試資源主要消耗在功能測(cè)試上，非功能測(cè)試經(jīng)常被很多項(xiàng)目忽略。這確實(shí)有點(diǎn)令人惋惜。盡管非功能測(cè)試的確非常難做而且大多數(shù)工作需要在項(xiàng)目開(kāi)始的時(shí)候就開(kāi)始做，但是認(rèn)真對(duì)待非功能測(cè)試是非常必要的3.站在用戶角度進(jìn)行的測(cè)試，通常使用黑盒方法什么是系統(tǒng)測(cè)試2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-4p與單元測(cè)試相似，主要的系統(tǒng)測(cè)試

3、活動(dòng)包括n系統(tǒng)測(cè)試計(jì)劃n設(shè)計(jì)系統(tǒng)測(cè)試用例n實(shí)現(xiàn)測(cè)試用例n系統(tǒng)預(yù)測(cè)試設(shè)計(jì)和執(zhí)行系統(tǒng)預(yù)測(cè)試設(shè)計(jì)和執(zhí)行n搭建系統(tǒng)測(cè)試環(huán)境n執(zhí)行測(cè)試n結(jié)束報(bào)告n測(cè)試效率和系統(tǒng)評(píng)估p注意n非功能測(cè)試活動(dòng)可能獨(dú)立于功能測(cè)試活動(dòng)或包含在其中，具體情況與測(cè)試需求有關(guān)系統(tǒng)測(cè)試過(guò)程2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-5系統(tǒng)測(cè)試活動(dòng)p角色和職責(zé)n軟件測(cè)試工程師：制定系統(tǒng)測(cè)試計(jì)劃和方案并組織評(píng)審、按照系統(tǒng)測(cè)試方案實(shí)現(xiàn)測(cè)試用例和測(cè)試代碼、設(shè)計(jì)所需測(cè)試工具、編寫(xiě)測(cè)試規(guī)程、執(zhí)行系統(tǒng)測(cè)試用例、提交并跟蹤缺陷、完成系統(tǒng)測(cè)試報(bào)告并組織評(píng)審、輸出測(cè)試案例和總結(jié)等經(jīng)驗(yàn)文檔

4、n在系統(tǒng)測(cè)試過(guò)程中還可能涉及到的主要角色包括1.系統(tǒng)分析設(shè)計(jì)人員：提出系統(tǒng)測(cè)試需求、進(jìn)行測(cè)試需求跟蹤、進(jìn)行軟件系統(tǒng)可測(cè)性分析、確定系統(tǒng)測(cè)試的對(duì)象、范圍和方法2.開(kāi)發(fā)人員：需要在參與系統(tǒng)測(cè)試計(jì)劃和方案的評(píng)審、跟蹤解決軟件測(cè)試人員發(fā)現(xiàn)的缺陷、評(píng)審系統(tǒng)測(cè)試報(bào)告3.配置管理人員：對(duì)系統(tǒng)測(cè)試文檔進(jìn)行配置管理4.質(zhì)量保證人員：系統(tǒng)測(cè)試過(guò)程進(jìn)行審計(jì)。2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-6p與其它級(jí)別測(cè)試類似，系統(tǒng)測(cè)試計(jì)劃包括與其它級(jí)別測(cè)試類似，系統(tǒng)測(cè)試計(jì)劃包括n測(cè)試方法測(cè)試方法n測(cè)試范圍測(cè)試范圍n測(cè)試交付件測(cè)試交付件n測(cè)試過(guò)程準(zhǔn)則

5、n工作任務(wù)分布n測(cè)試進(jìn)度n測(cè)試資源n測(cè)試用例結(jié)構(gòu)及其用例n測(cè)試結(jié)論約定系統(tǒng)測(cè)試計(jì)劃2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-7p測(cè)試方法測(cè)試方法n黑盒方法，與系統(tǒng)實(shí)現(xiàn)方式無(wú)關(guān)p測(cè)試范圍測(cè)試范圍( (測(cè)試需求測(cè)試需求) )n功能1.各個(gè)功能2.功能之間的組合，業(yè)務(wù)流程的測(cè)試n非功能1.某些重要的整體屬性的驗(yàn)證n受條件限制，通常只關(guān)注決定系統(tǒng)質(zhì)量高低的那些重要的非功能特性系統(tǒng)測(cè)試計(jì)劃2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-8p測(cè)試交付件測(cè)試交付件1.XX

6、XX系統(tǒng)測(cè)試計(jì)劃2.XXXX系統(tǒng)測(cè)試計(jì)劃評(píng)審報(bào)告3.XXXX系統(tǒng)測(cè)試用例4.XXXX系統(tǒng)測(cè)試用例評(píng)審報(bào)告5.XXXX系統(tǒng)測(cè)試腳本6.XXXX系統(tǒng)測(cè)試腳本評(píng)審報(bào)告7.XXXX系統(tǒng)測(cè)試報(bào)告8.XXXX系統(tǒng)測(cè)試報(bào)告評(píng)審報(bào)告9.缺陷問(wèn)題單若干p過(guò)程準(zhǔn)則（書(shū)過(guò)程準(zhǔn)則（書(shū)P165P165）系統(tǒng)測(cè)試計(jì)劃2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-9p設(shè)計(jì)設(shè)計(jì)系統(tǒng)系統(tǒng)測(cè)試用例測(cè)試用例n系統(tǒng)測(cè)試是不需要了解系統(tǒng)內(nèi)部機(jī)理，站在用戶角度對(duì)系統(tǒng)進(jìn)行的測(cè)試。系統(tǒng)測(cè)試通常由測(cè)試部門(mén)負(fù)責(zé)，而不是系統(tǒng)的開(kāi)發(fā)人員n設(shè)計(jì)系統(tǒng)測(cè)試用例應(yīng)考慮如下因素1.驗(yàn)證功能正

7、確的測(cè)試用例2.想辦法讓功能失效的測(cè)試用例3.與非功能屬性相關(guān)的測(cè)試用例4.系統(tǒng)測(cè)試使用的測(cè)試數(shù)據(jù)最好是從實(shí)際的客戶應(yīng)用環(huán)境中提取出的系統(tǒng)測(cè)試活動(dòng)2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-10p搭建系統(tǒng)測(cè)試環(huán)境搭建系統(tǒng)測(cè)試環(huán)境n系統(tǒng)測(cè)試環(huán)境的主要元素1.執(zhí)行系統(tǒng)測(cè)試的軟硬件環(huán)境2.待測(cè)系統(tǒng)3.系統(tǒng)測(cè)試用例n既然系統(tǒng)測(cè)試是站在用戶角度進(jìn)行的測(cè)試，系統(tǒng)測(cè)試環(huán)境的每個(gè)元素也都應(yīng)該盡量與終端用戶的應(yīng)用環(huán)境一致，面向用戶的測(cè)試環(huán)境在項(xiàng)目一開(kāi)始就應(yīng)該著手準(zhǔn)備p執(zhí)行系統(tǒng)測(cè)試執(zhí)行系統(tǒng)測(cè)試n當(dāng)系統(tǒng)達(dá)到待測(cè)標(biāo)準(zhǔn)后，按照測(cè)試計(jì)劃要求執(zhí)行系統(tǒng)測(cè)試

8、n在執(zhí)行系統(tǒng)測(cè)試時(shí)使用測(cè)試工具非常有幫助，特別是對(duì)性能測(cè)試這種比較難作的專項(xiàng)測(cè)試。系統(tǒng)測(cè)試活動(dòng)2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-11缺陷跟蹤2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-12回歸測(cè)試p定義定義n驗(yàn)證缺陷是否修改正確是否引入新問(wèn)題的活動(dòng)1.回歸測(cè)試的規(guī)模（工作量）受多種因素的影響2.不是一個(gè)測(cè)試級(jí)別，但確是各個(gè)測(cè)試級(jí)別必須包括的內(nèi)容，只是回歸測(cè)試過(guò)程的策略有所不同3.測(cè)試用例的選取問(wèn)題 4.避免出現(xiàn)回歸測(cè)試死循環(huán)的情況2006級(jí)本科軟

9、件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-13驗(yàn)收測(cè)試p定義n有用戶參與的測(cè)試，包括用戶驗(yàn)收測(cè)試和操作驗(yàn)收測(cè)試p用戶驗(yàn)收測(cè)試用于確認(rèn)被測(cè)系統(tǒng)能滿足業(yè)務(wù)需求，并在將軟件正式交付給最終用戶之前，確保系統(tǒng)正常工作并可以使用。在測(cè)試組的協(xié)助下，由一個(gè)或多個(gè)用戶代表執(zhí)行或參與執(zhí)行。p操作驗(yàn)收測(cè)試的目的是確認(rèn)被測(cè)應(yīng)用滿足其操作需求病確保系統(tǒng)正式工作并可以使用，是在測(cè)試組的協(xié)助下由一個(gè)或多個(gè)操作代表執(zhí)行或參與執(zhí)行。p根據(jù)需要，用戶驗(yàn)收測(cè)試和操作驗(yàn)收測(cè)試也可以合二為一。2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of EC

10、NU 孫海英 版權(quán)所有 8-14驗(yàn)收測(cè)試p方法n黑盒測(cè)試方法，驗(yàn)證高級(jí)的系統(tǒng)業(yè)務(wù)需求和操作需求。n測(cè)試內(nèi)容1.典型任務(wù)2.用戶文檔n驗(yàn)收測(cè)試用例n通常是系統(tǒng)測(cè)試用例的一個(gè)有代表性的子集n針對(duì)用戶代表的要求，還需要確定是否需要設(shè)計(jì)和實(shí)現(xiàn)附加的測(cè)試腳本測(cè)試被測(cè)系統(tǒng)的某個(gè)方面n由測(cè)試設(shè)計(jì)人員負(fù)責(zé)設(shè)計(jì)2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-15驗(yàn)收測(cè)試p驗(yàn)收測(cè)試執(zhí)行n一般由用戶代表在測(cè)試組的協(xié)助下執(zhí)行。n和獨(dú)立測(cè)試觀察員一起客觀地判斷系統(tǒng)是否存在缺陷p提交驗(yàn)收測(cè)試報(bào)告2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年01月 SEI of ECNU 孫海英 版權(quán)所有 8-16p系統(tǒng)測(cè)試人員應(yīng)站在用戶的角度進(jìn)行測(cè)試p在執(zhí)行正式系統(tǒng)測(cè)試前進(jìn)行預(yù)測(cè)試p盡可能采用用戶實(shí)際的軟硬件環(huán)境和數(shù)據(jù)進(jìn)行測(cè)試p在缺陷提交人驗(yàn)證缺陷之前自己先驗(yàn)證缺陷修改是否正確p限制回歸測(cè)試的輪數(shù)p系統(tǒng)測(cè)試人員應(yīng)保持與開(kāi)發(fā)人員的良好關(guān)系建議2006級(jí)本科軟件測(cè)試與質(zhì)量保證 2008年9月-2009年0