軟件測(cè)試技術(shù)與測(cè)試實(shí)訓(xùn)教程講座2第2章軟件測(cè)試的質(zhì)量要求v12學(xué)時(shí)

單擊此處編輯母版標(biāo)題樣式,單擊此處編輯母版文本樣式,第二級(jí),第三級(jí),第四級(jí),第五級(jí),200,6,年,5,月,1,日,中科院計(jì)算所培訓(xùn)中心,*,單擊此處編輯母版標(biāo)題樣式,單擊此處編輯母版文本樣式,第二級(jí),第三級(jí),第四級(jí),第五級(jí),*,單擊此處編輯母版標(biāo)題樣式,單擊此處編輯母版文本樣式,第二級(jí),第三級(jí),第四級(jí),第五級(jí),*,軟件測(cè)試技術(shù)與測(cè)試實(shí)訓(xùn)教程,黎連業(yè) 王華 李龍 黎照,北京：機(jī)械工業(yè)出版社,2012.05,第,2,講：,第,2,章 軟件測(cè)試的質(zhì)量要求,軟件測(cè)試是軟件工程的重要組成部分，測(cè)試工作的質(zhì)量直接影響軟件產(chǎn)品的生命力。軟件測(cè)試質(zhì)量的重點(diǎn)是測(cè)試成熟度模型、質(zhì)量要求和測(cè)試流程細(xì)則。本章重點(diǎn)討論以下內(nèi)容：,軟件測(cè)試成熟度模型,;,軟件測(cè)試的質(zhì)量,;,軟件測(cè)試人員的職責(zé),軟件測(cè)試流程細(xì)則要求。,2,1,軟件測(cè)試成熟度模型,2,1,1,軟件測(cè)試成熟度模型,軟件測(cè)試成熟度模型有三個(gè)。這三個(gè)模型是：,TCMMTesting Capability Maturity Model,1996,年，,Testing Computer Software,會(huì)議上,Rodger,和,Susan Burgess,提出。,TSMTestability Support Model,1996,年，,David,Gelperin,和,Aldin,Hayashi,提出。,TMMTesting Maturity Model,1996,年，,IIIene,Burnsein,等提出。,1,TCMM,軟件測(cè)試成熟度模型,TCMM,定義了,5,個(gè)級(jí)別，與,CMM,的級(jí)別設(shè)置完全一樣。,第一級(jí)：初始級(jí)；,第二級(jí)：可重復(fù)級(jí)；,第三級(jí)：已定義級(jí)；,第四級(jí)：受管理級(jí)；,第五級(jí)：優(yōu)化級(jí)。,2,TSM,軟件測(cè)試成熟度模型,TSM,有三個(gè)級(jí)別分別是：,第一級(jí)：弱（,Weak,）?？蓽y(cè)性支持，很少測(cè)試問題被提及；,第二級(jí)：基本（,Basic,）?？蓽y(cè)性支持，基本的測(cè)試問題被提及；,第三級(jí)：強(qiáng)（,strong,）?？蓽y(cè)性支持，所有測(cè)試問題被提及。,TSM,定義了,6,個(gè),KSA(Key,Support Area),，這,6,個(gè),KSA,是：,測(cè)試友好的基礎(chǔ)構(gòu)架；,顧及測(cè)試的項(xiàng)目計(jì)劃；,測(cè)試友好的產(chǎn)品信息；,顧及測(cè)試的軟件設(shè)計(jì)；,測(cè)試件；,測(cè)試環(huán)境設(shè)計(jì)。,TSM,從測(cè)試組織的外部而非內(nèi)部本身來考察測(cè)試的成熟性，這是他區(qū)別于另外兩個(gè)測(cè)試模型的地方。,3,TMM,軟件測(cè)試成熟度模型,TMM,（,Testing Maturity Model,）定義了,5,個(gè)級(jí)別。,第一級(jí) 初始級(jí)；,第二級(jí) 定義級(jí)；,第三級(jí) 集成級(jí)；,第四級(jí) 管理和測(cè)量級(jí)；,第五級(jí) 優(yōu)化預(yù)防缺陷和質(zhì)量控制級(jí)。,這三個(gè)模型是各有側(cè)重的關(guān)于測(cè)試的成熟度模型。而當(dāng)前流行的是,TMM,。,2,1,2 TMM,軟件測(cè)試成熟度模型簡(jiǎn)要介紹,1,TMM,模型框架,TMM,定義了五個(gè)成熟度等級(jí)，每個(gè)等級(jí)代表著一個(gè)成熟的測(cè)試過程。,TMM,模型框架如圖,2-1,所示。,2,每個(gè)等級(jí)的成熟度目標(biāo),每個(gè)等級(jí)的成熟度目標(biāo)如圖,2-2,所示。,初始級(jí)：,測(cè)試是一個(gè)混亂無序的過程，幾乎沒有定義并且與調(diào)試沒有區(qū)別。軟件開發(fā)過程中缺乏測(cè)試資源，工具以及訓(xùn)練有素的測(cè)試人員。測(cè)試是代碼完成后以隨意方式進(jìn)行的。測(cè)試與調(diào)試相互交錯(cuò)以找出軟件的缺陷。測(cè)試的目標(biāo)是表明軟件奏效。發(fā)行的軟件產(chǎn)品沒有質(zhì)量保證，缺乏資源、工具和合適的工作人員。,定義級(jí)：,TMM,的定義級(jí)中，測(cè)試己具備基本的測(cè)試技術(shù)和方法，軟件的測(cè)試與調(diào)試己經(jīng)明確地被區(qū)分開。,制訂測(cè)試與調(diào)試目標(biāo),啟動(dòng)測(cè)試計(jì)劃過程,制度化基本的測(cè)試技術(shù)和方法,集成級(jí)：,軟件測(cè)試的過程及質(zhì)量對(duì)軟件產(chǎn)品質(zhì)量有直接影響。由于測(cè)試往往是在時(shí)間緊，壓力大的情況下所完成的一系列復(fù)雜的活動(dòng)，因此應(yīng)由訓(xùn)練有素的專業(yè)人員組成測(cè)試組。測(cè)試組要完成與測(cè)試有關(guān)的多種活動(dòng)，包括負(fù)責(zé)制訂測(cè)試計(jì)劃，實(shí)施測(cè)試執(zhí)行，記錄測(cè)試結(jié)果，制訂與測(cè)試有關(guān)的標(biāo)準(zhǔn)和測(cè)試度量，建立鍘試數(shù)據(jù)庫(kù)，測(cè)試重用，測(cè)試跟蹤以及測(cè)試評(píng)價(jià)等。,制訂技術(shù)培訓(xùn)計(jì)劃,軟件生命周期測(cè)試,控制和監(jiān)視測(cè)試過程,管理和測(cè)量級(jí)：,在管理和測(cè)量級(jí)，測(cè)試活動(dòng)是完全被管理的；有策劃、有指導(dǎo)、人員具備技能、有組織、可控制。管理層、測(cè)試者們定義、收集、分析和使用測(cè)試相關(guān)的度量數(shù)據(jù)。測(cè)試活動(dòng)的定義正式擴(kuò)展到整個(gè)生命周期中的審查活動(dòng)，同行評(píng)審和審查作為基于實(shí)現(xiàn)的測(cè)試活動(dòng)的補(bǔ)充，它們被認(rèn)為是質(zhì)量控制程序，用以移除軟件產(chǎn)品的缺陷。,管理和測(cè)量級(jí)有,3,個(gè)要實(shí)現(xiàn)的成熟度目標(biāo),:,(1),建立組織范圍內(nèi)的評(píng)審程序,(2),建立測(cè)試過程的測(cè)量程序,(3),軟件質(zhì)量評(píng)價(jià),優(yōu)化預(yù)防缺陷和質(zhì)量控制級(jí)：,測(cè)試首先要保證軟件產(chǎn)品滿足規(guī)格說明書、可靠，并對(duì)它的可靠性有一種確定的信心。其次，測(cè)試要處理缺陷和預(yù)防缺陷，這點(diǎn)通過收集和分析缺陷數(shù)據(jù)來實(shí)現(xiàn)。由于本級(jí)的測(cè)試活動(dòng)可重復(fù)、已管理、已定義和己測(cè)量的，因此軟件組織能夠優(yōu)化調(diào)整和持續(xù)改進(jìn)測(cè)試過程。測(cè)試過程的管理為持續(xù)改進(jìn)產(chǎn)品質(zhì)量和過程質(zhì)量提供指導(dǎo)，并提供必要的基礎(chǔ)設(shè)施。優(yōu)化，預(yù)防缺陷和質(zhì)量控制級(jí)有,3,個(gè)要實(shí)現(xiàn)的成熟度目標(biāo),:,（,1,）應(yīng)用過程數(shù)據(jù)預(yù)防缺陷。這時(shí)的軟件組織能夠記錄軟件缺陷，分析缺陷模式，識(shí)別錯(cuò)誤根源，制訂防止缺陷再次發(fā)生的計(jì)劃，提供跟蹤這種括動(dòng)的辦法，并將這些活動(dòng)貫穿于全組織的各個(gè)項(xiàng)目中。,（,2,）質(zhì)量控制在本級(jí)，軟件組織通過采用統(tǒng)計(jì)采樣技術(shù)，測(cè)量組織的自信度，測(cè)量用戶對(duì)組織的信賴度以及設(shè)定軟件可靠性目標(biāo)來推進(jìn)測(cè)試過程。,(3),優(yōu)化測(cè)試過程在測(cè)試成熟度的最高級(jí)，己能夠量化測(cè)試過程。,2,2,軟件測(cè)試的質(zhì)量,2.2.1,軟件質(zhì)量屬性,軟件質(zhì)量是許多質(zhì)量屬性的綜合體現(xiàn)，人們通過改善軟件的各種質(zhì)量屬性而提高軟件的質(zhì)量。軟件的質(zhì)量屬性很多，軟件工程教科書以及,CMM,和,ISO9001,都作了明確的介紹如正確性、精確性，健壯性、可靠性、容錯(cuò)性、性能、易用性、安全性、可擴(kuò)展性、可復(fù)用性、兼容性、可移植性、可測(cè)試性、可維護(hù)性、靈活性等。,軟件質(zhì)量屬性可分為兩大類：“功能性”與“非功能性”。,1.,功能性質(zhì)量因素,2.,非功能性質(zhì)量因素,2.2.2,軟件測(cè)試的質(zhì)量要求,軟件測(cè)試的質(zhì)量要求要重點(diǎn)注意如下,9,大點(diǎn)內(nèi)容。,1.,測(cè)試的產(chǎn)品要有產(chǎn)品描述,2.,功能,3.,可靠性,4.,易用性,5.,效率,6.,可維護(hù)性,7.,可移植性,8.,用戶文檔,9.,程序,2.2.3,軟件測(cè)試的質(zhì)量控制,軟件測(cè)試的質(zhì)量控制主要有制定測(cè)試計(jì)劃、測(cè)試說明書、測(cè)試用例,(,測(cè)試腳本,),、測(cè)試數(shù)據(jù)、測(cè)試執(zhí)行、提交階段測(cè)試報(bào)告、缺陷報(bào)告、技術(shù)評(píng)審。要想成功完成軟件測(cè)試這項(xiàng)工作，必須首先建立測(cè)試計(jì)劃。測(cè)試包括劃分每個(gè)測(cè)試階段和測(cè)試重點(diǎn),明確職責(zé),指明軟件質(zhì)量控制計(jì)劃中規(guī)定的每一個(gè)任務(wù)的負(fù)責(zé)單位或成員的責(zé)任。,設(shè)計(jì)測(cè)試用例,指導(dǎo)整個(gè)測(cè)試過程。對(duì)測(cè)試的各階段所需要的時(shí)間、人力及其它資源進(jìn)行預(yù)估，測(cè)試范圍能分解應(yīng)盡量分解，針對(duì)每個(gè)測(cè)試任務(wù)仔細(xì)分析到位，盡量做到客觀、準(zhǔn)確、留有余地。,制定測(cè)試項(xiàng)目的輸入、輸出和質(zhì)量標(biāo)準(zhǔn)，并和有關(guān)方面達(dá)成一致。建立變化處理的流程規(guī)則，識(shí)別出在整個(gè)測(cè)試階段中哪些是內(nèi)在的、不可避免的變化因素，如何進(jìn)行控制。要重點(diǎn)檢查,:,（,1,）產(chǎn)品包的完整性,;,（,2,）源代碼與執(zhí)行程序版本一致性,;,（,3,）使用文檔與執(zhí)行程序的一致性,;,（,4,）介質(zhì)的正確性。,做好軟件質(zhì)量的控制，就要加強(qiáng)軟件生命期各個(gè)階段的軟件質(zhì)量保證，需要做好如下幾方面的軟件管理工作：,（,1,）在軟件開發(fā)過程中，確保所開發(fā)軟件的質(zhì)量。與質(zhì)量有關(guān)的人員都要規(guī)定其職責(zé)和權(quán)限，使責(zé)任落實(shí)到人，保證產(chǎn)品質(zhì)量真正得到控制。,（,2,）組織技術(shù)評(píng)審：在軟件開發(fā)的每個(gè)階段結(jié)束后，都要組織評(píng)審，對(duì)質(zhì)量進(jìn)行評(píng)價(jià)，可以及早地發(fā)現(xiàn)軟件開發(fā)過程中的可能引起軟件質(zhì)量問題的潛在錯(cuò)誤。,（,3,）加強(qiáng)軟件測(cè)試：測(cè)試是質(zhì)量保證的重要手段。,（,4,）遵循軟件工程標(biāo)準(zhǔn)和工程規(guī)范，軟件規(guī)范則成為軟件技術(shù)評(píng)審的一項(xiàng)重要內(nèi)容。,2,3,軟件測(cè)試人員的職責(zé),軟件測(cè)試人員的職責(zé)主要有,:,軟件測(cè)試人員的職責(zé)要求、軟件測(cè)試人員應(yīng)承擔(dān)的責(zé)任、測(cè)試人員要編寫測(cè)試需求、測(cè)試人員要編寫測(cè)試用例、測(cè)試人員實(shí)施測(cè)試、測(cè)試人員對(duì)單元測(cè)試的目標(biāo)、測(cè)試人員對(duì)集成測(cè)試的目標(biāo)、測(cè)試人員對(duì)系統(tǒng)測(cè)試的目標(biāo)。最終目的是確保交給用戶的軟件的功能符合用戶的需求，把盡可能多的問題在軟件交給用戶之前發(fā)現(xiàn)并改正。,2.3.1,軟件測(cè)試人員的職責(zé)要求,軟件測(cè)試人員的職責(zé)要求要重點(diǎn)注意如下,15,點(diǎn)內(nèi)容,:,測(cè)試人員應(yīng)清楚自己的工作職責(zé)，并執(zhí)行其職責(zé)。,測(cè)試人員應(yīng)遵守公司制定的相關(guān)政策、流程文件中所規(guī)定的要求,按照公司的要求來架設(shè)測(cè)試。,測(cè)試人員有責(zé)任提供好的建議，通過各種措施降低成本、簡(jiǎn)化流程、提高產(chǎn)品質(zhì)量。,測(cè)試人員應(yīng)對(duì)測(cè)試數(shù)據(jù)進(jìn)行監(jiān)控和分析，對(duì)于缺陷應(yīng)查明原因并提出對(duì)應(yīng)措施,確保軟件完成它所承諾的或公布的功能。,認(rèn)真填寫原始測(cè)試記錄，合理處理測(cè)試數(shù)據(jù)，并及時(shí)上報(bào)分析結(jié)果，對(duì)自己所做的測(cè)試工作質(zhì)量負(fù)責(zé)；,測(cè)試人員要對(duì)測(cè)試結(jié)果分析，通過測(cè)試，掌握軟件具有的能力、缺陷、局限等，對(duì)軟件質(zhì)量給出評(píng)價(jià)性的結(jié)論與意見。整理測(cè)試文檔，填寫軟件測(cè)試報(bào)告,編寫測(cè)試總結(jié)，為軟件開發(fā)成果提供總結(jié)性意見。,參與項(xiàng)目的需求分析工作，進(jìn)行系統(tǒng)性的測(cè)試分析，首要職責(zé)是找錯(cuò)誤，找出潛在的錯(cuò)誤,盡量想到所有可能出現(xiàn)的情況，不應(yīng)默認(rèn)假定不會(huì)發(fā)現(xiàn)錯(cuò)誤。,負(fù)責(zé)項(xiàng)目的規(guī)范驗(yàn)證、正確性、可用性、邊界條件、性能、安全性、兼容性、軟件配置；,在執(zhí)行任何具體測(cè)試任務(wù)前，都要在項(xiàng)目組內(nèi)對(duì)于責(zé)任和目標(biāo)達(dá)成共識(shí)，以免帶來后續(xù)工作的相互推諉。程序員是最經(jīng)常打交道的客戶是程序員,為了便于程序員報(bào)告程序的錯(cuò)誤，盡量提供良好的軟件問題報(bào)告，以便程序員可以更快的修復(fù)軟件錯(cuò)誤。,在編寫自動(dòng)化測(cè)試腳本前，首先要確定哪些用例適合做自動(dòng)化測(cè)試，因?yàn)樽曰瘻y(cè)試不像人工測(cè)試，它不能那么智能，也沒有思維能力。,編制項(xiàng)目相應(yīng)的測(cè)試規(guī)范和測(cè)試用例,按照測(cè)試流程、計(jì)劃以及對(duì)產(chǎn)品特性的把握，溝通確認(rèn)測(cè)試的范圍、重點(diǎn)，考慮邏輯、數(shù)據(jù)完整性等要求，詳細(xì)規(guī)定測(cè)試的要求，策劃、編寫測(cè)試用例，根據(jù)測(cè)試反饋信息，對(duì)于沒有考慮到的新問題，不斷添加測(cè)試用例。,從整體的測(cè)試角度可以分為單元測(cè)試、集成測(cè)試、系統(tǒng)測(cè)試、確認(rèn)測(cè)試。,測(cè)試人員應(yīng)當(dāng)徹底檢查每個(gè)測(cè)試的執(zhí)行結(jié)果。,測(cè)試人員要了解“用戶”如何使用軟件，并且確定“用戶”使用的時(shí)候不會(huì)遇到重要的,Bug,。,確認(rèn)軟件達(dá)到某種具體標(biāo)準(zhǔn),承諾完成測(cè)試的軟件沒有質(zhì)量問題。,2.3.2,軟件測(cè)試人員對(duì)發(fā)布軟件產(chǎn)品應(yīng)承擔(dān)的責(zé)任,經(jīng)過測(cè)試人員測(cè)試過的軟件產(chǎn)品，經(jīng)過客戶使用后，又發(fā)現(xiàn)了問題，原則說軟件測(cè)試人員應(yīng)承擔(dān)的責(zé)任,為什么,?,應(yīng)該承認(rèn)所有的測(cè)試都不可能時(shí)徹底的。但是,問題不是這么簡(jiǎn)單,首先,確認(rèn)發(fā)現(xiàn)問題的原因。,如果發(fā)現(xiàn)的問題不是,系統(tǒng)需求說明書,、,系統(tǒng)概要設(shè)計(jì)說明書,、,系統(tǒng)詳細(xì)設(shè)計(jì)說明書,中所規(guī)定的范圍要求,測(cè)試人員不應(yīng)承擔(dān)的責(zé)任,;,如果是規(guī)定的范圍要求,測(cè)試人員應(yīng)承擔(dān)的責(zé)任。,如果是由于用戶誤操作而造成的問題,由于誤操作，用戶在錄入數(shù)據(jù)時(shí)不成功，造成了用戶錄入的數(shù)據(jù)丟失，這屬于在數(shù)據(jù)庫(kù)設(shè)計(jì)上的數(shù)據(jù)安全保護(hù)問題，與整體的系統(tǒng)框架設(shè)計(jì)有關(guān)系，在進(jìn)行測(cè)試用例設(shè)計(jì)時(shí)沒有考慮到、測(cè)試人員的疏忽或過錯(cuò)導(dǎo)致該問題的出現(xiàn)，評(píng)估人員負(fù),50%,的責(zé)任,開發(fā)人員負(fù),15%,的責(zé)任,測(cè)試人員應(yīng)承擔(dān),35%,的責(zé)任。,如果是由于測(cè)試遺漏而造成的問題,寫測(cè)試計(jì)劃的人要負(fù),70%,責(zé)任,測(cè)試人員要負(fù),30%,的責(zé)任。,如果是發(fā)現(xiàn)了,Bug,，卻不上報(bào),Bug,，導(dǎo)致,Bug,最終在客戶那里發(fā)現(xiàn),測(cè)試人員要負(fù)全部責(zé)任。,軟件整個(gè)測(cè)試過程是規(guī)范的，有測(cè)試計(jì)劃，測(cè)試用例設(shè)計(jì)（,Checklist,）；測(cè)試計(jì)劃、測(cè)試用例經(jīng)由,PM,（產(chǎn)品經(jīng)理）和,RD,（開發(fā)人員）認(rèn)同,要說責(zé)任,整個(gè)測(cè)試團(tuán)隊(duì)都有責(zé)任。測(cè)試人員要進(jìn)行通過不斷的總結(jié)和提高保證將來的工作中能做的更好。,2.3.3,測(cè)試人員要編寫測(cè)試需求,測(cè)試需求必須是可觀測(cè)、可測(cè)評(píng)的行為。在每個(gè)測(cè)試用例與測(cè)試需求之間不存在一對(duì)一的關(guān)系,測(cè)