1、軟件測(cè)試的組織和管理,山東省軟件評(píng)測(cè)中心 韓慶良,目標(biāo),與軟件企業(yè)項(xiàng)目管理人員、測(cè)試管理人員對(duì)測(cè)試管理進(jìn)行交流。 提高對(duì)測(cè)試工作、測(cè)試管理的重要性的認(rèn)識(shí)，以改進(jìn)我們的測(cè)試過(guò)程。 從理論角度來(lái)認(rèn)識(shí)軟件測(cè)試和測(cè)試管理。,主要內(nèi)容,團(tuán)隊(duì)建設(shè)（組織結(jié)構(gòu)、人員組成、規(guī)模、人員培訓(xùn)） 過(guò)程規(guī)劃（軟件過(guò)程、測(cè)試過(guò)程、測(cè)試的階段、規(guī)劃自己的過(guò)程） 測(cè)試過(guò)程實(shí)施（計(jì)劃、設(shè)計(jì)、實(shí)施、執(zhí)行、評(píng)估、缺陷跟蹤） 過(guò)程改進(jìn)（成熟度模型、改進(jìn)） 測(cè)試工具,（一）團(tuán)隊(duì)建設(shè),測(cè)試部門的組織形式 測(cè)試組的人員組成 測(cè)試組的規(guī)模 測(cè)試人員的培訓(xùn),組織形式測(cè)試人員的位置,一個(gè)好的組織結(jié)構(gòu)，可以更好的發(fā)揮人員的能動(dòng)性，使工作更有效率，

2、也使工作的質(zhì)量更高。 在一個(gè)單位內(nèi)測(cè)試人員處于什么位置？屬于那個(gè)部門？ 質(zhì)量管理？ 開發(fā)組？ 測(cè)試組？ 適用的就是最好的。,組織形式常見(jiàn)測(cè)試組組織結(jié)構(gòu),煙囪測(cè)試組（小型） 煙囪測(cè)試組（大型） 集中測(cè)試組 IV&V（獨(dú)立驗(yàn)證與確認(rèn)）測(cè)試組 SMT（系統(tǒng)方法與測(cè)試）組,組織形式煙囪測(cè)試組,測(cè)試人員由臨時(shí)人員組成，通常有2-5人組成，直接向項(xiàng)目經(jīng)理負(fù)責(zé)。大型的組可以劃分為幾個(gè)小組，設(shè)測(cè)試經(jīng)理。項(xiàng)目經(jīng)理負(fù)責(zé)制定測(cè)試計(jì)劃文檔。企業(yè)沒(méi)有正規(guī)的方法將測(cè)試程序、方法、相關(guān)的知識(shí)經(jīng)驗(yàn)傳遞下去，測(cè)試質(zhì)量難以保證。優(yōu)點(diǎn)是成本低，不需要對(duì)測(cè)試人員提供培訓(xùn)、生活保障等服務(wù)。,組織形式集中測(cè)試組,企業(yè)成立專職、獨(dú)立的測(cè)試

3、部門，通常由1030人組成。集中測(cè)試組為每個(gè)項(xiàng)目配備幾個(gè)全職的測(cè)試人員。部分企業(yè)中可能還負(fù)責(zé)執(zhí)行項(xiàng)目中軟件質(zhì)量管理和性能規(guī)范制定的工作。可以將相關(guān)的知識(shí)、經(jīng)驗(yàn)傳遞下去。,IV&V組組織形式,通常由軟件開發(fā)組織之外的人員或其中的獨(dú)立人員組成，如轉(zhuǎn)包商。其參與檢查、驗(yàn)證是否遵循標(biāo)準(zhǔn)、進(jìn)行軟件文檔的質(zhì)量保證檢測(cè)，主要完成系統(tǒng)測(cè)試?？梢詫⑵淇醋饕粋€(gè)最苛求的用戶。,組織形式SMT組,通常作為企業(yè)的內(nèi)部顧問(wèn)組的方式存在。主要負(fù)責(zé)方法及標(biāo)準(zhǔn)的知識(shí)交流、編制開發(fā)和測(cè)試指南、開發(fā)測(cè)試方法、測(cè)試工具評(píng)估與培訓(xùn)，其同不同的項(xiàng)目組進(jìn)行協(xié)作，對(duì)其進(jìn)行指導(dǎo)。通常不負(fù)責(zé)具體測(cè)試工作的執(zhí)行。由軟件專家組成。,組織形式企業(yè)或項(xiàng)

4、目組織結(jié)構(gòu)樣例,微軟的項(xiàng)目組織,產(chǎn)品組經(jīng)理,項(xiàng)目經(jīng)理,開發(fā)經(jīng)理,質(zhì)量保證經(jīng)理,開發(fā)工程師,測(cè)試人員,流程經(jīng)理,設(shè)計(jì)經(jīng)理,組織形式企業(yè)或項(xiàng)目組織結(jié)構(gòu)樣例,一種常見(jiàn)的組織,組織形式企業(yè)或項(xiàng)目組織結(jié)構(gòu)樣例,又一,人員組成成功測(cè)試組的10大因素,業(yè)務(wù)知識(shí)：測(cè)試工程師應(yīng)具備業(yè)務(wù)知識(shí)，并和用戶緊密接觸。 技術(shù)知識(shí)：熟悉所測(cè)試的產(chǎn)品用到的技術(shù)，并掌握測(cè)試工具、方法等相關(guān)技術(shù)。 任務(wù)劃分：將業(yè)務(wù)任務(wù)和技術(shù)任務(wù)相互獨(dú)立。 資源管理：業(yè)務(wù)資源和技術(shù)資源相互結(jié)合。 與開發(fā)組的關(guān)系：同開發(fā)人員協(xié)同工作。 生存周期早期介入：測(cè)試應(yīng)在開發(fā)周期的早期介入。 測(cè)試過(guò)程：有成熟的測(cè)試過(guò)程管理規(guī)范。 靈活性/適應(yīng)性：能夠適應(yīng)不同

5、的測(cè)試項(xiàng)目。 度量：掌握度量的方法，以改進(jìn)工作。 過(guò)程改進(jìn)：應(yīng)致力于工作的不斷改進(jìn)。,人員組成測(cè)試組組成,測(cè)試經(jīng)理：負(fù)責(zé)測(cè)試流程、溝通、測(cè)試工具的引入、人員管理、測(cè)試計(jì)劃/設(shè)計(jì)/開發(fā)及執(zhí)行。 測(cè)試組長(zhǎng)：溝通、測(cè)試工具引入、人員管理、費(fèi)用/過(guò)程狀態(tài)報(bào)告、測(cè)試計(jì)劃/設(shè)計(jì)/開發(fā)及執(zhí)行。 測(cè)試工程師：執(zhí)行測(cè)試計(jì)劃，進(jìn)行設(shè)計(jì)/開發(fā)及執(zhí)行。,測(cè)試組規(guī)模影響因素,企業(yè)文化或測(cè)試成熟度 測(cè)試需求范圍 工程師技能水平 測(cè)試工具及應(yīng)用水平 業(yè)務(wù)知識(shí) 組織形式 測(cè)試工作介入時(shí)間,測(cè)試組規(guī)模確定方法（一）,開發(fā)比例法：根據(jù)開發(fā)人員數(shù)量按照一定比例來(lái)確定測(cè)試工程師的數(shù)量。開發(fā)人員指進(jìn)行設(shè)計(jì)、開發(fā)、編譯以及進(jìn)行單元測(cè)試的

6、人員。,測(cè)試組規(guī)模確定方法（二）,百分比法：根據(jù)測(cè)試人員應(yīng)該占到項(xiàng)目組中人員的百分比數(shù)量。,測(cè)試組規(guī)模確定方法（三）,測(cè)試程序法：根據(jù)測(cè)試程序數(shù)量，以及每個(gè)程序可能的執(zhí)行時(shí)間，計(jì)算出人小時(shí)，再根據(jù)完成周期計(jì)算測(cè)試組規(guī)模。,測(cè)試組規(guī)模確定方法（四）,任務(wù)計(jì)劃法：根據(jù)歷史記錄中類似項(xiàng)目工作量，比較新項(xiàng)目同歷史項(xiàng)目的工作量，歷史項(xiàng)目乘以相應(yīng)的因子。 步驟：先將任務(wù)分解，根據(jù)歷史記錄乘以一個(gè)因子，計(jì)算出新項(xiàng)目的所以任務(wù)工作量。再根據(jù)該工作量和完成周期計(jì)算測(cè)試組規(guī)模。,人員培養(yǎng)人員要求,適應(yīng)各種環(huán)境的知識(shí)背景 學(xué)習(xí)速度快 組織能力 解決問(wèn)題的能力 創(chuàng)造性 分析/編程能力 業(yè)務(wù)領(lǐng)域的知識(shí) 交流與協(xié)調(diào)能力

7、測(cè)試經(jīng)驗(yàn) 關(guān)注細(xì)節(jié) 書寫與語(yǔ)法技能,一個(gè)好的測(cè)試人員更難得,人員培養(yǎng)成長(zhǎng)的路徑,初級(jí)測(cè)試工程師測(cè)試工程師高級(jí)測(cè)試工程師測(cè)試組負(fù)責(zé)人測(cè)試負(fù)責(zé)人測(cè)試經(jīng)理產(chǎn)品/業(yè)務(wù)經(jīng)理。 技術(shù)技能：測(cè)試工具測(cè)試自動(dòng)化編程編程語(yǔ)言操作系統(tǒng)網(wǎng)絡(luò)、數(shù)據(jù)庫(kù)測(cè)試生存周期 （1-2年） 測(cè)試過(guò)程：評(píng)審、制訂和改進(jìn)過(guò)程，指導(dǎo)初級(jí)工程師工作，了解業(yè)務(wù)領(lǐng)域。 （3-4年） 測(cè)試組工作：任務(wù)安排、跟蹤和報(bào)告，監(jiān)管測(cè)試工程師，掌握測(cè)試周期支持工具。（4-6年） 項(xiàng)目管理：管理項(xiàng)目，與客戶交流，管理測(cè)試人員。（6-12年） 產(chǎn)品管理：項(xiàng)目或產(chǎn)品研發(fā)指導(dǎo)、促進(jìn)產(chǎn)品銷售、確定業(yè)務(wù)機(jī)會(huì)、承擔(dān)盈虧責(zé)任。（12年以上）,（二）測(cè)試過(guò)程規(guī)劃,軟件過(guò)程

8、 測(cè)試過(guò)程 測(cè)試的階段 規(guī)劃測(cè)試過(guò)程,軟件過(guò)程定義,目的：測(cè)試過(guò)程是軟件過(guò)程的組成部分，明確自己的軟件過(guò)程，才能明確自己的測(cè)試過(guò)程。 軟件生存周期指軟件從出現(xiàn)一個(gè)構(gòu)思之日起，直到最后決定停止使 用之時(shí)止。包括可行性與計(jì)劃研究、需求分析、設(shè)計(jì) 、實(shí)現(xiàn) 、測(cè)試、運(yùn)行與維護(hù)等階段。 軟件過(guò)程是指開發(fā)和維護(hù)軟件及相關(guān)產(chǎn)品（如項(xiàng)目計(jì)劃、文檔、代碼、手冊(cè)等）的一套行為、方法、實(shí)踐及變換過(guò)程。軟件過(guò)程是軟件生存周期的框架。,軟件過(guò)程常見(jiàn)軟件過(guò)程與模型（一）,瀑布模型、原型模型、演化模型、增量模型、螺旋模型、噴泉模型等等。 敏捷方法（如XP、功能驅(qū)動(dòng)等） 統(tǒng)一過(guò)程（RUP） GB/T 8566-2001 信息

9、技術(shù) 軟件生存周期過(guò)程 過(guò)程裁減,軟件過(guò)程常見(jiàn)軟件過(guò)程與模型（二）,敏捷方法中的測(cè)試：在極限編程中提出測(cè)試驅(qū)動(dòng)開發(fā)。提倡在開發(fā)前，先考慮測(cè)試，先完成測(cè)試用來(lái)和代碼。 統(tǒng)一過(guò)程中的測(cè)試：測(cè)試是其核心工作流程之一 GB/T 8566-2001標(biāo)準(zhǔn)中的測(cè)試（如下圖）： 沒(méi)有單獨(dú)的測(cè)試過(guò)程。 測(cè)試開始于編碼。 不足以指導(dǎo)測(cè)試工作。,測(cè)試過(guò)程測(cè)試生命周期,測(cè)試過(guò)程幾個(gè)亮點(diǎn),測(cè)試工作開始于需求分析之后。 測(cè)試經(jīng)過(guò)評(píng)估后，達(dá)到了結(jié)束的標(biāo)準(zhǔn)后才能結(jié)束。 測(cè)試也是迭代過(guò)程。 測(cè)試需求來(lái)自于軟件需求。,測(cè)試過(guò)程活動(dòng),計(jì)劃 設(shè)計(jì) 準(zhǔn)備 執(zhí)行 評(píng)估 缺陷跟蹤,測(cè)試過(guò)程與開發(fā)過(guò)程的關(guān)系,都是軟件過(guò)程的有機(jī)組成部分。 與

10、開發(fā)過(guò)程同步進(jìn)行。 與開發(fā)過(guò)程相互依賴，又相互獨(dú)立。 開發(fā)過(guò)程、測(cè)試過(guò)程、項(xiàng)目管理過(guò)程以及其他支撐過(guò)程相互交織共同組成了軟件過(guò)程。,測(cè)試階段V模型,測(cè)試階段四個(gè)階段,清晰直觀 階段劃分 單元測(cè)試 集成測(cè)試 系統(tǒng)測(cè)試 驗(yàn)收測(cè)試 同開發(fā)的對(duì)應(yīng)關(guān)系,測(cè)試階段甄別,開發(fā)和測(cè)試并不是線性關(guān)系。 測(cè)試工作不是開始于代碼完成之后。 測(cè)試具有階段性，但各階段之間沒(méi)有鴻溝。尤其是單元測(cè)試和集成測(cè)試。,規(guī)劃測(cè)試過(guò)程,分析項(xiàng)目總體需求（概覽） 分析項(xiàng)目特點(diǎn)（如類型、規(guī)模、人員、客戶、風(fēng)險(xiǎn)、進(jìn)度、成本等等） 確定自己的軟件過(guò)程 確定自己的開發(fā)方法和模型 規(guī)劃測(cè)試階段 構(gòu)建測(cè)試過(guò)程,（三）測(cè)試過(guò)程實(shí)施,制訂測(cè)試計(jì)劃 設(shè)

11、計(jì)測(cè)試 測(cè)試準(zhǔn)備 執(zhí)行測(cè)試 評(píng)估測(cè)試結(jié)果 缺陷跟蹤,制訂測(cè)試計(jì)劃定義,什么是測(cè)試計(jì)劃：測(cè)試計(jì)劃包含項(xiàng)目范圍內(nèi)的測(cè)試目的和測(cè)試目標(biāo)的有關(guān)信息。此外，測(cè)試計(jì)劃還將確定實(shí)施和執(zhí)行測(cè)試時(shí)所使用的策略以及所需資源。測(cè)試計(jì)劃包括測(cè)試主計(jì)劃和階段計(jì)劃。 項(xiàng)目開始時(shí)制訂測(cè)試主計(jì)劃。根據(jù)開發(fā)的迭代過(guò)程和測(cè)試主計(jì)劃對(duì)測(cè)試計(jì)劃進(jìn)行細(xì)化，制訂各個(gè)階段的測(cè)試計(jì)劃。,制訂測(cè)試計(jì)劃內(nèi)容,1. 簡(jiǎn)介(目的、背景、范圍、使用的文檔） 2. 測(cè)試需求（確定被測(cè)試的對(duì)象、內(nèi)容和范圍，來(lái)源于用戶需求，包括功能性需求和非功能性需求。） 3. 測(cè)試策略 測(cè)試的項(xiàng)目、測(cè)試的主要方法、完成標(biāo)準(zhǔn)、使用的工具、特殊事項(xiàng)等） 4. 資源（人員組成

12、、任務(wù)和職責(zé)、環(huán)境、人員培訓(xùn)等） 5. 項(xiàng)目進(jìn)度表（階段） 6. 可交付工件（測(cè)試模型、測(cè)試記錄、缺陷報(bào)告等等） 7. 附錄 A：項(xiàng)目任務(wù),制訂測(cè)試計(jì)劃步驟（一）,確定測(cè)試需求：確定測(cè)試對(duì)象以及測(cè)試工作的范圍和內(nèi)容。測(cè)試需求應(yīng)是可核實(shí)的。測(cè)試需求可來(lái)源于軟件需求列表、用例、用例模型、用例實(shí)現(xiàn)、補(bǔ)充規(guī)約、設(shè)計(jì)需求、商業(yè)理由、法規(guī)、標(biāo)準(zhǔn)、最終用戶訪談以及對(duì)現(xiàn)有系統(tǒng)的復(fù)審。 被確定的測(cè)試需求項(xiàng)必須是可核實(shí)的。即，它們必須有一個(gè)可觀察、可評(píng)測(cè)的結(jié)果。無(wú)法核實(shí)的需求不是測(cè)試需求。,制訂測(cè)試計(jì)劃步驟（二）,評(píng)估風(fēng)險(xiǎn)：測(cè)試工作需要平衡資源約束和風(fēng)險(xiǎn)，以確定測(cè)試的優(yōu)先級(jí)。從三個(gè)方面分析： 影響:失效后將造成的

13、影響或后果 原因:失效所導(dǎo)致的非預(yù)期結(jié)果 可能性:用例失效的可能性 根據(jù)風(fēng)險(xiǎn)分析情況，確定測(cè)試執(zhí)行的優(yōu)先級(jí)。通常分為高、中、低三種。進(jìn)而安排測(cè)試的先后順序。,制訂測(cè)試計(jì)劃步驟（三）,制定測(cè)試策略：描述測(cè)試活動(dòng)的一般方法和目標(biāo)。包括測(cè)試的階段、類型、技術(shù)、測(cè)試完成的標(biāo)準(zhǔn)、特殊要求、可能存在的影響等。 確定資源 人力資源（人員數(shù)量和技能） 測(cè)試環(huán)境（包括硬件和軟件） 工具 數(shù)據(jù) 創(chuàng)建時(shí)間表：估計(jì)測(cè)試工作，制訂時(shí)間進(jìn)度。參考軟件開發(fā)進(jìn)度、項(xiàng)目工作計(jì)劃等。 生成測(cè)試計(jì)劃 ：復(fù)審相關(guān)材料，確定交付的內(nèi)容，將計(jì)劃提交相關(guān)的人員。,制訂測(cè)試計(jì)劃主計(jì)劃和階段計(jì)劃,階段計(jì)劃的測(cè)試需求應(yīng)是對(duì)主計(jì)劃中的測(cè)試需求的分

14、解。 階段計(jì)劃的工作進(jìn)度安排應(yīng)盡可能同主計(jì)劃相一致。 階段計(jì)劃的制訂應(yīng)能保證主計(jì)劃能夠完滿執(zhí)行。,測(cè)試設(shè)計(jì)（一）,分析程序工作流程。目的在于確定并說(shuō)明系統(tǒng)與外部交互時(shí)的操作和步驟。以進(jìn)一步用于確定與描述測(cè)試用例。 確定并說(shuō)明測(cè)試用例 詳細(xì)分析應(yīng)用程序工作流程與操作步驟。 確定并說(shuō)明測(cè)試用例 確定測(cè)試用例數(shù)據(jù),測(cè)試設(shè)計(jì)（二）,確立并結(jié)構(gòu)化測(cè)試執(zhí)行過(guò)程 確定本測(cè)試執(zhí)行過(guò)程與其他測(cè)試執(zhí)行過(guò)程（或生成的測(cè)試腳本之間）的關(guān)系或順序。 確定本測(cè)試執(zhí)行過(guò)程的起始條件/狀態(tài)與結(jié)束條件/狀態(tài)。 指明本測(cè)試執(zhí)行過(guò)程（或生成的測(cè)試腳本）要執(zhí)行的測(cè)試用例。 結(jié)構(gòu)化的方式固化測(cè)試執(zhí)行過(guò)程。,測(cè)試設(shè)計(jì)（三）,復(fù)審并評(píng)估測(cè)

15、試覆蓋 確定測(cè)試覆蓋評(píng)測(cè)方法：基于代碼覆蓋和基于需求的覆蓋?；诖a覆蓋的方法只有在代碼完成后才能進(jìn)行。 生成測(cè)試覆蓋報(bào)告,測(cè)試準(zhǔn)備,記錄、生成或通過(guò)編程創(chuàng)建測(cè)試腳本 確定軟件設(shè)計(jì)與實(shí)施模型中的專用于測(cè)試的功能。 建立外部數(shù)據(jù)集 樁模塊與驅(qū)動(dòng)模塊設(shè)計(jì) 執(zhí)行前的準(zhǔn)備工作,執(zhí)行測(cè)試,單元測(cè)試和集成測(cè)試時(shí)有開發(fā)人員的參與可能更有效，但應(yīng)避免開發(fā)人員測(cè)試自己的程序。 驗(yàn)收測(cè)試應(yīng)由測(cè)試組、用戶和相關(guān)的專家完成。 測(cè)試的執(zhí)行應(yīng)該遵循如下的過(guò)程：設(shè)置測(cè)試環(huán)境，執(zhí)行測(cè)試過(guò)程，核實(shí)測(cè)試結(jié)果，評(píng)估測(cè)試的執(zhí)行情況。,評(píng)估測(cè)試結(jié)果,分析測(cè)試結(jié)果并提交變更請(qǐng)求 評(píng)估基于需求的測(cè)試覆蓋 評(píng)估基于代碼的測(cè)試覆蓋 分析缺陷

16、確定是否達(dá)到了測(cè)試的完成標(biāo)準(zhǔn)和成功標(biāo)準(zhǔn) 生成測(cè)試評(píng)估摘要,缺陷跟蹤,缺陷等級(jí)（嚴(yán)重、主要、次要、輕微等）與優(yōu)先級(jí)（高、中、低等）分類 缺陷修改應(yīng)遵循一定的流程（提交任務(wù)分配修改回歸測(cè)試） 缺陷趨勢(shì)分析 不易修改的缺陷的處理,配置管理,主要實(shí)現(xiàn)軟件版本控制和軟件變更管理 測(cè)試過(guò)程中形成的文檔、用例、數(shù)據(jù)、測(cè)試用程序等也存在配置管理的問(wèn)題 應(yīng)和開發(fā)中的配置管理共同進(jìn)行，并互相關(guān)聯(lián)。,過(guò)程改進(jìn)測(cè)試能力成熟度模型,初始,階段定義,集成,管理與度量,優(yōu)化、缺陷預(yù)防 和質(zhì)量控制,過(guò)程改進(jìn)測(cè)試能力成熟度等級(jí)一,無(wú)序 測(cè)試和調(diào)試沒(méi)有區(qū)分 測(cè)試只在編碼后進(jìn)行 無(wú)專業(yè)的測(cè)試人員/沒(méi)有測(cè)試工具 測(cè)試的目的是為了證明軟件和系統(tǒng)能夠正常工作。,過(guò)程改進(jìn)測(cè)試能力成熟度等級(jí)二,將測(cè)試同調(diào)試區(qū)分開來(lái) 測(cè)試是編碼后的一個(gè)已定義的階段 具有基本的測(cè)試方法和技術(shù)以及標(biāo)準(zhǔn)的測(cè)試過(guò)程 測(cè)試的目的是為了確認(rèn)程序能夠滿足要求,過(guò)程改進(jìn)測(cè)試能力成熟度等級(jí)三,測(cè)試分布于軟件的整個(gè)生命周期 有固定的測(cè)試組織（能夠提供人員培訓(xùn)、監(jiān)督和控制測(cè)試過(guò)程、引入自動(dòng)化測(cè)試工具） 基于系統(tǒng)需求進(jìn)行測(cè)試 管理層已認(rèn)識(shí)到測(cè)試是一項(xiàng)專業(yè)性的活動(dòng),過(guò)程改進(jìn)測(cè)試能力成熟度等級(jí)四,測(cè)試是一個(gè)可測(cè)量和量化的過(guò)程 產(chǎn)品的質(zhì)量特性如可靠性、可用性、可維護(hù)性等都被測(cè)試 測(cè)試用例被良好的管理并可重用 發(fā)現(xiàn)的缺陷被記錄，