1簡介
1.1編寫目的
本測試報告的具體編寫目的,指出預期的讀者范圍。
實例:本測試報告為XXX項目的測試報告,目的在于總結測試階段的測試以及分析測試結果,描述系統是否符合需求(或達到XXX功能目標)。預期參考人員包括用戶、測試人員、、開發人員、項目管理者、其他質量管理人員和需要閱讀本報告的高層經理。
提示:通常,用戶對測試結論部分感興趣,開發人員希望從缺陷結果以及分析得到產品開發質量的信息,項目管理者對測試執行中成本、資源和時間予與重視,而高層經理希望能夠閱讀到簡單的圖表并且能夠與其他項目進行同向比較。此部分可以具體描述為什么類型的人可參考本報告XXX頁XXX章節,你的報告讀者越多,你的工作越容易被人重視,前提是必須讓閱讀者感到你的報告是有價值而且值得浪費一點時間去關注的。
實例:本測試報告為XXX項目的測試報告,目的在于總結測試階段的測試以及分析測試結果,描述系統是否符合需求(或達到XXX功能目標)。預期參考人員包括用戶、測試人員、、開發人員、項目管理者、其他質量管理人員和需要閱讀本報告的高層經理。
提示:通常,用戶對測試結論部分感興趣,開發人員希望從缺陷結果以及分析得到產品開發質量的信息,項目管理者對測試執行中成本、資源和時間予與重視,而高層經理希望能夠閱讀到簡單的圖表并且能夠與其他項目進行同向比較。此部分可以具體描述為什么類型的人可參考本報告XXX頁XXX章節,你的報告讀者越多,你的工作越容易被人重視,前提是必須讓閱讀者感到你的報告是有價值而且值得浪費一點時間去關注的。
1.2項目背景
對項目目標和目的進行簡要說明。必要時包括簡史,這部分不需要腦力勞動,直接從需求或者招標文件中拷貝即可。
1.3系統簡介
如果設計說明書有此部分,照抄。注意必要的框架圖和網絡拓撲圖能吸引眼球。
1.4術語和縮寫詞
列出設計本系統/項目的專用術語和縮寫語約定。對于技術相關的名詞和與多義詞一定要注明清楚,以便閱讀時不會產生歧義。
1.5參考資料
1.需求、設計、測試用例、手冊以及其他項目文檔都是范圍內可參考的東東。
2.測試使用的國家標準、行業指標、公司規范和質量手冊等等
2.測試使用的國家標準、行業指標、公司規范和質量手冊等等
2測試概要
測試的概要介紹,包括測試的一些聲明、測試范圍、測試目的等等,主要是測試情況簡介。(其他測試經理和質量人員關注部分)
2.1測試用例設計
簡要介紹測試用例的設計方法。例如:等價類劃分、邊界值、因果圖,以及用這類方法(3-4句)。
提示:如果能夠具體對設計進行說明,在其他開發人員、測試經理閱讀的時候就容易對你的用例設計有個整體的概念,順便說一句,在這里寫上一些非常規的設計方法也是有利的,至少在沒有看到測試結論之前就可以了解到測試經理的設計技術,重點測試部分一定要保證有兩種以上不同的用例設計方法。
提示:如果能夠具體對設計進行說明,在其他開發人員、測試經理閱讀的時候就容易對你的用例設計有個整體的概念,順便說一句,在這里寫上一些非常規的設計方法也是有利的,至少在沒有看到測試結論之前就可以了解到測試經理的設計技術,重點測試部分一定要保證有兩種以上不同的用例設計方法。
2.2測試環境與配置
簡要介紹測試環境及其配置。
提示:清單如下,如果系統/項目比較大,則用表格方式列出
提示:清單如下,如果系統/項目比較大,則用表格方式列出
數據庫服務器配置
CPU:
內存:
硬盤:可用空間大小
操作系統:
應用軟件:
機器網絡名:
局域網地址:
應用服務器配置
…….
客戶端配置
…….
CPU:
內存:
硬盤:可用空間大小
操作系統:
應用軟件:
機器網絡名:
局域網地址:
應用服務器配置
…….
客戶端配置
…….
對于網絡設備和要求也可以使用相應的表格,對于三層架構的,可以根據網絡拓撲圖列出相關配置。
2.3測試方法(和工具)
簡要介紹測試中采用的方法(和工具)。
提示:主要是黑盒測試,測試方法可以寫上測試的重點和采用的測試模式,這樣可以一目了然的知道是否遺漏了重要的測試點和關鍵塊。工具為可選項,當使用到測試工具和相關工具時,要說明。注意要注明是自產還是廠商,版本號多少,在測試報告發布后要避免大多工具的版權問題。
提示:主要是黑盒測試,測試方法可以寫上測試的重點和采用的測試模式,這樣可以一目了然的知道是否遺漏了重要的測試點和關鍵塊。工具為可選項,當使用到測試工具和相關工具時,要說明。注意要注明是自產還是廠商,版本號多少,在測試報告發布后要避免大多工具的版權問題。
3測試結果及缺陷分析
整個測試報告中這是最激動人心的部分,這部分主要匯總各種數據并進行度量,度量包括對測試過程的度量和能力評估、對軟件產品的質量度量和產品評估。對于不需要過程度量或者相對較小的項目,例如用于驗收時提交用戶的測試報告、小型項目的測試報告,可省略過程方面的度量部分;而采用了CMM/ISO或者其他工程標準過程的,需要提供過程改進建議和參考的測試報告-主要用于公司內部測試改進和缺陷預防機制-則過程度量需要列出。
3.1測試執行情況與記錄
描述測試資源消耗情況,記錄實際數據。(測試、項目經理關注部分)
3.1.1測試組織
可列出簡單的測試組架構圖,包括:
測試組架構 (如存在分組、用戶參與等情況)
測試經理(領導人員)
主要測試人員
參與測試人員
測試組架構 (如存在分組、用戶參與等情況)
測試經理(領導人員)
主要測試人員
參與測試人員
3.1.2測試時間
列出測試的跨度和工作量,最好區分測試文檔和活動的時間。數據可供過程度量使用。
例如 XXX子系統/子功能
實際開始時間-實際結束時間
總工時/總工作日
任務 開始時間 結束時間 總計
合計
對于大系統/項目來說最終要統計資源的總投入,必要時要增加成本一欄,以便管理者清楚的知道究竟花費了多少人力去完成測試。
測試類型 人員成本 工具設備 其他費用
總計
在數據匯總時可以統計個人的平均投入時間和總體時間、整體投入平均時間和總體時間,還可以算出每一個功能點所花費的時/人。
用時人員 編寫用例 執行測試 總計
合計
這部分用于過程度量的數據包括文檔生產率和測試執行率。
生產率人員 用例/編寫時間 用例/執行時間 平均
合計
例如 XXX子系統/子功能
實際開始時間-實際結束時間
總工時/總工作日
任務 開始時間 結束時間 總計
合計
對于大系統/項目來說最終要統計資源的總投入,必要時要增加成本一欄,以便管理者清楚的知道究竟花費了多少人力去完成測試。
測試類型 人員成本 工具設備 其他費用
總計
在數據匯總時可以統計個人的平均投入時間和總體時間、整體投入平均時間和總體時間,還可以算出每一個功能點所花費的時/人。
用時人員 編寫用例 執行測試 總計
合計
這部分用于過程度量的數據包括文檔生產率和測試執行率。
生產率人員 用例/編寫時間 用例/執行時間 平均
合計
3.1.3測試版本
給出測試的版本,如果是最終報告,可能要報告測試次數回歸測試多少次。列出表格清單則便于知道那個子系統/子模塊的測試頻度,對于多次回歸的子系統/子模塊將引起開發者關注。
3.2覆蓋分析
3.2.1需求覆蓋
需求覆蓋率是指經過測試的需求/功能和需求規格說明書中所有需求/功能的比值,通常情況下要達到100%的目標。
需求/功能(或編號) 測試類型 是否通過 備注
[Y][P][N][N/A]
根據測試結果 ,按編號給出每一測試需求的通過與否結論。P表示部分通過,N/A表示不可測試或者用例不適用。實際上,需求跟蹤矩陣列出了一一對應的用例情況以避免遺漏,此表作用為傳達需求的測試信息以供檢查和審核。
需求覆蓋率計算 Y項/需求總數 ×100%
需求/功能(或編號) 測試類型 是否通過 備注
[Y][P][N][N/A]
根據測試結果 ,按編號給出每一測試需求的通過與否結論。P表示部分通過,N/A表示不可測試或者用例不適用。實際上,需求跟蹤矩陣列出了一一對應的用例情況以避免遺漏,此表作用為傳達需求的測試信息以供檢查和審核。
需求覆蓋率計算 Y項/需求總數 ×100%
3.2.2測試覆蓋
需求/功能(或編號) 用例個數 執行總數 未執行 未/漏測分析和原因
實際上,測試用例已經記載了預期結果數據,測試缺陷上說明了實測結果數據和與預期結果數據的偏差;因此沒有必要對每個編號在此包含更詳細的說明的缺陷記錄與偏差,列表的目的僅在于更好的查看測試結果。
測試覆蓋率計算 執行數/用例總數 ×100%
實際上,測試用例已經記載了預期結果數據,測試缺陷上說明了實測結果數據和與預期結果數據的偏差;因此沒有必要對每個編號在此包含更詳細的說明的缺陷記錄與偏差,列表的目的僅在于更好的查看測試結果。
測試覆蓋率計算 執行數/用例總數 ×100%
3.2缺陷的統計與分析
缺陷統計主要涉及到被測系統的質量,因此,這部分成為開發人員、質量人員重點關注的部分。
3.3.1缺陷匯總
被測系統 系統測試 回歸測試 總計
合計
按嚴重程度
嚴重 一般 微小
合計
按嚴重程度
嚴重 一般 微小
按缺陷類型
用戶界面 一致性 功能 算法 接口 文檔 用戶界面 其他
用戶界面 一致性 功能 算法 接口 文檔 用戶界面 其他
按功能分布
功能一 功能二 功能三 功能四 功能五 功能六 功能七
功能一 功能二 功能三 功能四 功能五 功能六 功能七
最好給出缺陷的餅狀圖和柱狀圖以便直觀查看。俗話說一圖勝千言,圖標能夠使閱讀者迅速獲得信息,尤其是各層面管理人員沒有時間去逐項閱讀文章。
圖例
3.3.2缺陷分析
本部分對上述缺陷和其他收集數據進行綜合分析
缺陷綜合分析
缺陷發現效率 = 缺陷總數/執行測試用時
可到具體人員得出平均指標
用例質量 = 缺陷總數/測試用例總數 ×100%
缺陷密度 = 缺陷總數/功能點總數
缺陷密度可以得出系統各功能或各需求的缺陷分布情況,開發人員可以在此分析基礎上得出那部分功能/需求缺陷最多,從而在今后開發注意避免并注意在實施時予與關注,測試經驗表明,測試缺陷越多的部分,其隱藏的缺陷也越多。
測試曲線圖
描繪被測系統每工作日/周缺陷數情況,得出缺陷走勢和趨向
缺陷綜合分析
缺陷發現效率 = 缺陷總數/執行測試用時
可到具體人員得出平均指標
用例質量 = 缺陷總數/測試用例總數 ×100%
缺陷密度 = 缺陷總數/功能點總數
缺陷密度可以得出系統各功能或各需求的缺陷分布情況,開發人員可以在此分析基礎上得出那部分功能/需求缺陷最多,從而在今后開發注意避免并注意在實施時予與關注,測試經驗表明,測試缺陷越多的部分,其隱藏的缺陷也越多。
測試曲線圖
描繪被測系統每工作日/周缺陷數情況,得出缺陷走勢和趨向
重要缺陷摘要
缺陷編號 簡要描述 分析結果 備注
缺陷編號 簡要描述 分析結果 備注
3.3.3殘留缺陷與未解決問題
殘留缺陷
編號:BUG號
缺陷概要:該缺陷描述的事實
原因分析:如何引起缺陷,缺陷的后果,描述造成軟件局限性和其他限制性的原因
預防和改進措施:彌補手段和長期策略
未解決問題
功能/測試類型:
測試結果:與預期結果的偏差
缺陷:具體描述
評價:對這些問題的看法,也就是這些問題如果發出去了會造成什么樣的影響
4 測試結論與建議
報告到了這個部分就是一個總結了,對上述過程、缺陷分析之后該下個結論,此部分為項目經理、部門經理以及高層經理關注,請清晰扼要的下定論。
編號:BUG號
缺陷概要:該缺陷描述的事實
原因分析:如何引起缺陷,缺陷的后果,描述造成軟件局限性和其他限制性的原因
預防和改進措施:彌補手段和長期策略
未解決問題
功能/測試類型:
測試結果:與預期結果的偏差
缺陷:具體描述
評價:對這些問題的看法,也就是這些問題如果發出去了會造成什么樣的影響
4 測試結論與建議
報告到了這個部分就是一個總結了,對上述過程、缺陷分析之后該下個結論,此部分為項目經理、部門經理以及高層經理關注,請清晰扼要的下定論。
4.1測試結論
測試報告的內容大同小異,對于一些測試報告而言,可能將第四和第五部分合并,逐項列出測試項、缺陷、分析和建議,這種方法也比較多見,尤其在第三方評測報告中,此份報告模板僅供參考。
延伸閱讀
文章來源于領測軟件測試網 http://www.kjueaiud.com/