软件测试完成标准文件状态:[]草稿[√]正式发布[]正在修改文件标识:当前版本:V1.0作者:完成日期:2016/7/82016年7月目录1.简介..................................................................................................................................................21.1目的.........................................................................................................................................21.2范围.........................................................................................................................................31.3文档结构.................................................................................................................................31.4词汇表.....................................................................................................................................32.软件测试完成标准..........................................................................................................................32.1软件测试暂停、完成标准.....................................................................................................32.2单元测试停止标准.................................................................................................................32.3集成测试停止标准.................................................................................................................42.4确认测试停止标准.................................................................................................................42.5系统测试停止标准.................................................................................................................42.6安装测试停止标准.................................................................................................................42.8验收测试停止标准.................................................................................................................52.9缺陷修复率标准.....................................................................................................................52.10覆盖率标准.............................................................................................................................52.11缺陷等级分类.........................................................................................................................51.简介1.1目的本文档的目的是为软件单元测试、集成测试、确认测试、系统测试、安装测试、验收测试提供停止标准。1.2范围本文档适用于XXXX股份有限公司所有项目及产品的测试活动。1.3文档结构第一部分:简介,介绍软件停止标准的目的,本标准的适用范围,以及在本文档中使用的词汇的解释。第二部分:描述软件单元测试、集成测试、确认测试、系统测试、安装测试、验收测试停止标准。第三部分:列出本标准使用的参考文献。第四部分:附录1.4词汇表缺陷(Defect):缺陷是对软件产品预期属性的偏离现象。覆盖率(Coveragerate):语句覆盖率、测试用例执行覆盖率,测试需求覆盖率等的总称。2.软件测试完成标准2.1软件测试暂停、完成标准1)软件系统在进行单元、集成、确认、系统、安装、验收测试时,发现紧急错误大于等于严重级别错误暂停测试返回开发。2)软件系统经过单元、集成、确认、系统、安装、验收测试,分别达到单元、集成、确认、系统、安装、验收测试停止标准。3)软件系统通过验收测试,并已得出验收测试结论。4)软件项目需暂停以进行调整时,测试应随之暂停,并备份暂停点数据。5)软件项目在其开发生命周期内出现重大估算,进度偏差,需暂停或终止时,测试应随之暂停或终止,并备份暂停或终止点数据。2.2单元测试完成标准1)按照单元测试计划完成了所有规定单元的测试2)达到了测试计划中关于单元测试所规定的覆盖率的要求3)4)软件单元功能与设计一致5)在单元测试中发现的错误已经得到修改,各级缺陷修复率达到标准2.3集成测试完成标准1)按照集成构件计划及增量集成策略完成了整个系统的集成测试2)达到了测试计划中关于集成测试所规定的覆盖率的要求3)被测试的集成工作版本每千行代码必须发现至少2个错误(不含优化级别错误)4)集成工作版本满足设计定义的各项功能、性能要求5)在集成测试中发现的错误已经得到修改,各级缺陷修复率达到标准2.4确认测试完成标准1)确认测试用例设计已经通过评审2)按照确认测试计划完成了确认测试3)达到了确认测试计划中关于确认测试所规定的覆盖率的要求4)系统达到详细设计定义的各项功能,性能5)在系统测试中发现的错误已经得到修改,各级缺陷修复率达到标准2.5系统测试完成标准1)系统测试用例设计已经通过评审2)按照系统测试计划完成了系统测试3)达到了测试计划中关于系统测试所规定的覆盖率的要求4)被测试的系统每千行代码必须发现至少1个错误(不含五级错误)5)系统满足需求规格说明书的要求6)在系统测试中发现的错误已经得到修改,各级缺陷修复率达到标准2.6安装测试完成标准1)安装退出之后,确认应用程序可以正确启动、运行。2)在安装之前请备份你的注册表,安装之后,察看注册表中是否有多余的垃圾信息。3)如果系统提供自动卸载工具,那么卸载之后需检验系统是否把所有的文件全部删除,注册表中有关的注册信息是否也被删除。4)安装完成之后,可以在简单地使用之后再执行卸载操作,有的系统在使用之后会发生变化,变得不可卸载。5)对于客户服务器模式的应用系统,可以先安装客户端,然后安装服务器端,测试是否会出现问题。6)考察安装该系统是否对其他的应用程序造成影响,特别是Windows操作系统,经常会出现此类的问题。7)在安装测试中发现的错误已经得到修改,各级缺陷修复率达到标准2.8验收测试完成标准1)软件需求分析说明书中定义的所有功能已全部实现,性能指标全部达到要求。2)在验收测试中发现的错误已经得到修改,各级缺陷修复率达到标准3)所有测试项没有残余紧急、严重级别错误。4)需求分析文档、设计文档和编码实现一致。5)验收测试工件齐全(测试计划、测试用例、测试日志、测试通知单、测试分析报告,待验收的软件安装程序。)注:验收测试原本要求无任何级别错误遗留,但如果时间紧迫,则可以紧急、严重级别错误全部修复,普通级别错误修复率达60%以上。2.9缺陷修复率标准1)紧急、严重级别错误修复率应达到100%2)普通级别错误修复率应达到95%以上3)优化级别错误修复率应达到60%以上注:项目紧急时,普通级别错误修复率达60%以上;优化级别错误修复率达20%即可。2.10覆盖率标准1)测试用例执行覆盖率应达到100%(功能测试用例均以执行)2)测试需求执行覆盖率应达到100%(业务测试用例均以执行)2.11缺陷等级分类紧急:不能完全满足系统要求,基本功能未完全实现;系统崩溃或挂起等导致系统不能继续运行。包括以下各种错误:1.由于程序所引起的死机,非法退出2.死循环3.数据库发生死锁4.因错误操作导致的程序中断5.功能错误6.与数据库连接错误7.数据通讯错误严重:严重地影响系统要求或基本功能的实现,且没有更正办法(重新安或重新启动该软件不属于更正办法)。使系统不稳定、或破坏数据、或产生错误结果,或部分功能无法执行,而且是常规操作中经常发生或非常规操作中不可避免的主要问题。包括以下各种错误:1.程序接口错误2.因错误操作迫使程序中断3.系统可被执行,但操作功能无法执行(含指令)4.单项操作功能可被执行,但在此功能中某些小功能(含指令参数的使用)无法被执行(对系统非致命的)5.在小功能项的某些项目(选项)使用无效(对系统非致命的)6.业务流程不正确7.功能实现不完整,如删除时没有考虑数据关联8.功能的实现不正确,如在系统实现的界面上,一些可接受输入的控件点击后无作用;对数据库的操作不能正确实现9.报表格式以及打印内容错误(行列不完整,数据显示不在所对应的行列等导致数据显示结果不正确的错误)普通:严重地影响系统要求或基本功能的实现,但存在合理的更正办法(重新安装或重新启动该软件不属于更正办法)。系统性能或响应时间变慢、产生错误的中间结果但不影响最终结果等影响有限的问题。包括以下各种错误:1.操作界面错误(包括数据窗口内列名定义、含义是否一致)2.打印内容、格式错误(只影响报表的格式或外观,不影响数据显示结果的错误)3.简单的输入限制未放在前台进行控制4.删除操作未给出提示5.已被捕捉的系统崩溃,不影响继续操作6.虽然正确性不受影响,但系统性能和响应时间受到影响7.不能定位焦点或定位有误,影响功能实现8.显示不正确但输出正确9.增删改功能,在本界面不能实现,但在另一界面可以补充实现。优化:使操作者不方便或遇到麻烦,但它不影响执行工作功能或重要功能。界面拼写错误或用户使用不方便等小问题或需要完善的问题包括以下各种错误:1.界面不规范2.辅助说明描述不清楚3.输入输出不规范4.长时间操作未给用户提示5.提示窗口文字未采用行业术语6.可输入区域和只读区域没有明显的区分标志7.必填项与非必填项应加以区别8.滚动条无效9.键盘支持不好,如在可输入多行的字段中,不支持回车换行;或对相同字段,在不同界面支持不同的快捷方式10.界面不能及时刷新,影响