T0305能力验证计划作业指导书

CNALT0305软件功能性测试能力验证计划作业指导书2006年4月组织机构：中国实验室国家认可委员会实施机构：中国航天工程咨询中心（软件测评实验室）组织机构中国实验室国家认可委员会能力验证负责人翟培军联系人葛曼丽联系地址（邮编）北京市朝阳区朝外大街甲10号中认大厦（100020）联系电话[phone]传真[phone]实施机构中国航天工程咨询中心（软件测评实验室）联系地址（邮编）北京市海淀区阜成路16号B座503房间（100037）工作小组组成计划负责人姓名：张刚杨桂枝联络地址：北京市海淀区阜成路16号B座503房间（100037）技术专家姓名：吴铸成王占武何伟起高林支定镛许胜王欣王瑞联络地址：北京市海淀区阜成路16号B座503房间（100037）统计专家姓名：葛军经小川吴丹联络地址：北京市海淀区阜成路16号B座503房间（100037）计划联络人姓名：杨桂枝联络地址：北京市海淀区阜成路16号B座507房间（100037）联系电话：[phone]转18；010-68370429传真：[phone]E-mail：[e-mail]；[e-mail]实施机构银行帐户户名中国航天科技集团公司第七一〇研究所帐号0200001409014452694开户行工行北京百万庄支行目录1.概述.........................................................................................................................12.被测物品的说明.....................................................................................................12.1物品的制备...............................................................................................12.2物品的编号...............................................................................................12.3物品的均匀性、稳定性检验...................................................................12.4物品的包装传递与保存条件...................................................................23.测量内容的说明.....................................................................................................23.1测试内容...................................................................................................23.2测试方法要求...........................................................................................23.3软件测试环境...........................................................................................24.报送结果的要求.....................................................................................................3附件1：《CNALT0305被测物品接收状态确认表》..............................................4附件2：《CNALT0305能力验证结果报告单》.......................................................5T0305能力验证计划作业指导书11.概述当前的软件度量技术没有达到可以对软件测试能力进行严格的数值比对的水平，故本次能力验证计划采取已知值能力验证计划类型（已知被测软件中植入缺陷的个数）。T0305能力验证计划实施机构组织制备能力验证样品，并向各参加实验室发出样品及“能力验证计划作业指导书”。各实验室收到样品后，对该样品进行独立检测并出具检测报告，检测时间最长为十五个工作日（以收到样品的邮戳时间的下一个工作日，到寄出测试结果的邮戳时间计算）。统计专家根据各实验室的检测结果进行统计，按结果中检测出缺陷的个数及离群程度来评判实验室的检测能力。对于离群程度过大的实验室，技术专家将对其测试过程记录进行抽查。2.被测物品的说明本次的能力验证样品为预先植入缺陷的可执行软件，附有格式满足GB/T8567要求的需求规格说明书作为用户文档。各参加实验室采用同一被测物品，该物品将刻录成光盘，送抵各参加实验室。2.1物品的制备由中国航天工程咨询中心软件测评实验室组织制备预先植入缺陷的小型桌面软件，该软件的需求规格说明书格式满足GB/T8567要求。软件样品的制备与需求规格说明的编写均已通过技术专家的评审。此次测试为基于需求的测试，依据样品中的《T0305能力验证样品软件需求规格说明书》的明确需求对软件进行功能性测试。2.2物品的编号刻录有该被测物品的光盘编号格式为T0305_N_m（m＝1,2）。其中，T0305为本次软件能力验证计划的编号；N为两位数字长度的发送顺序号，不同实验室的发送顺序号不同；对每个实验室均发送两张内容相同的光盘，两张光盘之间以m编号作为区分。2.3物品的均匀性、稳定性检验鉴于软件的数字化和可复制性特点，我们将被测物品刻录成光盘，并经过实T0305能力验证计划作业指导书2施机构的验证，保证刻录数据无误，以保证光盘中被测物品数据的一致性和稳定性。2.4物品的包装传递与保存条件物品被封闭性刻录在只读光盘中，经包装后通过EMS方式发送给各参加实验室。该光盘可保存在常温、常湿环境中。能力验证计划实施机构发送物品的同时进行登记，登记内容包括样品号、发送日期、发送人、收物人姓名及联系电话。各参加实验室应在收到物品后的24小时内填写附件1《被测物品接收状态确认表》，并传真到能力验证计划实施机构。3.测量内容的说明3.1测试内容按照本次能力验证计划的目标，各参加实验室仅根据GB/T17544-1998《信息技术软件包质量要求和测试》中3.3.1功能性条款对物品进行测试，对物品的其他特性不做检测。要求实验室检测出软件样品中尽可能多的功能缺陷，并给出测试结果报告。3.2测试方法要求此次的能力验证要求实验室按照GB/T17544-1998进行功能性测试，并提交软件测试报告。3.3软件测试环境对于本次软件测试能力验证的测试环境，有如下基本要求：PC机配置：本软件所需硬盘空间10M以上显示器分辨率：800*600以上软件环境：操作系统为MSWindows2000Professional（2003年6月的ServicePack4）中文版MSAccess2000中文版T0305能力验证计划作业指导书34.报送结果的要求参加实验室在完成对能力验证计划被测物品的测试后，应将结果按附件2《能力验证计划结果报告单》的要求填写，并与实验室对该物品测试的主要过程文档，包括测试计划、用例、测试报告及测试记录一起报送至能力验证计划实施机构处。《能力验证计划结果报告单》的填写要与测试用例、记录和报告测试过程文档相一致，实施机构会根据《能力验证计划结果报告单》和其他记录一起确认缺陷。所有测试过程的文档格式可由各参加实验室自定。但测试用例必须包括唯一标识、与需求规格说明书的追踪关系、用例初始化、操作步骤、测试数据、期望结果、评判标准等基本内容，要求依据用例可复现测试结果。测试记录要足以满足结果判定需求，必要时要记录操作屏幕图象。所有报送文档要有电子和纸质两种介质，电子介质要求用光盘进行保存，与纸质文档一同送往（最好以EMS方式，以控制邮寄时间）实施机构。光盘上要加以标识，标识格式为“T0305测试结果_N”，N为样品发送顺序号（见样品光盘标识中的发送序号）。例如：样品光盘的标号为“T0305_27_1”或“T0305_27_2”，则测试结果光盘上的标识为“T0305测试结果_27”。其他测试过程的中间文档保存在参加实验室待查。T0305能力验证计划作业指导书4附件1：《CNALT0305被测物品接收状态确认表》CNALT0305被测物品接收状态确认表本实验室已于年月日收到号制品。经检验，光盘数据能否正常读取？（是否）制品包含有如下文件：被测物品\T0305能力验证样品软件需求规格说明书.doc被测物品\setup.exeT0305能力验证计划作业指导书.docT0305样品库.mdb关于“软件功能性”能力验证注意事项.doc实验室名称：实验室测试样品验收人员（签字）：年月日填表说明：为了保证被测物品顺利送抵各参加CNALT0305能力验证计划的实验室，保证能力验证的顺利进行，要求每个参加能力验证计划的实验室在收到被测物品时检验样品，并填写该表格，传真到：010-68768987杨桂枝收。如被测物品在运送过程中损坏不能读取，我们在收到《CNALT0305被测物品接收状态确认表》后将为您重新发送一份。T0305能力验证计划作业指导书5附件2：《CNALT0305能力验证结果报告单》CNALT0305能力验证结果报告单实验室名称认可证书号联系人联系电话联系地址Email测试环境硬件环境：PC机软件环境：操作系统：Windows2000Professional（sp4）中文版其他相关软件：MSAccess2000中文版测试执行情况测试开始日期：年月日，测试结束日期：年月日。设计用例个，实际执行用例个，通过用例个，未通过用例个。测试人员（签字）：发现的软件功能缺陷序号软件功能缺陷简要描述对应需求条目发现缺陷的初始条件（在何种情况下执行右列操作可以发现缺陷）发现缺陷用例及具体操作路径（要具体）12填表说明：1.认可证书号一栏，未获CNAL认可的实验室可不填写。T0305能力验证计划作业指导书62.软件功能缺陷列表可根据需要继续添加。3.本表需与其他软件测试文档一起报送至能力验证计划实施机构，具体通讯地址见扉页。