××××××系统V2.0质量分析报告撰写:审核:××××××测试中心××××年09月质量分析报告1、测试总结:经过测试组按照产品开发中心即定的测试规程,进行了软件的功能测试,兼容性测试,用户界面友好性测试,安装及卸载测试,性能负载测试。统计的缺陷密度符合质量标准。没有无法修改的严重错误和致命错误。测试组认为该软件基本符合公司的测试标准要求,满足系统的需求,用户界面能友好易用,能够正常的安装和卸载,性能测试及负载测试中显示总体性能合格。该产品通过产品验收测试。2、产品质量评价:功能:满足了用户需求,功能,流程可以正常使用,与需求分析报告中的要求基本符合,但还有一些遗留问题需要下一版本修改完善,不影响正常功能使用。易用性:操作界面干净简单,易学易用,风格统一。适合一般用户操作使用。部分专业性较强的部分通过简单培训,也可以很快熟悉。可扩展性:功能的可扩展性,页面表现模块支持扩充。系统是一种无客户端软件纯Web模式交流平台,简单方便。兼容性:本软件可兼容window2003/xp系统,系统支持ie8.0浏览器。但不支持IE10.0浏览器。系统只能在JDK1.6及Tomcat5.5.25以上版本运行。目前产品统一的开发部署环境是tomcat5.5.23,JDK1.5.04下无法使用。这是由于开源项目的限制造成的。安装和卸载:本软件安装,卸载已经过测试检测,可以正常使用,并提供了相应的安装手册供用户参考。个别问题由于时间原因作为遗留问题处理。用户文档:本软件提供了《××××系统安装手册》,《××××系统技术白皮书》,《××××系统快速入门手册》,《××××系统二次开发手册》,《××××系统用户使用手册》共5个手册已经过测试检测,可以正常使用,供用户参考。安全可靠性:本软件的登录退出安全控制能力符合需求分析报告中的要求,在系统正常运行的状态下,出现服务器断电、网络中断,客户端断电、网络中断,数据库网络中断的异常情况,待异常情况结束后,不会对系统造成破坏性影响。经验和教训:功能性测试较充分,对需求中提出的功能进行了较全面的测试。本次测试在性能方面的测试进行的不是很充分,原因是因为田广志出差去北京参加奥运项目的实施。其他人员对性能测试工具的应用不熟悉。导致性能测试展开的较晚,性能测试时间较紧。其它:效率方面:最大负载测试:40个用户(访客并发登录)为系统最佳并发数(此时系统各项指标正常,系统处于高负荷稳定运行状态,系统状态趋于饱和。系统资源得到了充分的使用。)40个用户(访客并发登录)操作性能指标参数如下:1.AverageTransactionResponseTime(平均相应时间)=15秒;2.HitsperSecond(Average)(点击率)=208.889;3.ConnectionsPerSecond(Average)=8.889;4.TotalThroughput(bytes)=8,754,029;5.TotalHits=1,880;最大并发测试:50个用户并发访问为系统最大并发数(此时ProcessorQueueLength(处理器队列性能指标)2,表明理器队列已经存在堵塞现象。预计随着压力的增大。将导致处理器出现无法完成用户请求而放弃操作的现象。)50个用户操作性能指标参数如下:1.AverageTransactionResponseTime(平均相应时间)=20秒;2.HitsperSecond(Average)=213.6363.ConnectionsPerSecond(Average)=9.091;4.TotalThroughput(bytes)=10,937,937;5.TotalHits=2,350;性能测试过程评价:将40并发与50并发的测试结果曲线进行迭代对比后。可以确定:随着并发用户数量的增加(压力的增加),中央处理器(CPU)将是导致系统出现性能瓶颈的主要原因点。处理器队列出现堵塞现象将导致大量并发用户无法按时完成用户请求的响应操作。从而响应时间超出客观用户所忍受的范围。个人认为响应时间不要超过20秒为宜。(人类的潜意识里超过20秒中即达到了忍耐的峰值。每秒点击率(HitPerSecond)数值较高,证明了本IM系统执行程序的效率较高。从两个测试结果分析报告(LoadrunnerAnalysis报告迭代图(英文))中可以看出随着并发登录的人数越多,点击率越大,对服务器的压力也越大。50访客并发的每秒点击率达到为213次/秒。这个值是比较高的。系统吞吐量(Throughput)是指在性能测试过程中网络上传输的数据量的总和,随着并发登录人数增多,吞吐量也在增大。并没有出现衰竭的现象。其中40访客并发时吞吐量为8700000,而50访客并发时吞吐量达到了10900000。系统的吞吐量趋于稳定增长。但需要注意的吞吐量很高,则网络传输的压力也很大。需要考虑局域网的带宽问题。广域网不是本次测试的范围。本人认为广域网也无法开展类似的性能测试过程。本次测试都是在局域网环境下进行的。忽略了网络带宽所受到的影响。每秒连接数(ConnectionsPerSecond)的NewConnections与Connectionshutdown值比较接近。确认系统不存在严重的连接池泄漏。3、结论性意见和建议等:根据测试计划与相应的策略完成了××××系统V2.0版本各项计划中的测试。目前××××系统V2.0在测试的软、硬件以及相关的配置环境下,基本已经达到了预期目标,测试结果基本符合测试需求,可以交付用户使用。该版本基本功能能够正确实现。基本符合用户使用手册和技术白皮书中的要求。该软件还存在一些建议性的问题和设计缺陷,还需要在下一版本中继续修改继续完善系统。性能方面能够满足需求条件。4、技术经理确认情况:测试结论符合实际情况,并同意遗留问题在下一版本中修改。测试经理签字:日期:技术经理签字:日期: