手机测试策略(call)

CDMA手机测试经验总结手机测试前要先注意手机上市的三个里程碑：1.信息产业部TA测试由信息产业部进行的为获取NAL(NetworkAccessLicense)而进行的测试。与软件测试相关的主要是CTTL的一部分测试用例和UG交叉检查。UG提到的功能都要求已经实现。一般来说，检查的都是比较基本的功能。2.网络运营商PA测试由运营商进行的产品接受性测试。与软件测试相关的主要是增值业务测试。这里要求有关增值业务的软件，都能符合运营商的要求（有终端规范和测试规范）。另外，要求手机软件成熟、稳定。3.手机上市主要的测试策略•ReleaseTest:每个软件版本都要进行的测试，主要涉及每个Feature最基本的功能。•ErrorVerification:集中在这个版本相对上个版本修改的Error、增强的功能以及新加的功能的测试。•FullFeatureTest:Feature功能的全面的测试。考虑到人力，资源以及有效性，只在比较重要的软件版本上测。(要求测试的软件版本具有一定稳定性和成熟度)•CTTLRelatedTest&UGCrossCheck:主要是针对TA做的准备测试。•ErrorRegressionTest:在最后相对稳定的软件版本上，把已经修改好的Error重新验证一遍，以确保没有重新出现。•Pre-PATest:按照运营商的测试规范进行的增值业务相关的测试。•FreeTest:有效地弥补测试用例的缺陷。发现深层次错误的重要途径。测试重点：BeforeTA•每个软件版本都要进行ReleaseTest和ErrorVerification。•手机的所有Feature都Configuration好之后，就可以进行一次全面的FullFeatureTest。•尽早进行CTTLRelatedTest&UGCrossCheck,给研发人员充分的时间去修改Error。•如果只有一部分的Feature提前做好Configuration，就可以对这些Feature进行单独的FullFeatureTest。测试重点：BeforePA•在这段时期主要针对增值业务的测试以及对于先前发现的Error的跟踪测试。•对于支持运营商的增值业务的手机，要对相关Feature进行FullFeatureTest和准备PA测试。•由于前一阶段时间有限，为了弥补对一些没有覆盖的功能以及一些深层次的测试，需要对各个Feature进行有方向的大量的FreeTest。•在要送往运营商做PA测试的软件版本上，进行所有Feature的FullFeatureTest，以及准备PA测试，确保能够通过测试。测试重点：BeforeLaunch•这段时期软件相对比较成熟，主要应该考虑一些以前测试比较薄弱的地方、或者Error比较集中的地方。如何做好手机UI测试项目的管理•角色分工清晰•做好TestSchedule，安排好各个时期所需的测试•做好测试的准备工作•制定好每个测试的流程•制定好Error管理流程（Report,Update,Follow-up）•收集各个时期比较重要的Error,并随时跟踪状态。•如何能发现更多有效的BugBug的分类功能性Bug（不能Call，发SMS）UI的Bug（和spec相比较，界面上的图片，文字不一致）逻辑性的Bug（执行某些步骤，未进入相应的界面）可以通过以下方法进行手机测试1.重复操作，2.快速按键，3.边界测试，4.按非正常键，选择一个其他路径实现同一个功能5.Memory6.返回前一个状态7.交互8.非法输入9.换卡10.检查缺省值11.特殊状态下的操作12.长时间使用一个功能13.中断正在进行的操作14.压力测试手机测试过程一般走两到三轮的CASE，建议第一轮针对spec做一些UI的自由测试。如果是一个新的项目的话，第二轮和第三轮严格的执行CASE，看手机的bug数目情况，如果大的功能还没有实现的话，还要在执行case，如果实现了，接着做自由测试一到两轮，一般前面四到五轮测试，都是每个人测试自己的模块。前面执行五轮了，应该可以发现70%的bug。从第五到六轮开始做交换模块测试，另外根据项目的进度，在第6轮到第7轮做性能测试和压力测试，以及弱信号的测试。另外还要注意一个问题在基本功能比较完善的情况下，执行并发性测试，在测试项目快结束的时候还要做一次并发测试。并发测试状态插入事件处理方式闹钟界面来电闹铃音停止，到来电界面，提示振铃。来短信无短信提示音，手机会振动一下，按任意键停止闹钟后，到新信息提示界面。低电量提示会有图标闪烁。不会有提示音。游戏中界面来电游戏自动保存，到来电界面，提示振铃。来短信有短信提示音，有短信小图标提示。低电量提示电池图标闪烁，并伴有低电量告警音。闹铃时间到闹铃响起，伴随振动，闹钟小图标闪烁，五秒停止。游戏结束画面来电到来电界面，提示振铃。来短信有短信提示音，有短信小图标提示。低电量提示电池图标闪烁，并伴有低电量告警音闹铃时间到游戏结束音被闹铃中断，伴随振动，闹钟小图标闪烁，五秒停止。游戏存储界面来电游戏不保存，到来电界面，提示振铃。来短信有短信提示音，有短信小图标提示。低电量提示电池图标闪烁，并伴有低电量告警音闹铃时间到闹铃响起，伴随振动，闹钟小图标闪烁，五秒停止。游戏暂停界面来电游戏自动保存，到来电界面，提示振铃。来短信有短信提示音，有短信小图标提示。低电量提示电池图标闪烁，并伴有低电量告警音。闹铃时间到闹铃响起，伴随振动，闹钟小图标闪烁，五秒停止。各类确定界面来电到来电界面，提示振铃。来短信有短信提示音，有短信小图标提示。低电量提示电池图标闪烁，并伴有低电量告警音。闹铃时间到闹铃响起，伴随振动，闹钟小图标闪烁，五秒停止。编辑界面来电到来电界面，提示振铃。短信编辑中来电自动保存内容。电话簿编辑中来电不保存内容。来短信有短信提示音，有短信小图标提示。低电量提示电池图标闪烁，并伴有低电量告警音。闹铃时间到闹铃响起，伴随振动，闹钟小图标闪烁，五秒停止。万年历界面来电到来电界面，提示振铃。来短信有短信提示音，有短信小图标提示。低电量提示电池图标闪烁，并伴有低电量告警音。闹铃时间到闹铃响起，伴随振动，闹钟小图标闪烁，五秒停止。计算器界来电到来电界面，提示振铃。面来短信有短信提示音，有短信小图标提示。低电量提示电池图标闪烁，并伴有低电量告警音。闹铃时间到闹铃响起，伴随振动，闹钟小图标闪烁，五秒停止。各种测试界面来电到来电界面，提示振铃。来短信有短信提示音，有短信小图标提示。低电量提示电池图标闪烁，并伴有低电量告警音。闹铃时间到闹铃响起，伴随振动，闹钟小图标闪烁，五秒停止。铃音浏览界面来电所浏览铃音被来电铃音替代，到来电界面，提示振铃。来短信所浏览铃音被短信提示音替代，有短信小图标提示。低电量提示所浏览铃音被低电量告警音替代，电池图标闪烁。闹铃时间到所浏览铃音被闹铃铃音替代，伴随振动，闹钟小图标闪烁，五秒停止。菜单浏览界面来电到来电界面，提示振铃。来短信有短信提示音，有短信小图标提示。低电量提示电池图标闪烁，并伴有低电量告警音。闹铃时间到闹铃响起，伴随振动，闹钟小图标闪烁，五秒停止。密码输入界面来电到来电界面，提示振铃。来短信有短信提示音，有短信小图标提示。低电量提示电池图标闪烁，并伴有低电量告警音。闹铃时间到闹铃响起，伴随振动，闹钟小图标闪烁，五秒停止。待机界面来电到来电界面，提示振铃。来短信有短信提示音，有短信小图标提示。显示新信息提示界面。低电量提示弹出低电量POP画面，并有低电量提示音，电池小图标闪烁。闹铃时间到到闹钟界面，闹铃响。电话簿初始化界面来电初始化完毕后，进入来电界面，提示振铃。来短信初始化完毕后，有短信提示音，有短信小图标提示。低电量提示初始化完毕后，才会提示。闹铃时间到初始化完毕后，进入闹钟界面，响闹钟铃音。新信息，未接来电界面来电到来电界面，提示振铃。来短信有短信提示音，新信息前数字+1。低电量提示电池图标闪烁，并伴有低电量告警音。闹铃时间到闹铃响起，伴随振动，闹钟小图标闪烁，五秒停止。手机锁定界面来电到来电界面，提示振铃。来短信有短信提示音，有短信小图标提示。显示新信息提示界面。低电量提示弹出低电量POP画面，并有低电量提示音，电池小图标闪烁。闹铃时间到到闹钟界面，闹铃响。未插入UIM卡低电量提示（IDLE界面）弹出低电量POP画面，并有低电量提示音，电池小图标闪烁；（非IDLE界面）电池图标闪烁，并伴有低电量告警音。闹铃时间到（IDLE界面）弹出闹铃POP画面，并有闹铃铃音响起，同时闹铃小图标闪烁；（非IDLE界面）闹铃响起，伴随振动，闹钟小图标闪烁五秒钟。来电中闹铃时间到手机振动且闹铃小图标闪烁五秒钟，来电界面正常。低电量提示有电池小图标闪动，来电界面正常。拨出电话中闹铃时间到手机振动且闹铃小图标闪动五秒钟，可正常拨出电话，界面显示正确。低电量提示有低电量警告音且电池小图标闪动，可正常拨出电话，界面显示正确。通话中来短信有短促提示音，显示未读短信小图标，可正常通话，界面显示正确。闹铃时间到手机振动且闹铃小图标闪动五秒钟，可正常通话，界面显示正确。有电话呼入（设置呼叫等待）测试机界面显示呼入的电话号码及呼叫等待字样，测试机正常通话。低电量提示有低电量警告音且电池小图标闪动，可正常通话，界面显示正确。性能测试：在PB将满和满的时候，和SMS将满和满的时候，有闹铃等并发性的事件发生，电话呼入和呼出的情况,查看PB和SMS。对比测试：依据手机的功能而言，用被测手机和对比样机做对比。主要是Call和SMS，用被测手机分别往被测手机和对比样机上发SMS（注意能否接收到，特殊字符能接收到吗），一般测试两组，一组是25次，共测试50次，记录下接收的成功率，及注明不正常现象的comments。弱信号关机开机注册测试：用被测手机在信号比较好的区域，拨打信号比较差的区域的被测手机和对比样机，一般测试两组，一组是25次，共测试50次，记录下接收的成功率，及注明不正常现象的comments。通话质量测试：在CALL测试的过程中，关注通话有无杂音，噪音，啸叫等等问题在测试的每一轮中都要注意每一轮的测试重点，根据上一轮的测试情况，制定下一轮的测试重点。以及要注意测试优先级。针对release版本的测试要重点把握那几项测试：如果进入release版本的测试，bug是测不完的，对Bug要明白一点测试是发现重要的bug，而不是发现所有的bug。1.基本的function测试，重点对某项操作几次，还有做自由测试（等价类划分，冗错性测试，边界值测试，）换卡，开关机，低电量会不会清除PB，SMS，恢复出厂设置是否应该删除PB，SMS。2.长按键，快速按键，UIM-LOCK，注意：人力资源，一些未能达到的硬件要求。应让供应商在项目开始的初期就提供一些样机，比如在万年历中星期的缩写。有的是WE都是大写，有的是We。电话本的排序：基本的方法是取每个姓名第一个字的Unicode编码，按照ASCII表字符顺序排列但是有下面2个例外：（1）英文字母不区分大小写，例如‘a'和‘A’将会排在一起，先新建的记录排在上面。如新建3笔记录A、a、A，进入电话簿后顺序为：A-a-A。（2）汉字取其拼音的首字母。例如‘阿’和‘a','A'将会排在一起，但是‘阿‘在‘a','A'后面，即汉字在英文字母的后面。具体手机功能测试方法：测Call功能的时候，应该注意的一些事项1.一般用户的操作方法的验证2.非Idle状态来电之后拒接，未接，通话结束后都返回Idle。3.CALL来电和PB中号码的匹配4.来电主叫禁显的测试5.来电号码为黑名单的电话6.更改PB中电话号码的用户名称后，查看对应的呼叫记录是否正确7.来电后，通话记时是否正确8.通话记录的排序9.打，国外，长途，移动，连通，铁通，小灵通，固话，IP电话是否通话清晰没有杂音；10.直接拨打分机（p）11.打电话中交叉事件的处理（低电量，闹钟等）12.打电话过程中，浏览PB，SMS，调节音量等等的操作13.紧急呼叫的和PB电话号码的匹配14.注意耳机在未插入话机时，手机上的“自动接听”功能是否生效。插上耳