海内外安卓IOS机型套餐测试注意事项
共同注意事项
(1)临时换包或者修复测试环境
1.临时换包:
正式启动测试之前(具体指写好测试脚本后在测试平台发起自动化测试任务之前)可以换包,启动测试任务之后只能更换包2次,第3次测试如果包还有问题则归纳为适配问题反馈报告。每次换包后发起的新测试,不在测试之前已经测试过的机型(举例:测试Top.300机型,在测试了100台机型后换包,新包只测试剩下的200台)。
2.修复测试环境:
环境问题有:1.因包有严重适配问题,导致开始测试后大面积机型出现同样问题无法继续测试的。2.因登录SDK不支持IP重复使账号无法正常登录。3.因随机弹窗,随机广告,随机游戏提示等随机行为去除的不彻底,导致无法自动化测试。4.因服务器问题导致的无法正常热更,无法登录,游戏中掉线。出现以上问题或者其它类似问题导致无法正常测试的,允许修复问题2次,第3次修复后还是遇到问题则按适配问题反馈报告。
(2)测试步骤
单次测试120个步骤(一个步骤指:一次屏幕点击、划动、输入登陆账号等,从APP启动开始算步骤),同事控制脚本时长在15分钟以内。超过120个步骤,按照步骤数/120进行折算,最小折算倍数0.5倍。
自选机型测试(纯人工测试)
自选机型测试可自由选择需要测试的机型型号。
自选机型测试单次测试步骤在120个步骤以内。
自选机型测试收费:国内安卓机型50一台,IOS机型70一台,海外安卓机型80一台。如有“热更新”&“边玩边下”且资源超过30M,按非标准兼容性测试具体评估补扣金额(大资源加载会增加测试成本)。
(4)服务器
1.测试期间需要保持服务器稳定,不能进行更新、升级、关闭等影响测试的操作。
2.服务器需至少支持500+机型的并发运行&热更&下载,如果有并发限制的话,测试反馈时间延长。
(5)测试报告
1.测试报告以邮箱反馈,默认反馈到注册邮箱,可在提交测试时以“;”号区分添加多个接收邮箱。
2.如测试报告不需要记录部分适配问题(如异形屏的UI适配问题、屏幕的黑边问题等),需测试开始之前告诉,反馈报告后无法在更改报告。
3.测试报告包含在线报告、excel报告、PDF报告,可从在线报告里下载。
(6)实名认证
需关闭实名认证,如果不能关闭,需支持一个身份证信息在上百台机型上重复使用。
(7)IP限制
需取消IP限制,因机房一个IP对应一个机柜,一个机柜对应多台手机。否则会导致登录失败,游戏中强制下线等。
(8)热更新&边玩边下——尽量给全量包测试
1.热更新≤30M
需确保更新后不会自动重启替换版本,游戏主动杀死进程,平台检测到进程消失会判定游戏闪退,影响测试结果准确性。
2.热更新>30M
因服务器带宽可能存在限制,且大并发同时更新容错性较差,影响测试结果准确性与反馈效率,请尽量上传全量包。若必须走大更新,按非标准兼容性测试具体评估补扣金额(大资源加载会增加测试成本)。
3.边玩边下
因服务器带宽可能存在限制,大并发且同时下载容错性较差,可能会出现下载未完成无法进行后续流程的情况,导致结果判定为卡死或点击无响应的情况,影响测试结果准确与反馈效率。若必须”边玩边下“且下载资源超过30M,按非标准兼容性测试具体评估补扣金额(大资源加载会增加测试成本)。
4.以上3点适用于国内安卓机型测试、IOS机型测试,不适用于海外安卓机型测试。
(9)TestBird工作时间&加急测试&报告反馈时间
1.TestBird工作时间早9:30到晚6:30,周一到周五正常测试,周六单双休息,周日休息。
2.加急测试:单次测试可提前10个小时反馈报告,支持周末进行加急测试,需补扣1200元费用。
3.报告反馈时间:从确认好测试需求开始计算,并不是创建任务时间。具体反馈时间还受到热更新&包体下载&资源下载&服务器情况等影响。
国内安卓机型
IOS机型
海外安卓机型
Top.300
Top.600
Top.50
Top.70
Top.100
Top.80
Top.180
24H
48H
48H
48H
72H
48H
72H
(10)自动重测
1.自动重测是指单次兼容性测试中某台机型出现闪退、卡顿、崩溃问题时,可以在测试2次,根据3次测试结果分析此次适配问题发生的概率。
2.国内安卓&海外安卓测试支持自动重测,单次测试补扣1000元费用。
二、IOS机型套餐测试单独注意事项
(1)测试方法
1.直接提供企业签名包,可直接用于测试。
2.我们对白包进行重签(企业签)——适用于无签名校验的包。
3.加IOS设备UUID——适用于有签名校验、可添加UUID的包。
4.testflight——需要添加我们的AppleID,下载受苹果服务器不稳定影响,反馈时间会适当延长。
(2)IOS测试支持复杂操作测试
支持复杂类型操作。如双手操作、复杂拖动行为测试、支持“篮球足球射击竞技等类型”游戏测试。
三、海外安卓机型套餐测试单独注意事项
(1)海外安卓测试免费目录
1.免费支持Google账号登陆(原价1000元/次)。
2.免费支持OBB包、AAB包测试(原价1000/次)。
3.免费支持1G以内热更新&商店包体下载&边玩边下(原价1000元/次),1G以上每增加1G,多收费2000元。
4.免费支持主流国家VPN测试(原价500元/次)。
5.若无需上诉1-4项服务,进行海外Top.80机型&Top.180机型测试单次可减少2000元费用(需提前告知)。
(2)海外测试支持复杂类型操作
支持复杂类型操作。如双手操作、复杂拖动行为测试、支持“篮球足球射击竞技等类型”游戏测试。
四、国内安卓机型套餐测试单独注意事项
(1)登录SDK限制——尽量使用白包或不限制注册登录的SDK
1.OPPO、vivo、华为、小米、应用宝、B站、taptap、360、UC等无法测试Top.300&Top.600套餐,提测时请选择自选机型测试。
1)渠道账号有限无法满足大量机型的需求。
2)部分渠道需要预装相应的渠道框架。
3)渠道包测试针对各自渠道适配各自品牌机型即可。
4)渠道对于同IP下的登录和限制都比较大,超过一定数量就会出图形验证码。目前暂无法自动化实现,需要人工辅助登录。
2.QQ、微信、短信验证码、邮箱验证码等登录方式,需选择自选机型测试,且QQ、微信账号登录安全验证繁多,需具体评估工作量决定补扣费用。
1)目前腾讯对QQ微信的限制较