以下是关于测试用例书写时需要考虑到的 NFR测试项,在以后用例书写、测试执行时请予以视情况考虑。
1 极限情况
◦ 注意一些比较极限的情况下的 crash/anr情况
◦ 网络中断
◦ 弱网
◦ 异常处理的机制措施
2 适配(主流机器)
◦ 硬件设备
◦ 分辨率
◦ 操作系统
◦ 屏幕尺寸
◦ 手机型号
◦ 横竖屏配置:是否支持横竖屏自适应处理
3 稳定性
◦ 要学会使用 Monkey工具
◦ 随机事件
◦ 大量点击、滑动操作触发的 crash/anr
4 性能
◦ CPU/GPU/流量/耗电量/响应时间
◦ 内存泄露
◦ 并发
◦ 压力
◦ 负载
5 回归测试
◦ 要重视生产环境的 Bug 修复引起的回归问题
6 交互
◦ HCI
◦ UCD
◦ UX
7 程序的启动、停止
◦ 首次启动(时间、权限、图标创建、入口)
◦ 第二次启动(时间、权限、初始化信息、初始状态、网络的自连)
◦ 进程,进程名、进程数、服务名、第三方应用调用
◦ 自动登录
8 权限
◦ 需要用户确认的权限没有授权,权限默认关闭
◦ 联网权限被管家、系统安全类软件限制情况下的联网操作
◦ 权限敏感度,如通讯录等为系统的绝密权限
◦ 使用安全软件进行安全漏洞、病毒扫描,看被测APP是否会被这些安全软件提示有问题而影响用户的对被测APP的使用或者印象
9 文件存储
◦ APP使用过程中产生的临时文件存储路径、命名方式等
◦ APP中涉及的下载操作产生的文件存储方式
◦ 存储的文件被锁、占用
◦ 有外置SD、内置SD卡都要考察APP产生的文件是否正确
◦ APP被安装在SD卡或者手机存储空间
◦ 磁盘空间不足、磁盘无权限(如读、写)
10 网络与流量
◦ 网络信号,尤其是弱网络环境下应用的表现
◦ 不同运营商网络:电信、联通、移动,2G/3G/4G/5G
◦ 网络中断、网络恢复场景的逻辑处理(如重试),以及网络提示
◦ 首次启动应用的流量是否符合预期
◦ 统计、异常上报对流量的影响
◦ APP中图片大小、尺寸是否有考虑对网络流量的影响
◦ 基于流量安全的特殊业务,如仅WIFI联网
11 中断测试
◦ 锁屏中断:停留在程序操作界面进行锁屏,恢复后检查操作是否正常
◦ 前后台切换:停留在程序操作界面,通过Home键,进行程序的前后台切换
◦ 加载中断:页面接口请求、界面框架加载时,通过Home键、返回键、快速切换操作进行中断
◦ 系统异常中断:如关机、断电、来电
12 升级 覆盖安装
◦ 逐步升级:用户数据、设置、状态的保留,特步注意新版本已去掉的状态或设置
◦ 跳级:即隔开版本覆盖安装
◦ 降级:覆盖安装更低版本
◦ 卸载安装,安装目录清理,SD卡存储数据不被清理
◦ 省流量升级:有些助手提供省流量升级的方式
◦ 在没有更新或者网络时,需要给予用户正确的信息表达
◦ 如果升级有忽略本次版本升级,那么当有新的升级版本时,是否还有提示升级
◦ 强制升级,不升级无法使用
13 流畅度
◦ 列表滑动
◦ 返回进入
◦ 快速点击
14 软件兼容
◦ 通用软件 输入法
◦ 安全软件
◦ 通信类
◦ 第三方 App影响
▪ 手机管家
▪ 清理软件
▪ 其它
◦ 竞品软件 同类软件,是否出现冲突另外要留意,竞品对比测试
◦ 功能方面:与同类竞品软件在UI设计,交互体验等方面进行对比
◦ 性能方面:同类竞品软件在性能、耗电、流量等方面至少与对方持平,最好不要低于对方太多
网友评论