《2022年APP测试基本操作规范.docx》由会员分享,可在线阅读,更多相关《2022年APP测试基本操作规范.docx(17页珍藏版)》请在淘文阁 - 分享文档赚钱的网站上搜索。
1、名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理APP 测试基本流程1. App 测试流程1.1. 流程图1.2 测试周期测试周期可按项目的开发周期来确定测试时间,一般测试时间为两三周(即版本质量可适当缩短或延长测试时间;正式测试前先向主管确认项目排期;1.3 测试资源测试任务开头前,检查各项测试资源;- 产品功能需求文档;- 产品原型图;- 产品成效图;- 行为统计分析定义文档;- 测试设备( IOS Android )- 其他;1.4 日报及产品上线报告1)测试人员每天需对所测项目发送测试日报;2)测试日报所包含的内容为:- 对当前测试版本质量
2、进行分级;- 对较严峻的问题进行例举,提示开发人员优先修改;- 对版本的整体情形进行评估;3)产品上线前,测试人员发送产品上线报告;15 个工作日),依据项目情形以及细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 1 页,共 14 页 - - - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理4)上线报告所包含的内容为:- 对当前版本质量进行分级;- 附上测试报告(功能测试报告、兼容性测试报告、性能测试报告以及- 总结上线版本的基本情形;如有遗留问题必需列出并记录解决方案;2.
3、App 测试点2.1 安全测试1)扣费风险:包括发送短信、拨打电话、连接网络等2)隐私泄露风险:包括拜访手机信息、拜访联系人信息等app 可用性能标准结果);3)对 App 的输入有效性校验、认证、授权、敏锐数据储备、数据加密等方面进行检测 4)限制 / 答应使用手机功能接入互联网5)限制 / 答应使用手机发送接受信息功能 6)限制 / 答应应用程序来注册自动启动应用程序 7)限制或使用本地连接 8)限制 / 答应使用手机拍照或录音 9)限制 / 答应使用手机读取用户数据 10 限制 / 答应使用手机写入用户数据 11 检测 App 的用户授权级别、数据泄漏、非法授权拜访等 1)应用程序应能正
4、确安装到设备驱动程序上 2)能够在安装设备驱动程序上找到应用程序的相应图标 3)是否包含数字签名信息 4)JAD文件和 JAR包中包含的全部托管属性及其值必需是正确的 5)JAD文件显示的资料内容与应用程序显示的资料内容应一样6)安装路径应能指定细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 2 页,共 14 页 - - - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理7)没有用户的答应 , 应用程序不能预先设定自动启动8)卸载是否安全 , 其安装进去的文件是否全部卸载9)卸载
5、用户使用过程中产生的文件是否有提示10)其修改的配置信息是否复原11)卸载是否影响其他软件的功能12)卸载应当移除全部的文件1)当将密码或其他的敏锐数据输人到应用程序时, 其不会被储存在设备中, 同时密码也不会被解码2)输人的密码将不以明文形式进行显示3)密码 , 信用卡明细 , 或其他的敏锐数据将不被储存在它们预输人的位置上4)不同的应用程序的个人身份证或密码长度必需至少在 6-12 个数字长度之间5)当应用程序处理信用卡明细 , 或其他的敏锐数据时 , 不以明文形式将数据写到其它单独的文件或者暂时文件中;6)防止应用程序反常终止而又没有删除它的暂时文件 , 文件可能遭受入侵者的突击 , 然
6、后读取这些数据信息;7)当将敏锐数据输人到应用程序时 , 其不会被储存在设备中8)备份应当加密 , 复原数据应考虑复原过程的反常、通讯中断等 , 数据复原后再使用前应当经过校验9)应用程序应考虑系统或者虚拟机器产生的用户提示信息或安全警告10)应用程序不能忽视系统或者虚拟机器产生的用户提示信息或安全警告, 更不能在安全警告显示前, ,利用显示误导信息欺诈用户,应用程序不应当模拟进行安全警告误导用户11)在数据删除之前,应用程序应当通知用户或者应用程序供应一个“ 取消” 命令的操作12)“ 取消” 命令操作能够依据设计要求实现其功能13)应用程序应当能够处理当不答应应用软件连接到个人信息治理的情
7、形14)当进行读或写用户信息操作时 , 应用程序将会向用户发送一个操作错误的提示信息15)在没有用户明确许可的前提下不损坏侧除个人信息治理应用程序中的任何内容 16)应用程序读和写数据正确;细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 3 页,共 14 页 - - - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理17)应用程序应当有反常爱护;18)假如数据库中重要的数据刚要被重写 , 应准时告知用户19)能合理地处理显现的错误20)意外情形下应提示用户1)在运行其软件过程中
8、, 假如有来电、 SMS、EMS、MMS、蓝牙、红外等通讯或充电时 , 是否能暂停程序,优先处理通信 , 并在处理完毕后能正常复原软件 , 连续其原先的功能2)当创立连接时 , 应用程序能够处理由于网络连接中断 , 进而告知用户连接中断的情形3)应能处理通讯延时或中断4)应用程序将保持工作到通讯超时 , 进而发送给用户一个错误信息指示有连接错误5)应能处理网络反常和准时将反常情形通报用户6)应用程序关闭或网络连接不再使用时应准时关闭 断开7 HTTP、HTTPS掩盖测试-App 和后台服务一般都是通过 HTTP来交互的,验证 HTTP环境下是否正常;- 公共免费网络环境中(如:麦当劳、星巴克等
9、)都要输入用户名和密码,通过 SSL认证来拜访网络,需要对使用 HTTP Client 的 library 反常作捕捉处理;1)返回菜单总保持可用2)命令有优先权次序3)声音的设置不影响应用程序的功能4)应用程序必需利用目标设备适用的全屏尺寸来显示上述内容5)应用程序必需能够处理不行预知的用户操作2.2 安装、卸载测试, 例如错误的操作和同时按下多个键验证 App 是否能正确安装、运行、卸载 以及操作过程和操作前后对系统资源的使用情形1)软件在不同操作系统(Palm OS、Symbian、Linux 、Android 、 iOS、 BlackBerryOS 6.0 、WindowsPhone
10、7)下安装是否正常;细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 4 页,共 14 页 - - - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理 2)软件安装后的是否能够正常运行,安装后的文件夹及文件是否写到了指定的目录里;3)软件安装各个选项的组合是否符合概要设计说明 4 )软件安装向导的 UI 测试5)软件安装过程是否可以取消,点击取消后,写入的文件是否如概要设计说明处理 6)软件安装过程中意外情形的处理是否符合需求(如死机,重启,断电)7)安装空间不足时是否有相应提示
11、8)安装后没有生成余外的目录结构和文件9)对于需要通过网络验证之类的安装,在断网情形下尝试一下 10)仍需要对安装手册进行测试,依照安装手册是否能顺当安装 1)直接删除安装文件夹卸载是否有提示信息;2)测试系统直接卸载程序是否有提示信息;3)测试卸载后文件是否全部删除全部的安装文件夹;4)卸载过程中显现的意外情形的测试(如死机、断电、重启);5)卸载是否支持取消功能,单击取消后软件卸载的情形;UI 测试,是否有卸载状态进度条提示;6)系统直接卸载2.3 UI 测试测试用户界面 如菜单、对话框、窗口和其它可规控件 美观、文字、图片组合是否完善、操作是否友好等; 布局、风格是否满意客户要求、文字是
12、否正确、页面是否UI 测试的目标是确保用户界面会通过测试对象的功能来为用户供应相应的拜访或浏觅功能;确保用户界面符合 公司或行业的标准;包括用户友好性、人性化、易操作性测试;1)按钮、对话框、列表和窗口等;或在不同的连接页面之间需要导航 2)是否易于导航,导航是否直观 3)是否需要搜寻引擎 4)导航帮忙是否精确直观细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 5 页,共 14 页 - - - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理 5)导航与页面结构、菜单、连接页面的风
13、格是否一样2.3.2 图形测试1)横向比较;各控件操作方式统一 2)自适应界面设计,内容依据窗口大小自适应3)页面标签风格是否统一 4)页面是否美观 5)页面的图片应有其实际意义而要求整体有序美观 6)图片质量要高且图片尺寸在设计符合要求的情形下应尽量小 7)界面整体使用的颜色不宜过多 .2.3.3 内容测试1)输入框说明文字的内容与系统功能是否一样 2)文字长度是否加以限制 3)文字内容是否表意不明 4)是否有错别字 5)信息是否为中文显示 6)是否有敏锐性词汇、关键词 7)是否有敏锐性图片,如:涉及版权、专利、隐私等图片2.4 功能测试依据软件说明或用户需求验证 App 的各个功能实现,采
14、纳如下方法实现并评估功能测试过程:1 采纳时间、地点、对象、行为和背景五元素或业务分析等方法分析、提炼App 的用户使用场景,对比说明或需求,整理出内在、 外在及非功能直接相关的需求,构建测试点, 并明确测试标准, 如用户需求中无明确标准遵循,就需要参考行业或相关国际标准或准就;2 依据被测功能点的特性列丼出相应类型的测试用例对其进行掩盖,如;涉及输入的地方需要考虑等价、边界、负面、反常或非法、场景回滚、关联测试等测试类型对其进行掩盖;细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 6 页,共 14 页 - - - - - - - - - 名师归纳总
15、结 精品学习资料 - - - - - - - - - - - - - - -细心整理 3 在测试实现的各个阶段跟踪测试实现与需求输入的掩盖情形,准时修正业务或需求懂得错误;1)App 安装完成后的试运行,可正常打开软件;2)App 打开测试,是否有加载状态进度提示;3)App 打开速度测试,速度是否可观;4)App 页面间的切换是否流畅,规律是否正确 5)注册- 同表单编辑页面- 用户名密码长度- 注册后的提示页面- 前台注册页面和后台的治理页面数据是否一样- 注册后,在后台治理中页面提示 6)登录- 使用合法的用户登录系统;- 系统是否答应多次非法的登陆,是否有次数限制;- 使用已经登陆的账
16、号登陆系统是否正确处理;- 使用禁用的账号登陆系统是否正确处理;- 用户名、口令(密码)错误或漏填时能否登陆;- 删除或修改后的用户,原用户登陆;- 不输入用户口令和用户、重复点(确定或取消按钮)是否答应登陆;- 登陆后,页面中登陆信息;- 页面中有注销按钮;- 登陆超时的处理;7)注销- 注销原模块,新的模块系统能否正确处理;细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 7 页,共 14 页 - - - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理- 终止注销能否返回原模块
17、,原用户;- 注销原用户,新用户系统能否正确处理;- 使用错误的账号、口令、无权限的被禁用的账号进行注销1 APP 切换到后台,再回到 app,检查是否停留在上一次操作界面;2 APP 切换到后台,再回到 app,检查功能及应用状态是否正常,IOS4 和 IOS5 的版本的处理机制有的不一样;3 app 切换到后台,再回到前台时,留意程序是否崩溃,功能状态是否正常,特别是对于从后台切换回前台数据有自动更新的时候;4 手机锁屏解屏后进入 app 留意是否会崩溃,功能状态是否正常,特别是对于从后台切换回前台数据有自动更新的时候;5 当 App 使用过程中有电话进来中断后再切换到 app,功能状态是
18、否正常6 当杀掉 app 进程后,再开启 app,app 能否正常启动;7 显现必需处理的提示框后,切换到后台,再切换回来,检查提示框是否仍存在,有时候会显现应用自动跳过提示框的缺陷;8 对于有数据交换的页面,每个页面都必需要进行前后台切换、锁屏的测试,这种页面最简单显现崩溃;.很多应用供应免登录功能,当应用开启时自动以上一次登录的用户身份来使用 app.1 app 有免登录功能时,需要考虑 IOS 版本差异;2. 考虑无网络情形时能否正常进入免登录状态;3. 切换用户登录后,要校验用户登录信息及数据内容是否相应更新,确保原用户退出;4. 依据 MTOP的现有规章,一个帐户只答应登录一台机器;
19、所以,需要检查一个帐户登录多台手机的情形;原手机里的用户需要被踢出,给出友好提示;5 app 切换到后台,再切回前台的校验6. 切换到后台,再切换回前台的测试7. 密码更换后,检查有数据交换时是否进行了有效身份的校验8. 支持自动登录的应用在进行数据交换时,检查系统是否能自动登录胜利并且数据操作无误;9. 检查用户主动退出登录后,下次启动app,应停留在登录界面 第 8 页,共 14 页 细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - - - - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - -
20、-细心整理 2.4.4 数据更新依据应用的业务规章,以及数据更新量的情形,来确定最优的数据更新方案;1 需要确定哪些地方需要供应手动刷新,哪些地方需要自动刷新,哪些地方需要手动 +自动刷新;2 确定哪些地方从后台切换回前台时需要进行数据更新;3 依据业务、速度及流量的合理安排,确定哪些内容需要实时更新,哪些需要定时更新;4 确定数据展现部分的处理规律,是每次从服务端恳求,仍是有缓存到本地,这样才能有针对性的进行相应测 试;5 检查有数据交换的地方,均有相应的反常处理;很多应用会支持离线浏览,即在本地客户端会缓存一部分数据供用户查看;1 在无网络情形可以浏览本地数据 2 退出 app 再开启 a
21、pp 时能正常浏览 3 切换到后台再切回前台可以正常浏览4 锁屏后再解屏回到应用前台可以正常浏览 5 在对服务端的数据有更新时会赐予离线的相应提示2.4.6 App 更新1 当客户端有新版本时,有更新提示;2 当版本为非强制升级版时,用户可以取消更新,老版本能正常使用;用户在下次启动 app 时,仍能显现更新 提示;3 当版本为强制升级版时,当给出强制更新后用户没有做更新时,退出客户端;下次启动 app 时,仍显现强制 升级提示;4 当客户端有新版本时,在本地不删除客户端的情形下,直接更新检查是否能正常更新;5 当客户端有新版本时,在本地不删除客户端的情形下,检查更新后的客户端功能是否是新版本
22、;6 当客户端有新版本时,在本地不删除客户端的情形下,检查资源同名文件如图片是否能正常更新成最新版本;假如以上无法更新胜利的,也都属于缺陷;细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 9 页,共 14 页 - - - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理2.4.7 定位、照相机服务1 App 有用到相机,定位服务时,需要留意系统版本差异2 有用到定位服务、照相机服务的地方,需要进行前后台的切换测试,检查应用是否正常;3 当定位服务没有开启时,使用定位服务,会友好性弹
23、出是否答应设置定位提示;当确定答应开启定位时,能自动跳转到定位设置中开启定位服务;4 测试定位、照相机服务时,需要采纳真机进行测试;2.4.8 时间测试客户端可以自行设置手机的时区、时间,因此需要校验该设置对 app 的影响;- 中国为东 8 区,所以当手机设置的时间非东8 区时,查看需要显示时间的地方,时间是否展现正确,应用功能是否正常; 时间一般需要依据服务器时间再转换成客户端对应的时区来展现,这样的用户体验比较好;比如发表一篇微博在服务端记录的是 10:00,此时,华盛立刻间为 22:00,客户端去浏览时,假如设置的是华盛立刻间 ,就显示的发表时间即为 22:00, 当时间设回东 8 区
24、时间时,再查看就显示为 10:00;1 检查 push 消息是否依据指定的业务规章发送2 检查不接受推送消息时,检查用户不会再接收到 push.3 假如用户设置了免打搅的时间段,检查在免打搅时间段内,用户接收不到 PUSH;在非免打搅时间段,用户能正常收到 push;4 当 push 消息是针对登录用户的时候,需要检查收到的push 与用户身份是否相符,没有错误地将其它人的消息推送过来;一般情形下,只对手机上最终一个登录用户进行消息推送;5 测试 push 时,需要采纳真机进行测试;2.5 性能测试 评估 App 的时间和空间特性:1 极限测试:在各种边界压力情形下,如电池、储备、网速等,验证
25、- 内存满时安装 App- 运行 App 时手机断电App 是否能正确响应;细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 10 页,共 14 页 - - - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理- 运行 App 时断掉网络2 响应才能测试:测试App 中的各类操作是否满意用户响应时间要求;-App 安装、卸载的响应时间-App 各类功能性操作的影响时间3 压力测试:反复 / 长期操作下、系统资源是否占用反常;-App 反复进行安装卸载,查看系统资源是否正常- 其他功能
26、反复进行操作,查看系统资源是否正常4 性能评估:评估典型用户应用场景下,系统资源的使用情形;5Benchmark 测试(基线测试):与竞争产品的Benchmarking, 产品演化对比测试等;2.6 交叉大事测试针对智能终端应用的服务等级划分方式及实时特性所提出的测试方法;交叉测试 又叫大事或冲突测试,是指一个功能正在执行过程中,同时另外一个大事或操作对该过程进行干扰的测试;如; App 在前 / 后台运行状态时与来电、文件下载、音乐收听等关键运用的交互情形测试等;交叉大事测试特别重要,能发觉很多应用中潜在的性能问题;1).多个 App 同时运行是否影响正常功能2)App 运行时前 / 后台切
27、换是否影响正常功能3)App 运行时拨打 / 接听电话4)App 运行时发送 / 接收信息5)App 运行时发送 / 收取邮件6)App 运行时切换网络(2G、3G、 wifi )7)App 运行时浏览网络8)App 运行时使用蓝牙传送 / 接收数据9)App 运行时使用相机、运算器等手机自带设备2.7 兼容测试细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 11 页,共 14 页 - - - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理 主要测试内部和外部兼容性1)与本地及主
28、流App 是否兼容检验在各种网络连接下WiFi 、GSM、GPRS、EDGE、WCDMA、CDMA1x、CDMA2000、2)基于开发环境和生产环境的不同,HSPDA等 ,App 的数据和运用是否正确 3)与各种设备是否兼容,如有跨系统支持就需要检验是否在各系统下,各种行为是否一样- 不同操作系统的兼容性,是否适配- 不同手机屏幕辨论率的兼容性- 不同手机品牌的兼容性2.8 回来测试1)Bug 修复后且在新版本发布后需要进行回来测试;2)Bug 修复后的回来测试在交付前、要进行全量用例的回来测试;2.9 升级、更新测试新版版发布后,协作不同网络环境的自劢更新提示及下载、安装、更新、启劢、运行的
29、验证测试;1)测试升级后的功能是否与需求说明一样 2)测试与升级模块相关的模块的功能是否与需求一样 3)升级安装意外情形的测试(如死机、断电、重启)4)升级界面的 UI 测试 5)不同操作系统间的升级测试2.10 用户体验测试以主观的一般消费者的角度去感知产品或服务的舒服、有用、易用、友好亲切程度;通过不同个体、独立空间和 非体会的统计复用方式去有效评判产品的体验特性 提出修改看法提升产品的潜在客户中意度;1)是否有空数据界面设计,引导用户去执行操作;2)是否滥用用户引导;细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 12 页,共 14 页 - -
30、 - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理 3)是否有不行点击的成效,如:你的按钮此时处于不行用状态,那么肯定要灰掉,或者拿掉按钮,否就会给用 户误导 4)菜单层次是否太深5)交互流程分支是否太多 6)相关的选项是否离得很远 7)一次是否载入太多的数据 8)界面中按钮可点击范畴是否适中 9)标签页是否跟内容没有从属关系,当切换标签的时候,内容跟着切换 10)操作应当有主次从属关系11)是否定义Back 的规律;涉及软硬件交互时,Back 键应详细定义12)是否有横屏模式的设计,应用一般需要支持横屏模式,即自适应设
31、计2.11 硬件环境测试1)手机开锁屏对运行中的 App 的影响 2)切换网络对运行中的 App 的影响 3)运行中的 App 前后台切换的影响 4)多个运行中的 App 的切换5)App 运行时关机 6)App 运行时重启系统 7)App 运行时充电 8)App 运行时 kill 掉进程再打开手机的网络目前主要分为 2G、3G、 wifi ;目前 2G的网络相对于比较慢,测试时特别要留意此块的测试;1. 无网络时,执行需要网络的操作,赐予友好提示,确保程序不显现 crash ;2. 内网测试时,要留意挑选到外网操作时的反常情形处理;3. 在网络信号不好时,检查功能状态是否正常,确保不因提交数
32、据失败而造成crash ; 第 13 页,共 14 页 细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - - - - - - - - - - 名师归纳总结 精品学习资料 - - - - - - - - - - - - - - -细心整理4. 在网络信号不好时,检查数据是否会始终处于提交中的状态,有无超时限制;如遇数据交换失败时要赐予提示;5. 在网络信号不好时,执行操作后,在回调没有完成的情形下,退出本页面或者执行其他操作的情形,有无异常情形;此问题也会常常显现程序 crash ;2.11.3 服务器宕机或显现404、502 等情形下的测试后台服务牵涉到D
33、NS、空间服务商的情形下会影响其稳固性,如:当显现域名解析故障时,你对后台API 的恳求很可能就会显现404 错误,抛出反常;这时需要对反常进行正确的处理,否就可能会导致程序不能正常工作;2.12 接口测试服务端一般会供应 JSON格式的数据给客户端,所以我们在服务端需要进行接口测试,确保服务端供应的接口并转换的 JSON内容正确,对分支、反常流有相应的返回值;此块测试可以采纳 itest 框架进行测试;最便利的是采纳 httpclient 进行接口测试;进行服务端测试时,需要开发供应一份接口文档;2.13 客户端数据库测试1)一般的增、删、改、查测试;2)当表不存在时是否能自动创建,当数据库表被删除后能否再自建,数据是否仍能自动从服务端中猎取回来并储存;3)在业务需要从服务端取回数据储存到客户端的时候,客户端能否将数据储存到本地;4)当业务需要从客户端取数据时,检查客户端数据存在时,app 数据是否能自动从客户端数据中取出,仍是仍然会从服务器端猎取?检查客户端数据不存在时,app 数据能否自动从服务器端猎取到并储存到客户端5)当业务对数据进行了修改、删除后,客户端和服务端是否会有相应的更新;细心整理归纳 精选学习资料 - - - - - - - - - - - - - - - 第 14 页,共 14 页 - - - - - - - - -
限制150内