微软软件测试自动化讲义学习资料.ppt

SDM212微软软件测试自动化微软软件测试自动化王志峰王志峰 (Jeff Wang)(Jeff Wang)BizTalk ServerBizTalk ServerMicrosoft CorporationMicrosoft Corporation第一页，共21页。提要提要(tyo)(tyo)微软的软件测试微软的软件测试一个完善的自动化测试系统一个完善的自动化测试系统自动测试用例设计要点自动测试用例设计要点测试用例的管理和运行控制测试用例的管理和运行控制(kngzh)(kngzh)提高软件测试自动化的步骤提高软件测试自动化的步骤测试自动化误区和风险测试自动化误区和风险第二页，共21页。什么是软件测试？什么是软件测试？-两种经典两种经典(jngdin)理念理念验证软件是验证软件是“工作的工作的”代表人物是软件测试领域的先驱代表人物是软件测试领域的先驱Dr.Bill Hetzel（代表论著（代表论著The Complete Guide to Software Testing）主流和行业标准主流和行业标准微软软件测试活动的基础和主要线索微软软件测试活动的基础和主要线索证明证明(zhngmng)软件是软件是“不工作的不工作的”代表人物是代表人物是Glenford J.Myers（代表论著（代表论著The Art of Software Testing）一个成功的测试必须是发现一个成功的测试必须是发现Bug的测试，不然的测试，不然就没有价值就没有价值 微软也阶段性地进行这类测试活动微软也阶段性地进行这类测试活动(Bug Bash)第三页，共21页。什么什么(shn me)(shn me)是微软的软件测试是微软的软件测试是软件开发的依赖是软件开发的依赖每日建造每日建造+自动化测试自动化测试 开发人员依赖测试来保证开发人员依赖测试来保证(bozhng)(bozhng)开发工作开发工作的质量，使开发整体地协调地向前推进的质量，使开发整体地协调地向前推进 是项目管理的基础是项目管理的基础软件项目管理的主要线索就是软件项目管理的主要线索就是BugBug的管理的管理软件测试的结果是项管理和决策的主要依据软件测试的结果是项管理和决策的主要依据第四页，共21页。一个完善一个完善(wnshn)(wnshn)的自动化测试体系的自动化测试体系开发环境开发环境(hunjng)开发语言，库程序，开发语言，库程序，驱动程序，开发工具驱动程序，开发工具测试用例管理测试用例管理(gunl)测试用例的定义，测试用例的定义，设置，分类设置，分类和组合运行和组合运行分析报告分析报告单运行结果报告，多运行综合报告，长期走势报告运行环境运行环境机器池，自动安装和配置,运行代码管理代码管理存储，编译硬件，基础设施硬件，基础设施实验室，机器，网络第五页，共21页。实例实例(shl)(shl)第六页，共21页。测试用例设计测试用例设计(shj)(shj)：BizTalk SQL BizTalk SQL AdapterAdapterSQL AdapterXML Message表表表SQL 数据库BizTalk 服务器BizTalk 应用应用(yngyng)第七页，共21页。测试用例运行测试用例运行(ynxng)(ynxng)步骤步骤:前提前提验证验证BizTalk BizTalk 已安装设置好已安装设置好验证验证SQLSQL数据库在运行数据库在运行设置设置在在BizTalkBizTalk中设置一个使用中设置一个使用SQL AdapterSQL Adapter的应用的应用在在SQLSQL数据库中建立测试表格数据库中建立测试表格运行运行生成一个预定格式的生成一个预定格式的Message:XMLMessage:XML字符串字符串将将MessageMessage发送给发送给BizTalkBizTalk验证验证访问访问SQLSQL数据库，验证数据到达无误数据库，验证数据到达无误验证系统日志中无意外事件验证系统日志中无意外事件清理清理删除删除(shnch)BizTalk(shnch)BizTalk中的应用中的应用删除删除(shnch)SQL(shnch)SQL中的表格中的表格其他意外情况下的特殊清理其他意外情况下的特殊清理第八页，共21页。自动化测试自动化测试(csh)(csh)的核心的核心测试测试(csh)(csh)代码代码第九页，共21页。自动测试程序设计自动测试程序设计(chn x sh j)(chn x sh j)要点要点对前提条件进行验证对前提条件进行验证能处理各种可能的意外，并对有关设置进行彻能处理各种可能的意外，并对有关设置进行彻底清除，以不影响后续测试用例的运行底清除，以不影响后续测试用例的运行各测试用例有相对独立性，不相互依赖，便于各测试用例有相对独立性，不相互依赖，便于进行各种运行组合进行各种运行组合有好的日志有好的日志设计简洁，代码可读性高设计简洁，代码可读性高易于运行易于运行稳定性重于性能稳定性重于性能具有一定的灵活性，能快速具有一定的灵活性，能快速(kui s)(kui s)适应产适应产品功能设计的更改品功能设计的更改第十页，共21页。测试用例的分级测试用例的分级(fn j)(fn j)，及运行频度，及运行频度BVTBVT第一级第一级第二级第二级高级高级定义定义最简单的功最简单的功能验证能验证所有非出错所有非出错情形下的代情形下的代码路径码路径所有出错情所有出错情形下的代码形下的代码路径路径压力，性能，压力，性能，安全性安全性运行频度运行频度每日每日隔日隔日每周每周根据需要根据需要注：BVT 是Build Verification Test的缩写(suxi)第十一页，共21页。测试用例管理测试用例管理(gunl)(gunl)测试用例测试用例最小的设置单元最小的设置单元测试用例组合测试用例组合一系列的测试用例，可以包含一系列的测试用例，可以包含(bohn)(bohn)其他测试用例组合。是可运行和报告的其他测试用例组合。是可运行和报告的基本单元基本单元第十二页，共21页。第十三页，共21页。测试报告测试报告第十四页，共21页。第十五页，共21页。高级高级(goj)(goj)自动化的关键自动化的关键-硬件的管理硬件的管理实验室，自动测试机器池实验室，自动测试机器池动态的选用测试机器动态的选用测试机器自动安装自动安装(nzhung)(nzhung)测试平台测试平台监控机器工作状态监控机器工作状态支持测试工具，进行多机协同运行支持测试工具，进行多机协同运行第十六页，共21页。测试自动化的发展测试自动化的发展(fzhn)(fzhn)阶段与计划阶段与计划无自动测试无自动测试阶段阶段自动测试初自动测试初始阶段始阶段自动测试发自动测试发展阶段展阶段自动测试成自动测试成熟阶段熟阶段自动测试高自动测试高级阶段级阶段特征特征 无自动测试用无自动测试用例，测试工作例，测试工作全部手工操作全部手工操作 非专业人员从非专业人员从事测试事测试 有脚本文件驱有脚本文件驱动的半自动测动的半自动测试试 无机算计软件无机算计软件专业人员从事专业人员从事测试测试 无工具，无实无工具，无实验室验室 有部分测试用有部分测试用例全部自动化例全部自动化 有机算计软件有机算计软件专业人员从事专业人员从事测试代码的开测试代码的开发，使用发，使用JavaJava，C#C#语言语言 使用工具和专使用工具和专门的实验室测门的实验室测试环境试环境 大量测试用例大量测试用例全部自动化全部自动化 有自己开发的有自己开发的共用代码库共用代码库 有测试用例自有测试用例自动运行系统，动运行系统，并与产品建造并与产品建造系统项结合系统项结合 有测试报告和有测试报告和统计分析服务统计分析服务 有高水平的测有高水平的测试开发人员，试开发人员，测试架构师测试架构师 有高度自动化有高度自动化的实验室系统，的实验室系统，和专业的系统和专业的系统管理队伍管理队伍 有完善的自动有完善的自动化测试流程化测试流程 能对外提供自能对外提供自动测试的商业动测试的商业服务服务计划和措计划和措施施 培训和引进人培训和引进人才才 培训和引进机培训和引进机算计软件专业算计软件专业人才人才 尝试测试工具尝试测试工具 建立实验室建立实验室 培训和引进高培训和引进高级编码人才级编码人才 由开发人员帮由开发人员帮助设计测试代助设计测试代码库码库 系统的选择使系统的选择使用和整合各种用和整合各种工具工具 培训和引进测培训和引进测试设计和架构试设计和架构人才人才 进一步提高实进一步提高实验室系统验室系统 建立流程模型建立流程模型和商业服务模和商业服务模型型第十七页，共21页。测试测试(csh)(csh)自动化的风险自动化的风险代价高，所以要根据项目的特点，团队技术水平确定适当的自动化率测试覆盖(fgi)偏向易于自动化的功能。要进行代码覆盖(fgi)率的度量错误的测试设计可能使测试情境与用户使用情境相背离忽视第二类以搜寻缺损为目的的探索性测试工具的选用不当，过多过杂，频繁更换。产品的可测性低第十八页，共21页。参考资料参考资料微软的软件测试方法微软的软件测试方法(fngf)http:/ 172/ShowPost.aspx 第十九页，共21页。问题？问题？谢谢大家！欢迎交流！谢谢大家！欢迎交流！请填写反馈请填写反馈(fnku)(fnku)意见表意见表第二十页，共21页。第二十一页，共21页。