测试框架体系 TDD DDT BDD ATDD
什么是测试框架
- 测试框架是一组用于创建和设计测试用例的指南或规则，框架由旨在帮助QA专业人员更有效地测试的实践和工具的组合组成，这些指南可能包括编码标准、测试数据处理方法、对象存储库、存储测试结果的过程或有关如何访问外部资源的信息。
测试框架的价值
- 测试框架是任何成功的自动化测试过程的重要组成部分，它们可以降低维护成本和测试工作，并为寻求优化其敏捷流程的QA团队提供更高的投资回报率ROI
测试框架的收益
- Improved test efficiency 提高测试效率
- Lower maintenance costs 降低维护成本
- Minimal manual intervention 最少的人工干预
- Maximum test coverage 最大测试覆盖率
- Reusability of code 代码的可重用性
常见的测试框架类型
| 框架 | 说明 |
|---|---|
| TDD | 代码风格 |
| DDT | 数据驱动风格 |
| ATDD | 验收测试驱动开发 |
| BDD | 行为驱动开发，Behavior-driven development |
| MBT | Model Based Testing 基于模型的测试 |
TDD
TDD 定义
- 测试驱动开发是一个软件开发过程，在软件完全开发之前，将软件需求转换为测试用例，并通过针对所有测试用例重复测试软件来跟踪所有软件开发，这与首先开发软件和稍后创建测试用例相反
TDD 流程
- 单元测试
- 重构
- 覆盖率
- 可测性提升
- 模型驱动设计
代表作 JUnit TestNG
代表作 Python UnitTest
BDD Behavior Driven Development
- 在软件工程中，行为驱动开发是一种敏捷软件开发过程，它鼓励软件项目中的开发人员、质量保证专家和客户代表之间进行协作，它鼓励团队使用对话和具体示例来形成对应用程序应该如何运行的共同理解，它源于测试驱动开发，行为驱动开发将 TDD 的通用技术和原则与领域驱动设计和对象的思想相结合面向分析和设计，为软件开发和管理团队提供共享工具和共享流程，以便在软件开发方便进行协作
BDD 相关框架
- JBehave
- Cucumber
- Mspec
- Specflow
Cucumber 测试用例 Scenario 场景
Cucumber 测试用例步骤定义
ATDD Acceptance Test Driven Development
ATDD 定义
- 验收测试驱动开发是一种基于业务客户、开发人员和测试人员之间的沟通的开发方法，ATDD包含许多示例规范SBE、行为驱动开发BDD、示例驱动开发EDD、和支持驱动开发(也称为故事测试驱动开发sdd)所有这些流程都有助于开发人员和测试人员在实施之前了解客户的需求，并使客户能够使用它们自己的领域语言进行交流
ATDD 相关工具
- FitNesse：The fully integrated standalone wiki and acceptance testing framework
- Robot Framework is a Python-based, extensible ketword-driven automation framework for acceptance testing, acceptance test driven development, behavior driven development and robotic process automation.
Robotframework
Robotframework 测试用例
数据驱动风格
BDD 风格
ATDD vs BDD
| TDD | ATDD | BDD | |
|---|---|---|---|
| 受众 | 开发 | 开发 测试 客户 | 开发 测试 客户 |
| 过程 | 代码 | DSL | 行为 |
| 目标 | 代码调用功能 | 验收测试 需求 | 需求 |
MBT Model Based Testing
- model - based testing
- GraphWalker，an open - source mdoel - based testing tool
edge 代表步骤
- 一条边代表一个动作，一个过渡，操作可以是 API 调用、按钮单击、超时等，任何将您的被测系统移动到您想要验证的新状态的任何事情，但请记住，边缘没有进行验证，这只发生在顶点
vertex 代表断言
- 一个顶点代表验证，一个断言，验证是您的代码中有断言的地方，在这里，您可以验证 API 调用是否返回正确的值、按钮单击是否确实关闭了对话框、或者在应该发生超时时，被测系统触发了预期的事件
graph 代表测试用例集
- 模型是一个图，它是一组顶点和边，从模型中，GraphWalker 将生成一条通过它的路径，一个模型有一个起始元素，一个规则如何生成路径的生成器，以及告诉 GraphWalker 何时停止生成路径的相关停止条件
测试用例样板生成
DDT Data Driven Testing
- 数据驱动测试，也称为表驱动测试或参数化测试，是一种软件测试方法，用于计算机软件的测试，用于描述使用条件表直接作为测试输入和可验证输出完成的测试以及测试环境设置和控制没有硬编码的过程
DDT 相关工具
- DDT 是一种实践，可以跟很多框架结合
- 单元测试结合 DDT：JUnit4 JUnit5 TestNG
- RobotFramework DDT
- YAML JSON CSV 驱动 HttpRunner
数据驱动应用案例
- HttpRunner 可以根据代理抓包自动生成测试用例
- YAPI、Swagger 等工具可以根据数据自动生成测试用例代码
- JVM - Sandbox - Repeater Gor 录制工具可以把请求保存为测试用例并重放以实现快速回归测试
HttpRunner 测试框架
HttpRunner 测试用例
