关于接口测试——自动化框架的设计与实现
2018-02-07

自动化测试框架

在大部分测试人员眼中只要沾上“框架”,就感觉非常神秘,非常遥远。大家之所以觉得复杂,是因为落地运用起来很复杂;每个公司,每个业务及产品线的业务流程都不一样,所以就导致了“自动化测试框架”去完成自动化测试的时候产生很多不稳定因素,这样就很难定位成一个固定的框架。其实不然,真正的自动化测试框架不是一个模式,而是一种思想和方法的集合,通俗的讲就是一个架构。



自动化测试框架思想

为了更好的了解自动化测试框架,我们先从自动化测试的发展历程说起;一般测试工作限在3年以上且接触过自动化测试的应该对以下几种自动化测试框架思想有一定的认知:

  • 模块化思想 

  • 库思想 

  • 数据驱动思想 

  • 关键字驱动思想

以上仅仅是代表了一种自动化测试的思想,并不能定义为框架。上面讲到框架=思想+方法,于是演化了以下五种框架:

1. 模块化测试脚本框架

需要创建小而独立的可以描述的模块、片断以及待测应用程序的脚本。这些树状结构的小脚本组合起来,就能组成能用于特定的测试用例的脚本。

2. 测试库框架

与模块化测试脚本框架很类似,并且具有同样的优点。不同的是测试库框架把待测应用程序分解为过程和函数而不是脚本。这个框架需要创建描述模块、片断以及待测应用程序的功能库文件。

3. 关键字驱动或表驱动的测试框架

这个框架需要开发数据表和关键字。这些数据表和关键字独立于执行它们的测试自动化工具,并可以用来“驱动"待测应用程序和数据的测试脚本代码,关键宇驱动测试看上去与手工测试用例很类似。在一个关键字驱动测试中,把待测应用程序的功能和每个测试的执行步骤一起写到一个表中。

这个测试框架可以通过很少的代码来产生大量的测试用例。同样的代码在用数据表来产生各个测试用例的同时被复用。

4. 数据驱动测试框架

在这里测试的输入和输出数据是从数据文件中读取(数据池,ODBC源,CSV文件,EXCEL文件,Json文件,Yaml文件,ADO对象等)并且通过捕获工具生成或者手工生成的代码脚本被载入到变量中。在这个框架中,变量不仅被用来存放输入值还被用来存放输出的验证值。整个程序中,测试脚本来读取数值文件,记载测试状态和信息。这类似于表驱动测试,在表驱动测 试中,它的测试用例是包含在数据文件而不是在脚本中,对于数据而言,脚本仅仅是一个“驱动器”,或者是一个传送机构。然而,数据驱动测试不同于表驱动测试,尽管导航数据并不包含在表结构中。在数据驱动测试中,数据文件中只包含测试数据。

5. 混合测试自动化框架

最普遍的执行框架是上面介绍的所有技术的一个结合,取其长处,弥补其不足。这个混合测试框架是由大部分框架随着时间并经过若干项目演化而来的。



接口自动化测试框架策略

1. 进行接口框架设计前,我们先看看当前的一些主流接口自动化工具框架

640.webp (9).jpg

2. 以上各工具特性

image.png

根据以上的特性可得我们优先考虑Python+ Requests和HttpRunner;下面我们根据其两个框架分别来分析下用例执行过程。


3. 用例执行解析

Python的Requests库针对所有的HTTP请求方法,采用的是统一的接口

image.png

其中,kwargs可以保护HTTP请求所有可能用到的信息,例如:headers、cookies、params、data、auth等。所以,只要遵循Requests的参数规范,在接口测试用例中复用Requests参数的概念即可。而HttpRunner处理逻辑很简单,直接读取测试用例中的各项参数,传递给Requests发起请求。


1)Requests接口请求示例

image.png

在该用例中,实现了HTTP POST请求,然后对响应结果进行判断,检查响应code等是否符合预期。

这样的用例在实际项目中会存在两个问题:

  • 用例模式基本固定,会存在大量相似或重复的用例,用例维护有很大问题

  • 用例与执行代码不分离,参数数据也未分离,同样不易维护


2)HttpRunner使用json/yaml格式处理测试用例,分离后的用例描述如下

image.png


3)HttpRunner用例执行引擎

image.png


4)从测试用例中获取HTTP接口请求参数,testcase['request']

image.png


5)发起Http请求

image.png


6)检测测试结果,即断言

image.png


接口自动化测试框架落地

根据简单易用易维护原则我们使用HttpRunner工具设计框架。

1. HttpRunner简介

主要特性:

  • 集成了Requests的全部特性,满足对http、https的各种测试需求

  • 测试用例与代码分离,采用YAML/JSON的形式描述测试场景,保障测试用例具备可维护性

  • 测试用例支持参数化和数据驱动机制

  • 基于 HAR 实现接口录制和用例生成功能

  • 结合 Locust 框架,无需额外的工作即可实现分布式性能测试

  • 执行方式采用 CLI 调用,可与 Jenkins 等持续集成工具完美结合

  • 测试结果统计报告简洁清晰,附带详尽统计信息和日志记录

  • 具有可扩展性,便于扩展实现 Web 平台化

640.webp (10).jpg

2. 环境准备

安装HomeBrew(MacOs软件包管理工具,类似apt-get、yum)

  • 终端执行

    image.png

  • 安装pyenv并配置环境变量:python版本管理器,可同时管理多个Python版本(HttpRunner是基于Python开发,但是支持Python3.6.0以上)

    image.png

  • 安装Python3.6

    image.png

  • 选择Pyhton

    image.png

  • 安装HttpRunner并校验

    image.png

至此HttpRunner已搭建完成


3. 用例管理

在HttpRunner中,测试用例引擎最大的特色就是支持Yaml/Json格式的用例描述形式;

采用 YAML/JSON 格式编写维护测试用例,优势还是很明显的:

相比于表格形式,具有更加强大的灵活性和更丰富的信息承载能力;

相比于代码形式,减少了不必要的编程语言语法重复,并最大化地统一了用例描述形式,提高了用例的可维护性。


640.webp (11).jpg

Yaml格式


640.webp.jpg

Json格式


以下以数澜--数栖平台2.X中的研发平台为例(采取Json格式)


场景:项目空间后,需要快速支持创建Demo示例,即自动创建各种目录和任务。

1)确定业务流程所使用到的接口并通过Postman或Jmeter调试通过及分好类

  • 查询类(Get请求)接口:查询任务目录、查询资源组、查询工作流等

  • 新增类(Post请求)接口:新建目录、新建任务等

2)根据业务流程确定接口顺序

  • 如要在某个目录下新建任务:则先要调用新建目录接口再调用作建任务接口

3)向Json文件里按照规则填写接口相关信息

  • 接口Base_Url

  • 接口路径

  • 接口请求方式

  • 接口请求参数

  • 接口断言

  • 接口返回参数(关联接口时会用到上一接口返回的参数)


以下是部分用例示例

640.webp (1).jpg


4)用例填写完成后,执行用例文件,如Json文件为task.json

image.png


5)查看运行结果

  • 在此目录下会自动生成一个reports文件,进入该文件夹可看到生成带时间的html(执行一次就会生成一个Html文件)


  • 打开此Html查看


640.webp (4).jpg

全部通过


640.webp (5).jpg

部分通过


  • 点击Log,可查看具体请求信息和返回信息


640.webp (6).jpg


  • 点击trackback可查看定位错误信息


    640.webp (7).jpg



640.webp (8).jpg

作者简介:泫空,6年测试相关工作经验,曾任微医集团搜索测试负责人,负责服务端测试、接口自动化、持续集成测试和性能测试及测试开发。曾参与中国移动政企能力提升项目等。