冰晶云梦 2019-09-06
在大部分测试人员眼中只要沾上“框架”,就感觉非常神秘,非常遥远。大家之所以觉得复杂,是因为落地运用起来很复杂;每个公司,每个业务及产品线的业务流程都不一样,所以就导致了“自动化测试框架”去完成自动化测试的时候产生很多不稳定因素,这样就很难定位成一个固定的框架。其实不然,真正的自动化测试框架不是一个模式,而是一种思想和方法的集合,通俗的讲就是一个架构。
为了更好的了解自动化测试框架,我们先从自动化测试的发展历程说起;一般测试工作限在3年以上且接触过自动化测试的应该对以下几种自动化测试框架思想有一定的认知:
以上仅仅是代表了一种自动化测试的思想,并不能定义为框架。上面讲到框架=思想+方法,于是演化了以下五种框架:
需要创建小而独立的可以描述的模块、片断以及待测应用程序的脚本。这些树状结构的小脚本组合起来,就能组成能用于特定的测试用例的脚本。
与模块化测试脚本框架很类似,并且具有同样的优点。不同的是测试库框架把待测应用程序分解为过程和函数而不是脚本。这个框架需要创建描述模块、片断以及待测应用程序的功能库文件。
这个框架需要开发数据表和关键字。这些数据表和关键字独立于执行它们的测试自动化工具,并可以用来“驱动"待测应用程序和数据的测试脚本代码,关键宇驱动测试看上去与手工测试用例很类似。在一个关键字驱动测试中,把待测应用程序的功能和每个测试的执行步骤一起写到一个表中。
这个测试框架可以通过很少的代码来产生大量的测试用例。同样的代码在用数据表来产生各个测试用例的同时被复用。
在这里测试的输入和输出数据是从数据文件中读取(数据池,ODBC源,CSV文件,EXCEL文件,Json文件,Yaml文件,ADO对象等)并且通过捕获工具生成或者手工生成的代码脚本被载入到变量中。在这个框架中,变量不仅被用来存放输入值还被用来存放输出的验证值。整个程序中,测试脚本来读取数值文件,记载测试状态和信息。这类似于表驱动测试,在表驱动测 试中,它的测试用例是包含在数据文件而不是在脚本中,对于数据而言,脚本仅仅是一个“驱动器”,或者是一个传送机构。然而,数据驱动测试不同于表驱动测试,尽管导航数据并不包含在表结构中。在数据驱动测试中,数据文件中只包含测试数据。
最普遍的执行框架是上面介绍的所有技术的一个结合,取其长处,弥补其不足。这个混合测试框架是由大部分框架随着时间并经过若干项目演化而来的。
工具 | 学习 成本 | 录制 | 持续集成 | 测试报告 | 用例管理 | 性能测试 | 扩展难度 | 最低要求 |
---|---|---|---|---|---|---|---|---|
Java+testng+Maven | 高 | 否 | 是 | 是 | 难 | 是 | 中 | Java |
Requests+Python | 低 | 否 | 是 | 是 | 难 | 是 | 中 | Python |
Robot Framework | 低 | 否 | 是 | 是 | 易 | 否 | 高 | 工具组件 |
HttpRunner | 低 | 是 | 是 | 是 | 易 | 是 | 低 | Python |
根据以上的特性可得我们优先考虑Python+Requests和HttpRunner;下面我们根据其两个框架分别来分析下用例执行过程。
Python的Requests库针对所有的HTTP请求方法,采用的是统一的接口
requests.request(method, url, **kwargs)
其中,kwargs可以保护HTTP请求所有可能用到的信息,例如:headers、cookies、params、data、auth等。所以,只要遵循Requests的参数规范,在接口测试用例中复用Requests参数的概念即可。而HttpRunner处理逻辑很简单,直接读取测试用例中的各项参数,传递给Requests发起请求。
1)Requests接口请求示例
def test_login(self): url = "www.xxx.com/api/users/login" data = { "name": "user1", "password": "123456" } resp = requests.post(url, json=data) self.assertEqual(200, resp.status_code) self.assertEqual(True, resp.json()["success"])
在该用例中,实现了HTTP POST请求,然后对响应结果进行判断,检查响应code等是否符合预期。
这样的用例在实际项目中会存在两个问题:
2)HttpRunner使用json/yaml格式处理测试用例,分离后的用例描述如下
{ "name": "test login", "request": { "url": "www.xxx.com/api/users/login", "method": "POST", "headers": { "content-type": "application/json" }, "json": { "name": "user1", "password": "123456" } }, "response": { "status_code": 200, "headers": { "Content-Type": "application/json" }, "body": { "success": true, "msg": "user login successfully." } } }
3)HttpRunner用例执行引擎
def run_testcase(testcase): req_kwargs = testcase['request']try: url = req_kwargs.pop('url') method = req_kwargs.pop('method') except KeyError: raise exception.ParamsError("Params Error") resp_obj = requests.request(url=url, method=method, **req_kwargs) diff_content = utils.diff_response(resp_obj, testcase['response']) success = False if diff_content else True return success, diff_content
4)从测试用例中获取HTTP接口请求参数,testcase['request']
{ "url": "www.xxx.com/api/users/login", "method": "POST", "headers": { "content-type": "application/json" }, "json": { "name": "user1", "password": "123456" } }
5)发起Http请求
requests.request(url=url, method=method, **req_kwargs)
6)检测测试结果,即断言
utils.diff_response(resp_obj, testcase['response'])
根据简单易用易维护原则我们使用HttpRunner工具设计框架。
主要特性:
#### 2、环境准备
安装HomeBrew(MacOs软件包管理工具,类似apt-get、yum)
/usr/bin/ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)"
brew install pyenv echo 'export PYENV_ROOT="$HOME/.pyenv"' >> ~/.bash_profile echo 'export PATH="$PYENV_ROOT/bin:$PATH"' >> ~/.bash_profile echo 'eval "$(pyenv init -)"' >> ~/.bash_profile exec $SHELL -l
pyenv install --list //查看可安装的Python版本 pyenv install 3.6.0 //安装3.6.0版本 pyenv rehash //更新pyenv pyenv versions //查看已经安装的python版本,带*号的是当前使用的版本
pyenv global 3.6.0 //设置全局版本,即当前系统使用的版本将切换为3.6.0
pip install httprunner //运行如下命令,若正常显示版本号,则说明httprunner安装成功: hrun -V 0.9.8
至此HttpRunner已搭建完成
在HttpRunner中,测试用例引擎最大的特色就是支持Yaml/Json格式的用例描述形式;
采用YAML/JSON格式编写维护测试用例,优势还是很明显的:
Yaml格式
Json格式
以下以数澜--数栖平台2.X中的研发平台为例(采取Json格式)
场景:项目空间后,需要快速支持创建Demo示例,即自动创建各种目录和任务。
1)确定业务流程所使用到的接口并通过Postman或Jmeter调试通过及分好类
2)根据业务流程确定接口顺序
3)向Json文件里按照规则填写接口相关信息
以下是部分用例示例
4)用例填写完成后,执行用例文件,如Json文件为task.json
hrun task.json
5)查看运行结果
)
全部通过
部分通过
[作者简介:泫空,6年测试相关工作经验,曾任微医集团搜索测试负责人,负责服务端测试、接口自动化、持续集成测试和性能测试及测试开发。曾参与中国移动政企能力提升项目等。]