python - pytest

oXiaoChong 2020-01-02

pip install pytest

pytest 是 python 的第三方单元测试框架,比自带 unittest 更简洁和高效,支持315种以上的插件,同时兼容 unittest 框架。这就使得我们在 unittest 框架迁移到 pytest 框架的时候不需要重写代码。接下来我们在文中来对分析下 pytest 有哪些简洁、高效的用法

pytest特点:

入门简单易上手,文档支持较好。
支持单元测试和功能测试。
支持参数化。
可以跳过指定用例,或对某些预期失败的case标记成失败。
支持重复执行失败的case。
支持运行由unittest编写的测试用例。
有很多第三方插件,并且可自定义扩展。
方便和支持集成工具进行集成。

安装

pip install pytest

 测试是否安装成功

C:\Users\Anthony>pytest --version
This is pytest version 5.2.2, imported from c:\python36\lib\site-packages\pytest.py

在测试之前要做的准备

我的演示脚本处于这样一个的目录中:

M:\py_tests\ # 我的是D盘的 py_tests 目录,所有操作都在 py_tests 目录内完成
    ├─scripts     #编写测试用例的文件夹
    │  ├─test_case_dir1
    │  │  ├─test_case_02.py    # 用例脚本文件
    │  │  └─__init__.py
    │  ├─test_allure_case.py   # 脚本文件
    │  ├─test_case_01.py   # 脚本文件
    │  └─__init__.py
    ├─report    --报告生成的文件夹
    │  ├─report.html   # pytest-html生成的用例报告
    │  ├─assets  # allure的依赖目录
    │  ├─result  # allure生成的用例数据
    │  └─allure_html   # allure生成的用例报告目录
    |     └─index.html  # allure生成的最终的html类型的测试报告  
    ├─case_set.py
    ├─demo0.py   # 用例脚本文件
    ├─demo1.py   # 用例脚本文件
    ├─pytest.ini  # 配置文件
    └─__init__.py

简单示例

demo.py

import pytest

def test_case01():
    print(‘执行用例01.......‘)
    assert 0  # 断言失败

def test_case02():
    print(‘执行用例02.......‘)
    assert 1  # 断言成功
    
def custom_case03():
    print(‘执行用例03.......‘)
    assert 1  # 断言成功
    
if __name__ == ‘__main__‘:
    pytest.main(["-s", "demo.py"])
    # pytest.main("-s demo.py")

上例中,当我们在执行(就像Python解释器执行普通的Python脚本一样)测试用例的时候,pytest.main(["-s", "demo.py"])中的传参需要是一个元组或者列表(我的pytest是5.2.2版本),之前的版本可能需要这么调用pytest.main("-s demo.py"),传的参数是str的形式,至于你使用哪种,取决于报不报错:

TypeError: `args` parameter expected to be a list or tuple of strings, got: ‘-s demo1.py‘ (type: <class ‘str‘>)

遇到上述报错,就是参数需要一个列表或者元组的形式,而我们使用的是str形式。

上述代码正确的执行结果是这样的:

===================================================== test session starts ======================================================
platform win32 -- Python 3.6.2, pytest-5.2.2, py-1.8.0, pluggy-0.13.0
rootdir: M:\py_tests
collected 2 items                                                                                                               

demo1.py 执行用例01.......
F执行用例02.......
.
=========================================================== FAILURES ===========================================================
_________________________________________________________ test_case01 __________________________________________________________

    def test_case01():
        print(‘执行用例01.......‘)
>       assert 0  # 断言失败
E       assert 0

demo1.py:11: AssertionError
================================================= 1 failed, 1 passed in 0.13s ==================================================

大致的信息就是告诉我们:

  • collected 2 items:本次执行中,收集了2个用例。

  • 完了开始执行用例,.表示执行成功,F表示执行失败。

  • 脚本中的第一个用例执行失败;第二个用例执行成功;但是第三个也就是custom_case03并没有执行,由此我们知道,pytest只识别以test_开头的用例

pytest.main(["-s", "demo.py"])参数说明

  • -s,表示输出用例执行的详细结果。

  • demo1.py是要执行的脚本名称。

除了上述的函数这种写法,也可以有用例类的写法:

import pytest
class TestCase(object):
    def test_case01(self):
        """ 用例 01 """
        print(‘执行用例01.......‘)
        assert 0  # 断言失败

    def test_case02(slef):
        """ 用例 02 """
        print(‘执行用例02.......‘)
        assert 1  # 断言成功
if __name__ == ‘__main__‘:
    pytest.main(["-s", "demo.py"])

类名要以Test开头,并且其中的用例方法也要以Test开头,不然pytest不会执行

执行结果:

D:\py_tests>python demo.py
========================================================== test session starts ===========================================================
platform win32 -- Python 3.6.2, pytest-5.2.2, py-1.8.0, pluggy-0.13.0
rootdir: M:\py_tests
collected 2 items                                                                                                                         

demo1.py 执行用例01.......
F执行用例02.......
.

================================================================ FAILURES ================================================================
__________________________________________________________ TestCase.test_case01 __________________________________________________________

self = <demo1.TestCase object at 0x03DD6110>

    def test_case01(self):
        """ 用例 01 """
        print(‘执行用例01.......‘)
>       assert 0  # 断言失败
E       assert 0

demo1.py:49: AssertionError
====================================================== 1 failed, 1 passed in 0.12s =======================================================
. 表示通过, F表示失败

接下来,我们来研究一下pytest中的setup和teardown的用法。

setup和teardown

我们知道,在unittest中,setup和teardown可以在每个用例前后执行,也可以在所有的用例集执行前后执行。那么在pytest中,有以下几种情况:

  • 模块级别,也就是在整个测试脚本文件中的用例集开始前后,对应的是:

    • setup_module

    • teardown_module

  • 类级别,在类中的所有用例集执行前后,在类里写,对应的是:

    • setup_class

    • teardown_class

  • 在类中呢,也可以在进一步划分,在每一个方法执行前后,在类里写,对应:

    • setup_method

    • teardown_methd

  • 函数级别,在用例函数之前后,对应:

    • setup_function

    • teardown_function

来一一看看各自的用法。

模块级别setup_module/teardown_module

import pytest
def setup_module():
    """ 模块级别的 setup,在该脚本内所有用例集执行之前触发执行 """
    print(‘模块级别的 setup.....‘)
def test_case01():
    print(‘执行用例01.......‘)
    assert 0  # 断言失败
def test_case02():
    print(‘执行用例02.......‘)
    assert 1  # 断言成功
def teardown_module():
    """ 模块级别的 teardown,在该脚本内所有用例集执行之后触发执行 """
    print(‘模块级别的 teardown.....‘)

if __name__ == ‘__main__‘:
    pytest.main(["-s", "demo1.py"])

执行结果

D:\py_tests>python demo.py
========================================================== test session starts ===========================================================
platform win32 -- Python 3.6.2, pytest-5.2.2, py-1.8.0, pluggy-0.13.0
rootdir: M:\py_tests
collected 2 items                                                                                                                         

demo1.py 模块级别的 setup.....
执行用例01.......
F执行用例02.......
.模块级别的 teardown.....


================================================================ FAILURES ================================================================
______________________________________________________________ test_case01 _______________________________________________________________

    def test_case01():
        print(‘执行用例01.......‘)
>       assert 0  # 断言失败
E       assert 0

demo1.py:16: AssertionError
====================================================== 1 failed, 1 passed in 0.12s =======================================================

类级别的setup_class/teardown_class

import pytest

class TestCase(object):

    def setup_class(self):
        """ 类级别的 setup,在该类中内用例集执行之前触发执行 """
        print(‘类级别的 setup.....‘)

    def teardown_class(self):
        """ 类级别的 teardown,在该类中内用例集执行之后触发执行 """
        print(‘类级别的 teardown.....‘)

    def test_case01(self):
        """ 用例 01 """
        print(‘执行用例01.......‘)
        assert 0  # 断言失败

    def test_case02(slef):
        """ 用例 02 """
        print(‘执行用例02.......‘)
        assert 1  # 断言成功

if __name__ == ‘__main__‘:
    pytest.main(["-s", "demo1.py"])
执行结果
D:\py_tests>python demo.py
========================================================== test session starts ===========================================================
platform win32 -- Python 3.6.2, pytest-5.2.2, py-1.8.0, pluggy-0.13.0
rootdir: M:\py_tests
collected 2 items                                                                                                                         

demo1.py 类级别的 setup.....
执行用例01.......
F执行用例02.......
.类级别的 teardown.....


================================================================ FAILURES ================================================================
__________________________________________________________ TestCase.test_case01 __________________________________________________________

self = <demo1.TestCase object at 0x0363F710>

    def test_case01(self):
        """ 用例 01 """
        print(‘执行用例01.......‘)
>       assert 0  # 断言失败
E       assert 0

demo1.py:53: AssertionError
====================================================== 1 failed, 1 passed in 0.10s =======================================================

<span><span><span><span><span><span><span><span><span><span><span><strong><span>类中方法级别的setup_method/teardown_method</span></strong></span></span></span></span></span></span></span></span></span></span></span>

import pytest

class TestCase(object):

    def setup_method(self):
        """ 类中方法级别的 setup,在该类中内每个用例执行之前触发执行 """
        print(‘类中方法级别的 setup.....‘)

    def teardown_method(self):
        """ 类中方法级别的 teardown,在该类中内每个用例执行之后触发执行 """
        print(‘类中方法级别的 teardown.....‘)

    def test_case01(self):
        """ 用例 01 """
        print(‘执行用例01.......‘)
        assert 0  # 断言失败

    def test_case02(slef):
        """ 用例 02 """
        print(‘执行用例02.......‘)
        assert 1  # 断言成功

if __name__ == ‘__main__‘:
    pytest.main(["-s", "demo1.py"])

执行结果:

D:\py_tests>python demo.py
========================================================== test session starts ===========================================================
platform win32 -- Python 3.6.2, pytest-5.2.2, py-1.8.0, pluggy-0.13.0
rootdir: M:\py_tests
collected 2 items                                                                                                                         

demo1.py 类中方法级别的 setup.....
执行用例01.......
F类中方法级别的 teardown.....
类中方法级别的 setup.....
执行用例02.......
.类中方法级别的 teardown.....


================================================================ FAILURES ================================================================
__________________________________________________________ TestCase.test_case01 __________________________________________________________

self = <demo1.TestCase object at 0x042BA2D0>

    def test_case01(self):
        """ 用例 01 """
        print(‘执行用例01.......‘)
>       assert 0  # 断言失败
E       assert 0

demo1.py:49: AssertionError
====================================================== 1 failed, 1 passed in 0.42s =======================================================

函数级别的setup_function/teardown_function

import pytest

def setup_function():
    """ 函数级别的 setup,在该脚本内每个用例函数执行之前触发执行 """
    print(‘函数级别的 setup.....‘)

def test_case01():
    print(‘执行用例01.......‘)
    assert 0  # 断言失败

def test_case02():
    print(‘执行用例02.......‘)
    assert 1  # 断言成功

def teardown_function():
    """ 函数级别的 teardown,在该脚本内每个用例函数执行之后触发执行 """
    print(‘函数级别的 teardown.....‘)


if __name__ == ‘__main__‘:
    pytest.main(["-s", "demo1.py"])

执行结果

D:\py_tests>python demo.py
========================================================== test session starts ===========================================================
platform win32 -- Python 3.6.2, pytest-5.2.2, py-1.8.0, pluggy-0.13.0
rootdir: M:\py_tests
collected 2 items                                                                                                                         

demo1.py 函数级别的 setup.....
执行用例01.......
F函数级别的 teardown.....
函数级别的 setup.....
执行用例02.......
.函数级别的 teardown.....


================================================================ FAILURES 
______________________________________________________________ test_case01 

    def test_case01():
        print(‘执行用例01.......‘)
>       assert 0  # 断言失败
E       assert 0

demo1.py:16: AssertionError
====================================================== 1 failed, 1 passed in 0.11s

小结

  • 在类中,不需要__init__方法。

  • 测试类的类名必须以Test开头。

  • 类中的测试方法编写规则跟函数一致

配置文件

该脚本有多种运行方式,如果处于PyCharm环境,可以使用右键或者点击运行按钮运行,也就是在pytest中的主函数中运行:

if __name__ == ‘__main__‘:
    pytest.main(["-s", "demo1.py"])   # 就是调用的 pytest 的 main 函数

<span><span><span><span><span><span><span><span><span><span><span>也可以在命令行中运行:</span></span></span></span></span></span></span></span></span></span></span>

D:\py_tests>python demo1.py

这种方式,跟使用Python解释器执行Python脚本没有什么两样。也可以如下面这么执行:

D:\py_tests>pytest -s demo1.py

当然,还有一种是使用配置文件运行,来看看怎么用。

在项目的根目录下,我们可以建立一个pytest.ini文件,在这个文件中,我们可以实现相关的配置:

[pytest]
addopts = -s -v   
#可以搭配相关的参数,比如-s。多个参数以空格分割,其他参数后续用到再说
#-s,在运行测试脚本时,为了调试或打印一些内容,我们会在代码中加一些print内容,但是在运行pytest时,这些内容不会显示出来。如果带上-s,就可以显示了。
#-v,使输出结果更加详细
testpaths = ./scripts
#配置测试用例的目录  ,必须有
python_files = demo*.py
#执行指定的文件,以test开头的python文件
python_classes = Test*
#执行指定的类
python_functions = test_*
#执行指定的函数

注意,配置文件中不许有中文,那这个配置文件中的各项都是什么意思呢?

首先,pytest.ini文件必须位于项目的根目录,而且也必须叫做pytest.ini

其他的参数:

  • addopts可以搭配相关的参数,比如-s。多个参数以空格分割,其他参数后续用到再说。

    • -s,在运行测试脚本时,为了调试或打印一些内容,我们会在代码中加一些print内容,但是在运行pytest时,这些内容不会显示出来。如果带上-s,就可以显示了。

    • -v,使输出结果更加详细。

  • testpaths配置测试用例的目录,

    • 因为我们用例可能分布在不同的目录或文件中,那么这个scripts就是我们所有文件或者目录的顶层目录。其内的子文件或者子目录都要以test_开头,pytest才能识别到。

    • 另外,上面这么写,是从一个总目录下寻找所有的符合条件的文件或者脚本,那么我们想要在这个总目录下执行其中某个具体的脚本文件怎么办?

[pytest]
testpaths = ./scripts/
python_files = test_case_01.py

<span><span><span><span><span><span><span><span><span><span><span> </span></span></span></span></span></span></span></span></span></span></span>

  • 这么写就是执行scripts目录下面的test_case_01.py这个文件。

  • python_classes则是说明脚本内的所有用例类名必须是以Test开头,当然,你也可以自定义为以test_开头,而类中的用例方法则当然是以test_开头。

  • python_functions则是说脚本内的所有用例函数以test_开头才能识别。

OK,来个示例。

首先,(详细目录参考开头的目录结构)在scripts/test_case_01.py中:

import pytest
def test_case01():
    print(‘执行用例01.......‘)
    assert 1  # 断言成功

def test_case02():
    print(‘执行用例02.......‘)
    assert 1  # 断言成功

class TestCaseClass(object):

    def test_case_03(self):
        assert 0  # 断言失败

scripts/test_case_dir1/test_case02.py中:

import pytest

def test_case_04():
    assert 1  # 断言成功
    
def test_case_05():
    assert 0  # 断言失败

那么,在不同的目录或者文件中,共有5个用例将被执行,而结果则是两个失败三个成功。来执行验证一下,因为有了配置文件,我们在终端中(前提是在项目的根目录),直接输入pytest即可。

M:\py_tests>pytest
======================================================= test session starts ========================================================
platform win32 -- Python 3.6.2, pytest-5.2.2, py-1.8.0, pluggy-0.13.0
rootdir: M:\py_tests, inifile: pytest.ini, testpaths: ./scripts
collected 5 items                                                                                                                   

scripts\test_case_01.py 执行用例01.......
.执行用例02.......
.F
scripts\test_case_dir1\test_case_02.py .F

============================================================= FAILURES 
____________________________________________________ TestCaseClass.test_case_03 

self = <test_case_01.TestCaseClass object at 0x03CAF4D0>

    def test_case_03(self):
>       assert 0
E       assert 0

scripts\test_case_01.py:22: AssertionError
___________________________________________________________ test_case_05 

    def test_case_05():
>       assert 0
E       assert 0

scripts\test_case_dir1\test_case_02.py:14: AssertionError
=================================================== 2 failed, 3 passed in 0.14s

由执行结果可以发现,2 failed, 3 passed,跟我们的预期一致。

后续执行相关配置都来自配置文件,如果更改,会有相应说明,终端都是直接使用pytest执行。

进阶

跳过用例

import pytest
#无条件跳过
@pytest.mark.skip()
def test_case_01():
    assert 1
#有条件跳过,两个参数必须加上
@pytest.mark.skipif(condition=1 < 2, reason=‘如果条件为true就跳过用例‘)
def test_case_02():
    assert 1

跳过用例,我们使用@pytest.mark.skipif(condition, reason)

  • condition表示跳过用例的条件。

  • reason表示跳过用例的原因。

然后将它装饰在需要被跳过用例的的函数上面。

效果如下:

M:\py_tests>pytest                                                                                                                   

scripts/test_allure_case.py::test_case_01 SKIPPED
scripts/test_allure_case.py::test_case_02 SKIPPED

=========================================================== 2 skipped in 0.14s

上例执行结果相对详细,因为我们在配置文件中为addopts增加了-v,之前的示例结果中,没有加!

参数化

pytest身为强大的测试单元测试框架,那么同样支持DDT数据驱动测试的概念。也就是当对一个测试函数进行测试时,通常会给函数传递多组参数。比如测试账号登陆,我们需要模拟各种千奇百怪的账号密码。

当然,我们可以把这些参数写在测试函数内部进行遍历。不过虽然参数众多,但仍然是一个测试,当某组参数导致断言失败,测试也就终止了。

通过异常捕获,我们可以保证程所有参数完整执行,但要分析测试结果就需要做不少额外的工作。

在 pytest 中,我们有更好的解决方法,就是参数化测试,即每组参数都独立执行一次测试。使用的工具就是 pytest.mark.parametrize(argnames, argvalues)

  • argnames表示参数名。

  • argvalues表示列表形式的参数值。

使用就是以装饰器的形式使用。

只有一个参数的测试用例

import pytest

mobile_list = [‘10010‘, ‘10086‘]

@pytest.mark.parametrize(‘mobile‘, mobile_list)
def test_register(mobile):
    """ 通过手机号注册 """
    print(‘注册手机号是: {}‘.format(mobile))

来看(重要部分)结果::

M:\py_tests>pytest
scripts/test_case_01.py::test_register[10010] 注册手机号是: 10010
PASSED
scripts/test_case_01.py::test_register[10086] 注册手机号是: 10086
PASSED

====================================================== 2 passed in 0.11s

可以看到,列表内的每个手机号,都是一条测试用例。

 多个参数的测试用例

import pytest

mobile_list = [‘10010‘, ‘10086‘]
code_list = [‘x2zx‘, ‘we2a‘]

@pytest.mark.parametrize(‘mobile‘, mobile_list)
@pytest.mark.parametrize(‘code‘, code_list)
def test_register(mobile, code):
    """ 通过手机号注册 """
    print(‘注册手机号是: {} 验证码是: {}‘.format(mobile, code))

(重要部分)结果:

M:\py_tests>pytest                            

scripts/test_case_01.py::test_register[x2zx-10010] 注册手机号是: 10010 验证码是: x2zx
PASSED
scripts/test_case_01.py::test_register[x2zx-10086] 注册手机号是: 10086 验证码是: x2zx
PASSED
scripts/test_case_01.py::test_register[we2a-10010] 注册手机号是: 10010 验证码是: we2a
PASSED
scripts/test_case_01.py::test_register[we2a-10086] 注册手机号是: 10086 验证码是: we2a
PASSED

====================================================== 4 passed in 0.17s

可以看到,每一个手机号与每一个验证码都组合一起执行了,这样就执行了4次。那么如果有很多个组合的话,用例数将会更多。我们希望手机号与验证码一一对应组合,也就是只执行两次,怎么搞呢?

import pytest

mobile_list = [‘10010‘, ‘10086‘]
code_list = [‘x2zx‘, ‘we2a‘]

@pytest.mark.parametrize(‘mobile,code‘, zip(mobile_list, code_list))
def test_register(mobile, code):
    """ 通过手机号注册 """
    print(‘注册手机号是: {} 验证码是: {}‘.format(mobile, code))

在多参数情况下,多个参数名是以,分割的字符串。参数值是列表嵌套的形式组成的

M:\py_tests>pytest                   

scripts/test_case_01.py::test_register[10010-x2zx] 注册手机号是: 10010 验证码是: x2zx
PASSED
scripts/test_case_01.py::test_register[10086-we2a] 注册手机号是: 10086 验证码是: we2a
PASSED

====================================================== 2 passed in 0.44s

pytest测试报告插件

想要生成测试报告,首先要有下载,才能使用。

pip install pytest-html

使用

在配置文件中,添加参数:

[pytest]
addopts = -s --html=report/report.html

完事之后,让我们继续终端中使用pytest重新跑测试用例,用例结果就不展示了,跟上面的结果一样,我们关注项目目录下的report/report.html文件,我们用浏览器打开它,你会发现:

图片后补

效果很不错吧!

没完,看我大招 ↓

未完待续。。。可参考老师博客https://www.cnblogs.com/Neeo/articles/11832655.html

相关推荐