六、数据驱动
数据驱动就是数据的改变从而驱动自动化测试的执行,最终引起测试结果的改变。简单来说,就是参数化的应用。数据量小的测试用例可以使用代码的参数化来实现数据驱动,数据量大的情况下建议大家使用一种结构化的文件(例如yaml,json等)来对数据进行存储,然后在测试用例中读取这些数据。
应用场景
- App、Web、接口自动化测试
- 测试步骤的数据驱动
- 测试数据的数据驱动配置的数据驱动
实例:
代码语言:javascript复制env.yml
-
test:127.0.0.1
testdemo.py
class TestDemo:
@pytest.mark.parametrize( "env", yaml.safe_load(open("./env.yml")))
def test_demo ( self, env ) :
if "test" in env:
print("这是测试环境")
print("测试环境的ip是: " ,env ["test"])
elif "dev" in env:
print("这是开发环境")
print("开发环境的ip是",env [ "dev"])
def test_yaml( self):
print(yaml.safe_load(open( " ./env .yml")))
七、测试报告定制
Allure测试框架
- allure是一个轻量级,灵活的,支持多语言的测试报告工具;多平台的,奢华的report框架;
- 可以为dev/ qa提供详尽的的测试报告、测试步骤、log;
- 也可以为管理理层提供high level统计报告;
- Java语言开发的,支持pytest,JaveScript, PHP, ruby 等可以集成到Jenkins
Allure报告预览
Allure安装
windows / mac通用安装方法
https://github.com/allure-framework/allure2/releases下载allure2.7.zip包
解压->进入bin目录->运行allure.bat,
把bin目录加入PATH环境变量
Mac可以使用brew安装:
brew install allure
官网:http:// allure.qatools.ru/
文档: https:// docs.qameta.io/allure/#
使用Allure2生成漂亮的报告
安装allure.pytest插件
pip install allurepytest
运行:
在测试执行期间收集结果
pytest[测试文件]-s-q --alluredir=./result/ (—alluredir这个选项用于指定存储测试结果的路径)。
查看测试报告
方式一:
测试完成后查看实际报告,在线看报告,会直接打开默认浏览器展示当前报告
allure serve ./result/(注意这里的serve书写)
方式二:
从结果生成报告,这是一个启动tomcat的服务,需要两个步骤:生成报告,打开报告
生成报告
allure generate ./result/ -o ./report/ --clean (注意:覆盖路径加--clean )
打开报告:
allure open -h 127.0.0.1 -p 8883 . /report/
Allur常用特性
场景:
希望在报告中看到测试功能,子功能或场景,测试步骤,包括测试附加信息解决:
@Feature,@story,@step,@attach
步骤:
- import allure
- 功能上加@allure.feature('功能名称')
- 子功能上加@allure.story('子功能名称')
- 步骤上加@allure.step('步骤细节')
- @allure.attach(具体文本信息'),需要附加的信息,可以是数据,文本,图片,视频,网页
- 如果只测试登录功能运行的时候可以加限制过滤:
pytest文件名—allure-features '购物车功能' —allure-stories '加入购物车'(注意这里--allure_features中间是下划线)
Allure特性之feature/story
注解@allure.feature 与@allure.store的关系
- feature相当于一个功能,一个大的模块,将case分类到某个feature中,报告中behaviore中显示,相当于testsuite
- story相当于对应这个功能或者模块下的不同场景,分支功能,属于feature之下的结构,报告在features中显示,相当于testcase
- feature与story类似于父子关系
Allure特性之step
测试过程中每个步骤,一般放在具体逻辑方法中
可以放在关键步骤中,在报告中显示
在app, web自动测试当中,建议每切换到一个新的页面当做一个step
用法:
@allure.step()只能以装饰器的形式放在类或者方法上面
with allure.step():可以放在测试用例方法里面,但测试步骤的代码需要被该语句包含
Allure特性之issue/testcase
关联测试用例(可以直接给测试用例的地址链接)
关联bug
执行的时候需要加个参数
--allure-link-pattern=issue:http://www.mytesttracker.com/issue {}
按重要级别进行一定范围的测试
场景
通常测试有PO、冒烟测试、验证上线测试。按重要性级别来分别执行的,比如上线要把主流程和重要模块都跑一遍
解决:
通过附加py.test.mark标记,
通过allure.feature, allure.story
也可以通过allure.severity来附加标记
级别:Trivial:不重要,Minor不太重要,Normal:正常问题,Critical:严重,Blocker:阻塞
步骤:
在方法,函数和类上面加
@allure.severity(allure.severity _level.TRIVIAL)
执行时
pytest -s -V文件名--allure-severities normal,critical