news 2026/6/21 19:37:20

Pytest自动化测试框架pytest-xdist分布式测试插件

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
Pytest自动化测试框架pytest-xdist分布式测试插件

🍅点击文末小卡片,免费获取软件测试全套资料,资料在手,涨薪更快

平常我们功能测试用例非常多时,比如有1千条用例,假设每个用例执行需要1分钟,如果单个测试人员执行需要1000分钟才能跑完;

当项目非常紧急时,会需要协调多个测试资源来把任务分成两部分,于是执行时间缩短一半,如果有10个小伙伴,那么执行时间就会变成十分之一,大大节省了测试时间;

为了节省项目测试时间,10个测试同时并行测试,这就是一种分布式场景;
同样道理,当我们自动化测试用例非常多的时候, 一条条按顺序执行会非常慢,pytest-xdist的出现就是为了让自动化测试用例可以分布式执行,从而节省自动化测试时间;
pytest-xdist是属于进程级别的并发;

分布式执行用例的设计原则(重点)

用例之间是独立的,用例之间没有依赖关系,用例可以完全独立运行【独立运行】
用例执行没有顺序,随机顺序都能正常执行【随机执行】
每个用例都能重复运行,运行结果不会影响其他用例【不影响其他用例】

插件安装

pip3 install pytest-xdist -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com

pytest-xdist通过一些独特的测试执行模式扩展了pytest

测试运行并行化:如果有多个CPU或主机,则可以将它们用于组合的测试运行。 这样可以加快开发速度或使用远程计算机的特殊资源。

–looponfail:在子进程中重复运行测试。 每次运行之后,pytest都会等到项目中的文件更改后再运行之前失败的测试。 重复此过程,直到所有测试通过,然后再次执行完整运行。

跨平台覆盖:您可以指定不同的Python解释程序或不同的平台,并在所有这些平台上并行运行测试。

快速入门通关

代码的包结构

14xdist是项目文件夹名称 │ conftest.py │ test_1.py │ __init__.py │ ├─test_51job │ │ conftest.py │ │ test_case1.py │ │ __init__.py │ ├─test_toutiao │ │ test_case2.py │ ├─test_weibo │ │ conftest.py │ │ test_case3.py │ │ __init__.py │

具体代码

最外层的conftest.py

# 外层conftest.py @pytest.fixture(scope="session") def login(): print("====登录功能,返回账号,token===") name = "testyy" token = "npoi213bn4" yield name, token print("====退出登录!!!====")**strong text**

最外层的test_1.py

import pytest @pytest.mark.parametrize("n", list(range(5))) def test_get_info(login, n): sleep(1) name, token = login print("***基础用例:获取用户个人信息***", n) print(f"用户名:{name}, token:{token}")

不使用分布式测试的命令和所需执行时间

pytest -s

可以看到,执行一条用例大概1s(因为每个用例都加了 sleep(1) ),一共30条用例,总共运行30s;那么如果有1000条用例,执行时间就真的是1000s

使用分布式测试的命令和所需执行时间

pytest -s -n auto

可以看到,最终运行时间只需要6s,我的电脑是真6核,假12核;
-n auto:可以自动检测到系统的CPU核数;从测试结果来看,检测到的是逻辑处理器的数量,即假12核;
使用auto等于利用了所有CPU来跑用例,此时CPU占用率会特别高;

可以指定需要多少个CPU来跑用例

pytest -s -n 2

pytest-xdist是可以和pytest-html很好的相结合

pytest -s -n auto --html=report.html --self-contained-html

pytest-xdist按照一定的顺序执行
pytest-xdist默认是无序执行的,可以通过 --dist 参数来控制顺序

--dist=loadscope

将按照同一个模块module下的函数和同一个测试类class下的方法来分组,然后将每个测试组发给可以执行的worker,确保同一个组的测试用例在同一个进程中执行;
目前无法自定义分组,按类class分组优先于按模块module分组

--dist=loadfile

按照同一个文件名来分组,然后将每个测试组发给可以执行的worker,确保同一个组的测试用例在同一个进程中执行

如何让scope=session的fixture在test session中仅仅执行一次

pytest-xdist是让每个worker进程执行属于自己的测试用例集下的所有测试用例

这意味着在不同进程中,不同的测试用例可能会调用同一个scope范围级别较高(例如session)的fixture,该fixture则会被执行多次,这不符合scope=session的预期

解决方案

虽然pytest-xdist没有内置的支持来确保会话范围的夹具仅执行一次,但是可以通过使用锁定文件进行进程间通信来实现。

例子:

下面的示例只需要执行一次login(因为它是只需要执行一次来定义配置选项,等等);
当第一次请求这个fixture时,则会利用FileLock仅产生一次fixture数据;
当其他进程再次请求这个fixture时,则会从文件中读取数据;

import pytest from filelock import FileLock @pytest.fixture(scope="session") def login(): print("====登录功能,返回账号,token===") with FileLock("session.lock"): name = "testyy" token = "npoi213bn4" # web ui自动化 # 声明一个driver,再返回 # 接口自动化 # 发起一个登录请求,将token返回都可以这样写 yield name, token print("====退出登录!!!====")

最后感谢每一个认真阅读我文章的人,礼尚往来总是要有的,虽然不是什么很值钱的东西,如果你用得到的话可以直接拿走:

这些资料,对于做【软件测试】的朋友来说应该是最全面最完整的备战仓库,这个仓库也陪伴我走过了最艰难的路程,希望也能帮助到你!凡事要趁早,特别是技术行业,一定要提升技术功底。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/15 7:50:28

收藏!字节实习生日薪暴涨150%,普通人抓住AI大模型风口更靠谱

近期打工人的朋友圈,被字节跳动实习生全面涨薪的消息彻底刷屏了!不管是学生党还是职场人,都被这波薪资福利狠狠吸引,尤其是咱们程序员和想入行技术领域的小白,更该从这波热度里看到行业关键信号。 据知情人士透露&…

作者头像 李华
网站建设 2026/6/15 9:15:38

领导最反感的5件事,千万别做

德鲁克曾说过:“管理的本质,不在于知,而在于行。”但在现实职场中,很多人的“行”往往跑偏了方向,不是能力不够,而是不懂得权力真谛和人性的复杂。K哥在职场20多年,从被别人管到管理几百人的团队…

作者头像 李华
网站建设 2026/6/13 6:12:11

必收藏!从行业兴衰看风口:AI大模型岗位带你弯道超车

刷到一位网友的真实分享:身边好友入手了一套单价9万的房产,如今房价直接下跌30%,每月还要背负3.5万的房贷,算下来每天一睁眼,就相当于凭空亏损1000元,压力大到喘不过气。 评论区里满是唏嘘与共鸣&#xff0…

作者头像 李华
网站建设 2026/6/15 18:03:13

软件测试之界面测试

当一款软件呈现在用户眼前时,首先映入眼帘的是软件的界面。 如果界面乱作一团,用户操作起来不方便,那么即使功能再强大,用户也很可能在尝试一次后就抛弃,由此可见,对于软件而言,界面很重要。 …

作者头像 李华
网站建设 2026/6/13 4:02:08

7大AI辅助论文写作工具,配合LaTeX模板实现专业排版

工具快速对比(7大AI论文工具TOP排名) 这7款工具覆盖论文写作全流程,各有亮点: Aibiye:智能成文与无限改稿,适合初稿优化(��)。 Aicheck:一键生…

作者头像 李华
网站建设 2026/6/13 20:01:44

7个最佳AI论文创作工具,LaTeX模板让格式调整更简单

工具快速对比(7大AI论文工具TOP排名) 这7款工具覆盖论文写作全流程,各有亮点: Aibiye:智能成文与无限改稿,适合初稿优化(��)。 Aicheck:一键生…

作者头像 李华