百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

UI 自动化分布式测试 -Docker Selenium Grid

ccwgpt 2024-10-10 04:43 55 浏览 0 评论


Docker 和 Selenium Grid 的结合为分布式 UI 自动化测试提供了一种高效、可扩展且易于管理的方法。通过使用 Docker 容器化技术,测试环境的设置和配置变得更加简便和一致;而 Selenium Grid 则允许在多个节点上并行运行分布式测试,从而大大提升测试的速度和覆盖范围。


分布式测试Selenium Grid

对于大型项目或者有大量测试用例的项目,单机的测试环境往往无法快速完成所有测试用例的执行,此时自动化测试执行效率将会成为最大的瓶颈,Selenium Grid 可以通过多机的分布式架构允许测试用例并行运行,大大缩短了测试时间。

Selenium Grid 提供了多种运行模式,满足不同的测试需求和使用场景。包括Standalone模式、Selenium Grid模式。这些模式的选择取决于测试的规模、复杂度和并行执行的需求。


  • Standalone模式:适用于简单的单机测试场景,Selenium Grid所有节点都是在同一个进程中执行。这种模式设置简单,只适合进行小规模测试。


  • Hub and Nodes模式:通过Hub和多个Node实现并行执行,适合大规模测试场景,能够有效提高测试效率。企业级应用中一般我们会采取该模式,在此模式下有不同的部署方式:


    • 传统部署:Hub和Node节点分别运行在不同物理机/虚拟机上,这种方式需要手动安装对应主机的各种依赖环境(比如JDK、浏览器、浏览器驱动等)


    • Docker容器部署:Hub和Node节点分别运行在不同主机的docker容器中,通过Docker-Selenium开源项目所提供的Hub和Node节点镜像可以快速启动对应的节点,而不需要配置任何的环境。


    • 与Kubernetes集成:在更大规模和复杂的环境中,可以使用K8S来动态扩展和管理Selenium Grid。Kubernetes提供了更强大的调度和扩展能力,适合企业级应用。


Docker-Selenium介绍

Docker-Selenium 是一种将 Selenium Grid 与 Docker 容器技术结合的解决方案,能够简化 Selenium Grid 的部署和管理。通过使用 Docker 容器,用户可以快速创建和销毁 Selenium Grid 环境,而不需要手动配置每个节点,极大地提高了测试环境的可移植性和可扩展性

项目地址:https://github.com/SeleniumHQ/docker-selenium/


具备的优势:


  1. 简化部署:使用 Docker,可以在几分钟内启动完整的 Selenium Grid 环境,而不需要复杂的安装和配置过程。


  2. 环境隔离:每个 Docker 容器都运行在独立的环境中,确保测试之间互不干扰。


  3. 可移植性:Docker 镜像可以在任何支持 Docker 的平台上运行,使得测试环境具有高度的一致性和可移植性。


  4. 扩展性:通过 Docker Compose 等工具,可以轻松扩展或缩减节点数量,以满足测试需求。


启动hub节点

docker run -d -p 4442-4444:4442-4444 --name selenium-hub selenium/hub:latest


参数-p 4442-4444:4442-4444 分别映射主机到容器内部端口(4442、4442、4444)


  • 4442端口是Selenium Grid 事件总线发布事件的端口(必须开放出来)


  • 4443端口是Selenium Grid 组件订阅事件的端口(必须开放出来)


  • 4444端口是Selenium Grid 控制台访问端口


输入对应地址即可访问Selenium Grid控制台 http:<你的hub节点主机IP地址>:4444



此时控制台并没有什么信息,是因为我们的node节点还没有启动注册到hub节点


启动node节点


启动node1节点 - chrome浏览器环境

参数解释:


  • -p 5900:5900 5900端口是容器VNC服务的访问端口,使用VNC服务可以连接到容器内部观察容器的运行情况

  • -p 5555:5555 5555端口负责hub与node节点之间的注册和通讯

--shm-size:设置容器的共享内存大小


--shm-size="2g"参数的必要性:

This is a known workaround to avoid the browser crashing inside a docker container, here are the documented issues for Chrome and Firefox. The shm size of 2gb is arbitrary but known to work well, your specific use case might need a different value, it is recommended to tune this value according to your needs.


  • SE_EVENT_BUS_HOST:hub节点的IP地址

  • SE_EVENT_BUS_PUBLISH_PORT:hub节点的事件总线发布事件的端口,与前面hub节点配置对应

  • SE_EVENT_BUS_SUBSCRIBE_PORT:hub节点的组件订阅事件的端口,与前面hub节点配置对应

  • SE_NODE_HOST:当前node节点的IP地址

  • SE_NODE_MAX_SESSIONS:node节点支持的最大会话数,该配置在并发测试时十分关键,比如值为3时代表支持最大并发测试数为3

  • SE_NODE_OVERRIDE_MAX_SESSIONS:当设置上述的SE_NODE_MAX_SESSIONS参数时,该参数也需要一并指定

  • SE_VNC_NO_PASSWORD:设置VNC访问时不需要密码,这样调试更加方便


启动node2节点 - firefox浏览器环境


启动node3节点 - edge浏览器环境


再进入到hub控制台 http:<你的hub节点主机IP地址>:4444即可看到node节点的情况:



VNC查看node节点容器


docker-selenium项目使用了x11vnc作为VNC服务,用户能够通过VNC客户端工具VNC Viewer查看容器内部的情况


VNC Viewer下载地址:https://www.realvnc.com/en/connect/download/viewer/


VNC服务在容器内部监听5900端口,之前启动node节点时有将node节点容器的5900端口映射到主机5900端口,我们使用<node节点IP地址:5900端口>连接即可




至此我们的Selenium Grid分布式的环境就准备好了,接下来我们需要调自动化脚本执行并发测试


python并行执行测试

为了并行执行测试,python需要使用多进程/多线程技术实现同时执行多个脚本,向selenium Grid的hub节点发送请求,hub节点会根据接收到的请求分发给指定的node节点执行,这里我们可以使用python的pytest-xdist库来实现并发执行测试

pytest-xdist是 pytest 测试框架插件,用于使得测试并行执行,能显著提高测试执行的速度。可以通过多核或多CPU以及多台机器来加速测试过程。

安装pytest-xdist:

示例python代码remote_webdriver.py如下:

在控制台中执行命令:

pytest-xdist只需要指定-n参数即可设置并发数,-s、-v参数可以让控制台日志更加详细

控制台输出如下:

  • 控制台日志中显示3 workers [3 items] 其中3 workers代表pytest-xdist派生出了三个工作进程,3 items代表pytest收集到了三条用例

  • scheduling tests via LoadScheduling代表将会按照负载均衡分配测试用例执行

通过VNC可以看到node节点中同时打开了三个chrome浏览器(其中一个浏览器的页面被遮挡住了)



Java并行执行测试


如果采用的是Java语言,可以使用TestNG测试框架的parallel机制,通过配置xml文件即可非常简单的实现并行测试


拉取指定浏览器版本node节点


有些时候我们不需要使用最新版本的浏览器容器环境,想要指定对应版本的浏览器


我们可以查询docker仓库镜像的tag


https://hub.docker.com/r/selenium/node-chrome/tags


docker pull selenium/node-chrome:120.0-chromedriver-120.0-20240123


  • node-chrome:120.0代表浏览器版本号

  • chromedriver-120.0代表内置chromedriver版本号

  • 20240123代表发布日期

相关推荐

滨州维修服务部“一区一策”强服务

今年以来,胜利油田地面工程维修中心滨州维修服务部探索实施“一区一策”服务模式,持续拓展新技术应用场景,以优质的服务、先进的技术,助力解决管理区各类维修难题。服务部坚持问题导向,常态化对服务范围内的13...

谷歌A2A协议和MCP协议有什么区别?A2A和MCP的差异是什么?

在人工智能的快速发展中,如何实现AI模型与外部系统的高效协作成为关键问题。谷歌主导的A2A协议(Agent-to-AgentProtocol)和Anthropic公司提出的MCP协议(ModelC...

谷歌大脑用架构搜索发现更好的特征金字塔结构,超越Mask-RCNN等

【新智元导读】谷歌大脑的研究人员发表最新成果,他们采用神经结构搜索发现了一种新的特征金字塔结构NAS-FPN,可实现比MaskR-CNN、FPN、SSD更快更好的目标检测。目前用于目标检测的最先...

一文彻底搞懂谷歌的Agent2Agent(A2A)协议

前段时间,相信大家都被谷歌发布的Agent2Agent开源协议刷屏了,简称A2A。谷歌官方也表示,A2A是在MCP之后的补充,也就是MCP可以强化大模型/Agent的能力,但每个大模型/Agent互为...

谷歌提出创新神经记忆架构,突破Transformer长上下文限制

让AI模型拥有人类的记忆能力一直是学界关注的重要课题。传统的深度学习模型虽然在许多任务上取得了显著成效,但在处理需要长期记忆的任务时往往力不从心。就像人类可以轻松记住数天前看过的文章重点,但目前的...

不懂设计?AI助力,人人都能成为UI设计师!

最近公司UI资源十分紧张,急需要通过AI来解决UI人员不足问题,我在网上发现了几款AI应用非常适合用来进行UI设计。以下是一些目前非常流行且功能强大的工具,它们能够提高UI设计效率,并帮助设计师创造出...

速来!手把手教你用AI完成UI界面设计

晨星技术说晨星技术小课堂第二季谭同学-联想晨星用户体验设计师-【晨星小课堂】讲师通过简单、清晰的语言描述就能够用几十秒自动生成一组可编辑的UI界面,AIGC对于UI设计师而言已经逐步发展成了帮助我们...

「分享」一端录制,多端使用的便捷 UI 自动化测试工具,开源

一、项目介绍Recorder是一款UI录制和回归测试工具,用于录制浏览器页面UI的操作。通过UIRecorder的录制功能,可以在自测的同时,完成测试过程的录制,生成JavaScr...

APP自动化测试系列之Appium介绍及运行原理

在面试APP自动化时,有的面试官可能会问Appium的运行原理,以下介绍Appium运行原理。Appium介绍Appium概念Appium是一个开源测试自动化框架,可用于原生,混合和移动Web应用程序...

【推荐】一个基于 SpringBoot 框架开发的 OA 办公自动化系统

如果您对源码&技术感兴趣,请点赞+收藏+转发+关注,大家的支持是我分享最大的动力!!!项目介绍oasys是一个基于springboot框架开发的OA办公自动化系统,旨在提高组织的日常运作和管理...

自动化实践之:从UI到接口,Playwright给你全包了!

作者:京东保险宋阳1背景在车险系统中,对接保司的数量众多。每当系统有新功能迭代后,基本上各个保司的报价流程都需要进行回归测试。由于保司数量多,回归测试的场景也会变得重复而繁琐,给测试团队带来了巨大的...

销帮帮CRM移动端UI自动化测试实践:Playwright的落地与应用

实施背景销帮帮自2015年成立以来,移动端UI自动化测试的落地举步维艰,移动端的UI自动化测试一直以来都未取得良好的落地。然而移动互联网时代,怎样落地移动端的UI自动化测试以快速稳定进行移动端的端到端...

编写自动化框架不知道该如何记录日志吗?3个方法打包呈现给你。

目录结构1.loguru介绍1.1什么是日志?程序运行过程中,难免会遇到各种报错。如果这种报错是在本地发现的,你还可以进行debug。但是如果程序已经上线了,你就不能使用debug方式了...

聊聊Python自动化脚本部署服务器全流程(详细)

来源:AirPython作者:星安果1.前言大家好,我是安果!日常编写的Python自动化程序,如果在本地运行稳定后,就可以考虑将它部署到服务器,结合定时任务完全解放双手但是,由于自动化程序与平...

「干货分享」推荐5个可以让你事半功倍的Python自动化脚本

作者:俊欣来源:关于数据分析与可视化相信大家都听说自动化流水线、自动化办公等专业术语,在尽量少的人工干预的情况下,机器就可以根据固定的程序指令来完成任务,大大提高了工作效率。今天小编来为大家介绍几个P...

取消回复欢迎 发表评论: