百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

UI自动化 --- 微软UI Automation(ui自动化用什么工具)

ccwgpt 2024-10-10 04:42 28 浏览 0 评论

引言

自动化测试平台的意义就三个字 --- 稳定性。

无论是接口自动化测试,还是UI自动化测试,目的就是为了提高产品的稳定性,保证用户体验。

那常见的接口自动化测试比如有 PostmanSoapUIJMeter 等等。这一类网上的资料就太多太多了。本篇内容主要想讨论的是UI自动化测试,我搜集了一下常见的UI自动化测试平台:

  • 「Selenium」:Selenium是开源且免费的,使用非常广泛的Web应用程序自动化测试框架,它既支持多种语言的脚本驱动测试,也支持记录与回放的方式测试。
  • 「Appium」:Appium是一个开源免费的移动应用程序自动化测试框架,也支持多种语言的脚本驱动测试。
  • 「Katalon Studio」:Katalon Studio是一款免费的UI自动化测试工具,适用于Web、移动和API测试。它基于Selenium和Appium,并提供了图形化界面和内置的测试功能。
  • 「TestComplete」:TestComplete是一款功能强大的商业UI自动化测试工具,适用于Web、桌面和移动应用程序。它提供了多种脚本语言和图形化界面,以及灵活的对象识别和回放功能。
  • 「Ranorex」: Ranorex是一款商业UI自动化测试工具,适用于Web、桌面和移动应用程序。它提供了易于使用的录制和回放功能,支持多种编程语言。

从上面的数据中其实不难发现,对于桌面应用的UI自动化测试,上述框架或工具要么免费但是仅支持Web应用,要么就是商业化工具,一言难尽啊。

所以这就提到了我们的主题了 --- UIAutomation。

UIAutomation 介绍

来看一下微软官方对此的介绍 UIAutomation:

Microsoft UI Automation是适用于Microsoft Windows的辅助功能框架。它满足了辅助技术产品和自动化测试框架的需求,通过提供对用户界面(UI)信息的编程访问来实现。此外,UI Automation还使控件和应用程序开发人员能够使其产品具有辅助功能。

里边提到了,使用编程访问可以通过代码模仿由传统鼠标和键盘输入展开的任何交互和体验,UIAutomation 通过五个组件实现编程访问:

  • UI Automation tree(UI自动化树)
  • UI Automation elements(UI自动化元素)
  • UI Automation properties(UI自动化属性)
  • Control patterns(控件模式)
  • UI Automation events(UI自动化事件)

如下图所示:

最后列出了测试应用程序中实现UI自动化的步骤:

辅助工具介绍

步骤中提到了一个工具 --- 「Inspect.exe」 ,该工具是一个图形用户界面 (GUI) 应用程序,可用于收集用于提供程序和客户端开发和调试的 UI 自动化信息,它包含在 Windows SDK 中。

所以要使用「Inspect.exe」去查询控件的 AutomationIdProperty,必须安装Windows SDK。

然后可以直接使用Everything直接搜索 Inspect.exe ,可以看到 SDK 安装目录下,分别有x64,x86,arm64,arm四个,我们一般选择 x64 就可以。

然后使用该工具可以找到目标应用的控件,并根据AutomationProperties 进行编码模拟点击。

小试牛刀

接下来编写代码测试一下:

  1. 创建目标程序,一个WPF程序,放置一个TextBox输入框,命名为 textbox1,再放置一个按钮,命名为 button1,button1点击后弹窗提示“UIAutomation按钮测试”。
  2. 接下来创建测试程序,创建一个控制台程序,使用 UIAutomation API 执行在点击button1textbox1文本框输入"UIAutomation按钮测试"后缀时间。
  3. 使用「Inspect.exe」找到目标程序的的进程ID和控件的AutomationID。输入到测试程序中,看执行结果。

测试控制台程序代码如下:

using System;
using System.Diagnostics;
using System.Windows.Automation;

public class ProcessButtonClickAutomation
{
public static void Main()
{
Console.WriteLine("请输入目标进程ID:");
var targetProcessId = Console.ReadLine();
Console.WriteLine("请输入目标控件AutomationId:");
var automationId = Console.ReadLine();

// 根据进程ID查找进程
Process targetProcess = FindProcessById(int.Parse(targetProcessId));

if (targetProcess != )
{
// 查找进程的主窗口句柄
IntPtr mainWindowHandle = targetProcess.MainWindowHandle;

if (mainWindowHandle != IntPtr.Zero)
{
// 使用主窗口句柄获取AutomationElement
AutomationElement mainWindowElement = AutomationElement.FromHandle(mainWindowHandle);

// 查找按钮元素,根据需要修改按钮查找条件
PropertyCondition condition = new PropertyCondition(AutomationElement.AutomationIdProperty, automationId);
AutomationElement buttonElement = mainWindowElement.FindFirst(TreeScope.Descendants, condition);

if (buttonElement != )
{
// 获取按钮元素的InvokePattern
InvokePattern invokePattern = buttonElement.GetCurrentPattern(InvokePattern.Pattern) as InvokePattern;

if (invokePattern != )
{
// 模拟按钮点击操作
invokePattern.Invoke();
Console.WriteLine("按钮已被点击 " + DateTime.Now);
}
else
{
Console.WriteLine("按钮不可用");
}
}
else
{
Console.WriteLine("找不到按钮元素");
}
}
else
{
Console.WriteLine("找不到进程的主窗口");
}
}
else
{
Console.WriteLine("找不到指定的进程");
}
Console.WriteLine("执行完成~");

Console.ReadLine();
}

// 根据进程ID查找进程
public static Process FindProcessById(int processId)
{
try
{
Process process = Process.GetProcessById(processId);
return process;
}
catch (ArgumentException)
{
return ;
}
}
}

使用「Inspect.exe」可以看到目标WPF程序的 ProcessID = 24984 ,按钮控件的 AutomationId = button1

在控制台输入 ProcessIDAutomationId 可以看到结果测试程序执行结束后,目标WPF程序的文本框同时刷新。

写在结尾

UI Automation说是框架,我觉得更像是一组API,只是提供了你能够做自动化测试的基本能力,如果想要搭建一个桌面应用的UI自动化测试平台,那需要做的还有很多。比如你需要实现脚本支持,需要实现执行报告和日志,需要实现数据驱动测试,甚至需要支持持续集成和持续交付(CI/CD)流程中自动执行UI自动化测试。

现在我想搭建一个基于 UI Automation 的桌面应用的UI自动化测试平台,现在只是有一个大体思路:

  • UI Automation 提供桌面应用自动化测试的基本能力。
  • Roslyn 编译器平台提供脚本支持。
  • 执行报告和日志在封装UI Automation API的过程中,就可以添加进去了
  • 数据驱动测试就可以在脚本中完成。
  • 最后一点,持续集成和持续交付可以交给Jenkins

还是文章开头说到的,于桌面应用的UI自动化测试,现有框架或工具要么免费但是仅支持Web应用,要么就是商业化工具,所以想自己整一个,想法和方案都有了,至于可以做成什么样,那就拭目以待吧。

不了解 Roslyn 编译器平台的,可以看我之前的两篇文章

  • .Net 编译器平台 --- Roslyn(https://niuery.com/post/67)
  • .Net 编译器平台--- Roslyn Scripting APIs(https://niuery.com/post/68)
?

参考链接

Using UI Automation for Automated Testing:

https://learn.microsoft.com/en-us/dotnet/framework/ui-automation/using-ui-automation-for-automated-testing

?

相关推荐

React 开发翻车现场!这 6 个救命技巧,90% 工程师居然现在才知道

前端圈最近都在卷React18新特性,可咱开发时踩的坑却一个比一个离谱!组件卡死、状态乱套、路由错乱...别担心!今天分享6个超实用的React实战技巧,让你轻松拿捏开发难题,代码直接...

Web前端:React JS越来越受欢迎,它的主要优点为什么要使用它?

  ReactJS是一个开源JavaScript库,用于为单页应用程序构建用户界面,它还为不同的移动应用程序提供视图层,并创建可重用的UI组件。  我们可以在Web应用程序的数据中创建特定的更改,而...

性能焦虑!前端人必看!5 个 React 组件优化神技! 颠覆你的认知!

在前端开发的赛道上,性能优化就像一场永不停歇的马拉松。作为前端工程师,你是否常常为React组件的性能问题头疼不已?页面加载缓慢、组件频繁重渲染,这些痛点分分钟让开发进度受阻。别担心!今天就来分享...

React 实战必学!99% 工程师踩过的 5 大坑,3 招教你轻松破解

前端开发的小伙伴们,咱就是说,React现在可是前端界的“顶流明星”,热度一直居高不下!但用它开发项目的时候,是不是总有那么些瞬间,让你怀疑人生,对着屏幕疯狂抓头发?别慌!今天就给大家分享几个超实...

惬意!午间一道 React 题,轻松拿捏前端面试小技巧

忙碌了一上午,眼睛酸涩、脑子发懵?别急着刷短视频“放空”,不如花几分钟和我一起“品尝”一道React面试题小甜点!就像在阳光洒满窗台的午后,泡一杯热茶,惬意又能悄悄涨知识,何乐而不为?最近,...

一起深入盘点 2025 年 React 发展的 10个趋势?

大家好,很高兴又见面了,我是"高级前端进阶",由我带着大家一起关注前端前沿、深入前端底层技术,大家一起进步,也欢迎大家关注、点赞、收藏、转发!1.React服务器组件React服务...

前端掉坑血泪史!4 个 React 性能优化绝招让页面秒开

在前端圈子里摸爬滚打这么多年,我发现React开发时踩坑的经历大家都大同小异。页面加载慢、组件频繁重渲染、状态管理混乱……这些痛点,相信不少前端工程师都感同身受。别愁!今天就给大家分享4个超...

前端人崩溃瞬间!5 招 React 实战技巧让项目起死回生

有没有在写React项目时,遇到页面卡顿到怀疑人生、数据更新不及时、代码逻辑混乱到无从下手的情况?别慌!作为摸爬滚打多年的前端老炮,今天就把5个救命级的React实战技巧倾囊相授,帮你轻松...

8.3K star!React Bits,让你拥有全网几乎所有动画效果

前端开源项目101专栏:一个能让你更快接触到高质量开源项目的地方。我会探索分享精选101个高质量的开源项目。这是系列的第7篇文章,分享一套拥有计划全网所有动画效果,且创意最丰富的动画React组...

开始学习React - 概览和演示教程

#头条创作挑战赛#本文同步本人掘金平台的原创翻译:https://juejin.cn/post/6844903823085944846当我刚开始学习JavaScript的时候,我就听说了React,但...

阿里AI工具Web Dev上线!一句话生成React网页

5月11日,阿里巴巴推出全新AI工具“WebDev”,支持用户通过一句话指令生成网页应用。该工具集成HTML、CSS、JavaScript三大前端核心技术,并统一采用React框架实现,可在数秒内创...

JS流行框架/库排名Top100,看看你熟知的Js排第几

权威的JavaScript趋势榜stats.js.org每15分钟根据github上的stars和forks总数实时汇总出JavaScript开源项目的流行度排名,一起来看看你所熟知的项目排名第几...

新手如何搭建个人网站

ElementUl是饿了么前端团队推出的桌面端UI框架,具有是简洁、直观、强悍和低学习成本等优势,非常适合初学者使用。因此,本次项目使用ElementUI框架来完成个人博客的主体开发,欢迎大家讨论...

站在巨人肩膀上的 .NET 通用权限开发框架:Admin.NET

站在巨人肩膀上的.NET通用权限开发框架Admin.NET是一个面向.NET程序员的低代码平台,java平台类似的框架有ruoyi,芋道,JeelowCode等。这类框架普遍采用前后端分离的开发技...

Python+selenium自动化之判定元素是否存在

在测试过程中,我碰到过这类的问题,使用find_element却找不到某个元素而产生异常,这就需要在操作某个元素之前判定该元素是否存在,而selenium中没有判定元素是否存在的方法,或者判定相同的元...

取消回复欢迎 发表评论: