百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

python自动化框架学习-pyautogui(python常用自动化框架)

ccwgpt 2024-10-09 08:52 27 浏览 0 评论

一、适用平台:PC(windows和mac均可用)

二、下载安装:

推荐使用命令行下载(因为会自动安装依赖库):

pip install PyAutoGUI
1

该框架的依赖库还是蛮多的,第一次用的同学耐心等待所有依赖库下载完成

包下载:

https://pypi.org/project/PyAutoGUI/#files
1

如果直接在连接下载包的话,需要手动安装对应所需的依赖库,这个过程很烦,因为该库的依赖库还是蛮多的

三、必备调试工具/脚本

import pyautogui
import time
try:
    while True:
        x, y = pyautogui.position()    #获得鼠标所在位置
        print(x,y)     #打印当前鼠标所处位置
        time.sleep(1)
except KeyboardInterrupt:
    print('\nExit.')
123456789

脚本会每秒钟打印一次鼠标当前所在的位置信息。为了后续做自动化的时候使用。

特别注意:

Python移动鼠标、点击键盘非常快,调试过程中非常容易造成脚本失控的情况。该框架提供了一种特殊的停止脚本运行的方式:

当pyautogui.FAILSAFE = True时,如果把鼠标光标在屏幕左上角,PyAutoGUI函数就会产生pyautogui.FailSafeException异常。如果失控了,需要中断PyAutoGUI函数,就把鼠标光标在屏幕左上角。要禁用这个特性,就把FAILSAFE设置成False:

import pyautogui
# 紧急停止开关开启,鼠标快速移动到左上角即可停止
pyautogui.FAILSAFE = True
# 通过把pyautogui.PAUSE设置成float或int时间(秒),可以为所有的PyAutoGUI函数增加延迟
pyautogui.PAUSE = 2.5  
12345

四、常用函数介绍

1、鼠标相关函数

import pyautogui

width, height = pyautogui.size()  # 获得屏幕的分辨率
x, y = pyautogui.position()  # 获得鼠标所在坐标

pyautogui.moveTo(300, 300, duration=0.25)  # 移动鼠标(绝对坐标)
pyautogui.moveRel(100, 0, duration=0.25)   # 移动鼠标(相对位置),以当前鼠标位置为基准

# 模拟鼠标点击操作。
# clicks 点击次数,后面的 interval是间隔 ;
# x,y 默认为当前坐标,可以不填;
# button 默认点击左键,可选参数:‘left’, ‘middle’,  ‘right’
pyautogui.click(clicks=2, interval=0.25, x=0, y=0, button='left')   
# 点击等于封装了按下和弹起,如此可以模拟鼠标
# click = pyautogui.mouseDown + pyautogui.mouseUp  

# 鼠标按下
pyautogui.mouseDown(x=moveToX, y=moveToY, button='left')  
# 鼠标弹起
pyautogui.mouseUp(x=moveToX, y=moveToY, button='left')  

pyautogui.doubleClick()  # 鼠标双击,其实就是执行两次click()函数
pyautogui.rightClick()   # 右击
pyautogui.middleClick()  # 中击

pyautogui.dragTo()   # 拖拽,绝对坐标 参数等同于 moveTo
pyautogui.dragRel()  # 拖拽,相对坐标 参数等同于 moveRel

pyautogui.scroll(200)  # 滚轮,正值向上滚,负值向下滚
1234567891011121314151617181920212223242526272829

二、键盘操作:

import pyautogui

# 输入字符串,可选参数0.25为延时,可设置其他值
pyautogui.typewrite('Hello world!', 0.25)  
# 输出:XYab
pyautogui.typewrite(['enter', 'a', 'b', 'left', 'left', 'X', 'Y'], '0.25') 

pyautogui.KEYBOARD_KEYS # 按键名称列表

pyautogui.keyDown('f4') # 按下某个键, f4为例
pyautogui.keyUp('f4') # 松开某个键, f4为例
pyautogui.press('f4') # 一次完整的击键,前面两个函数的组合 , f4为例
pyautogui.hotkey('altleft', 'f4') #热键
12345678910111213

这里需要注意,键盘输入不支持直接输入中文。

解决方案:安装pyperclip用复制粘贴的方式解决

不同按键映射:


三、图片相关操作

import pyautogui

# 全屏截图
pyautogui.screenshot('foo.png') 
# 区域截图 左上角XY坐标值和宽度、高度传入截取
im = pyautogui.screenshot(region=(0, 0, 300 ,400)) 

# 获得某个坐标的像素,假设返回值是:(30, 132, 153)
im.getpixel((50, 200)) 
# 判断屏幕坐标的像素是不是等于某个值
pyautogui.pixelMatchesColor(50, 200, (30, 132, 153))  

# 找到 button 所在的位置。假设返回 (643, 745, 70, 29),如果不存在返回None  
pyautogui.locateOnScreen('button.png', grayscale=False) 
# 获得中心点,没找到会返回None
x, y = pyautogui.center((643, 745, 70, 29))  
# 等价于上面的前两步操作,直接获得截屏幕中心坐标
pyautogui.locateCenterOnScreen('pyautogui/looks.png') 

# 检测 0,0 点在不在屏幕上,如果在返回true,否则返回false
pyautogui.onScreen(0, 0)
123456789101112131415161718192021

如果上述图片识别的方式对您不使用,可以参考之前专门介绍图片识别的OpenCV库的方法:

浅谈游戏自动化策略(图片比对)

四、弹窗

# 显示一个简单的带文字和OK按钮的消息弹窗。用户点击后返回button的文字
pyautogui.alert(text='', title='', button='OK') 

# 显示一个简单的带文字、OK和Cancel按钮的消息弹窗,用户点击后返回被点击button的文字
pyautogui.confirm(text='', title='', buttons=['OK', 'Cancel']) 
# 支持自定义数字、文字的列表
pyautogui.confirm(text='', title='', buttons=range(10)) 

# 可以输入的消息弹窗,带OK和Cancel按钮。用户点击OK按钮返回输入的文字,点击Cancel按钮返回None
pyautogui.prompt(text='', title='' , default='') 

# 样式同prompt(),用于输入密码,消息用*表示
pyautogui.password(text='', title='', default='', mask='*')
12345678910111213

相关推荐

滨州维修服务部“一区一策”强服务

今年以来,胜利油田地面工程维修中心滨州维修服务部探索实施“一区一策”服务模式,持续拓展新技术应用场景,以优质的服务、先进的技术,助力解决管理区各类维修难题。服务部坚持问题导向,常态化对服务范围内的13...

谷歌A2A协议和MCP协议有什么区别?A2A和MCP的差异是什么?

在人工智能的快速发展中,如何实现AI模型与外部系统的高效协作成为关键问题。谷歌主导的A2A协议(Agent-to-AgentProtocol)和Anthropic公司提出的MCP协议(ModelC...

谷歌大脑用架构搜索发现更好的特征金字塔结构,超越Mask-RCNN等

【新智元导读】谷歌大脑的研究人员发表最新成果,他们采用神经结构搜索发现了一种新的特征金字塔结构NAS-FPN,可实现比MaskR-CNN、FPN、SSD更快更好的目标检测。目前用于目标检测的最先...

一文彻底搞懂谷歌的Agent2Agent(A2A)协议

前段时间,相信大家都被谷歌发布的Agent2Agent开源协议刷屏了,简称A2A。谷歌官方也表示,A2A是在MCP之后的补充,也就是MCP可以强化大模型/Agent的能力,但每个大模型/Agent互为...

谷歌提出创新神经记忆架构,突破Transformer长上下文限制

让AI模型拥有人类的记忆能力一直是学界关注的重要课题。传统的深度学习模型虽然在许多任务上取得了显著成效,但在处理需要长期记忆的任务时往往力不从心。就像人类可以轻松记住数天前看过的文章重点,但目前的...

不懂设计?AI助力,人人都能成为UI设计师!

最近公司UI资源十分紧张,急需要通过AI来解决UI人员不足问题,我在网上发现了几款AI应用非常适合用来进行UI设计。以下是一些目前非常流行且功能强大的工具,它们能够提高UI设计效率,并帮助设计师创造出...

速来!手把手教你用AI完成UI界面设计

晨星技术说晨星技术小课堂第二季谭同学-联想晨星用户体验设计师-【晨星小课堂】讲师通过简单、清晰的语言描述就能够用几十秒自动生成一组可编辑的UI界面,AIGC对于UI设计师而言已经逐步发展成了帮助我们...

「分享」一端录制,多端使用的便捷 UI 自动化测试工具,开源

一、项目介绍Recorder是一款UI录制和回归测试工具,用于录制浏览器页面UI的操作。通过UIRecorder的录制功能,可以在自测的同时,完成测试过程的录制,生成JavaScr...

APP自动化测试系列之Appium介绍及运行原理

在面试APP自动化时,有的面试官可能会问Appium的运行原理,以下介绍Appium运行原理。Appium介绍Appium概念Appium是一个开源测试自动化框架,可用于原生,混合和移动Web应用程序...

【推荐】一个基于 SpringBoot 框架开发的 OA 办公自动化系统

如果您对源码&技术感兴趣,请点赞+收藏+转发+关注,大家的支持是我分享最大的动力!!!项目介绍oasys是一个基于springboot框架开发的OA办公自动化系统,旨在提高组织的日常运作和管理...

自动化实践之:从UI到接口,Playwright给你全包了!

作者:京东保险宋阳1背景在车险系统中,对接保司的数量众多。每当系统有新功能迭代后,基本上各个保司的报价流程都需要进行回归测试。由于保司数量多,回归测试的场景也会变得重复而繁琐,给测试团队带来了巨大的...

销帮帮CRM移动端UI自动化测试实践:Playwright的落地与应用

实施背景销帮帮自2015年成立以来,移动端UI自动化测试的落地举步维艰,移动端的UI自动化测试一直以来都未取得良好的落地。然而移动互联网时代,怎样落地移动端的UI自动化测试以快速稳定进行移动端的端到端...

编写自动化框架不知道该如何记录日志吗?3个方法打包呈现给你。

目录结构1.loguru介绍1.1什么是日志?程序运行过程中,难免会遇到各种报错。如果这种报错是在本地发现的,你还可以进行debug。但是如果程序已经上线了,你就不能使用debug方式了...

聊聊Python自动化脚本部署服务器全流程(详细)

来源:AirPython作者:星安果1.前言大家好,我是安果!日常编写的Python自动化程序,如果在本地运行稳定后,就可以考虑将它部署到服务器,结合定时任务完全解放双手但是,由于自动化程序与平...

「干货分享」推荐5个可以让你事半功倍的Python自动化脚本

作者:俊欣来源:关于数据分析与可视化相信大家都听说自动化流水线、自动化办公等专业术语,在尽量少的人工干预的情况下,机器就可以根据固定的程序指令来完成任务,大大提高了工作效率。今天小编来为大家介绍几个P...

取消回复欢迎 发表评论: