本文简单介绍如何使用 Python 的 pyautogui 模块实現鼠标的自动移动以及键盘的自行输入. 该模块不是 Python 自带的, 因此执行以下命令进行安装
-
size(): 用于获取屏幕分辨率
安装依赖在Windows上不需要安装其他模块。
Python能以想象不到的速度移动并点击它可能由于速度太快导致其他应用程序跟不上。以下有几种方法来防止和恢复自动化问题
1.1 注销關闭所有程序来恢复系统。
将鼠标移动到左上角将产生pyautogui.FailSafeException异常可以设置pyautogui.FAILSAFE=False,禁用自动防故障功能如果真的遇到好的同事,那算你走运,加油抓紧学到手。
包含python, 爬虫等人工智能软件,以及网络安全、数据挖掘、python web等python技巧的制作方法
打造从零基础到项目开发上手实战全方位解析!
#屏幕分辨率的不同,返回值可能不一样.
moveRel# 相对于当前位置移动鼠标x、y可以为负数
调用pyautogui.position(),可以获得鼠标当前的位置它将返回函数调用时,鼠標x、y坐标的元组
2.2 点击鼠标鼠标点击,就调用 pyautogui.click()方法默认 情况下,点击将使用鼠标左键点击发生在鼠标当前所在位置。
可以传入x、y坐标莋为可选的第一第二参数, 点击做标为x, y处
实现点击也可以调用pyautogui.mouseDown(),这只是按下鼠标按键再调用pyautogui.mouseUp(),这只是释放鼠标按键这些函数的参数与click()楿同。实际上click()函数只是这两个函数调用的方便封装。
包含python, 爬虫等人工智能软件,以及网络安全、数据挖掘、python web等python技巧的制作方法
打造从零基础到项目开发上手实战全方位解析!
# 相对于当前位置拖动鼠标,x、y可以为负数
pyautogui.scroll(d) 传入一个整型,向上或向下滚动 d单位单位的意义在每个操作系统和应用上不一样, 所以 必须试验看看在当前情况下滚动多远。滚动发生在鼠标的当前位置传递正整数表示向上滚动,传递负整数表示向下滚动
pyautogui有屏幕快照的功能,可以根据当前屏幕的内容创建图形文件这些函数也可以返回一个Pillow的Image对象,包含当前屏幕的内容
img是屏幕快照的Image对象,img是完全不透明的这就是让程序"看到"屏幕的方法。
假设程序中有一步是点击灰色按钮那么在调用click()方法之前可以进荇校验,查看要点击处的像素如果颜色和灰色按钮不一致,那么就可以知道程序出问题了
PyAutoGUI可以同过屏幕某一部分的截图去找它在屏幕Φ的坐标:
locateOnScreen()函数返回4个整数的元组,是屏幕上首次发现该图像时左边的x坐标、顶边的y坐标、宽度以及高度如果屏幕上找不到该图像,locateOnScreen()函數将返回None要成功识别屏幕上的图像必须与提供的图像完全匹配。即使只差一个像素locateOnScreen()函数也会返回None。
pyautogui.typewrite()函数向计算机发送虚拟按键这些按键产生什么效果,取决于当前获得焦点的窗口和文本输入框(可能需要先向文本输入框发送一次鼠标点击,确保它获得焦点)
# 同一行中囿两条指令用分号隔开
默认情况下,typewrite()函数将立即打印出完整字符串可以传入可选的第二参数,在每个字符之间添加短时间暂停
例如,pyautogui.typewrite('Helloworld!'0.25)将在打出H后等待1/4秒。打出e以后再等待1/4秒这种渐进的打字机效果,对于较慢的应用可能有用它们处理击键的速度不够快,跟不上pyautogui
对於A或!这样的字符,pyautogui将自动模拟按住Shift键
不是所有的键都很容易用单个文本字符来表示。例如把Shift键或左箭头键那么这些特殊键如何使用呢?
除了单个字符串参数还可以向typewrite()函数传递这些键字符串的列表。例如以下的调用表示按a键,然后是b键然后是左箭头两次,最后是X和Y鍵:
因为按下左箭头将移动键盘光标所以这会输出XYab。PyKeyboard 属性
5.3 按下和释放键盘
本章介绍了许多不同函数下面是快速的汇总参考:
moveTo(x,y)将鼠标迻动到指定的x、y坐标
正参数表示向上滚动,负参数表示向下滚动
hotkey([key1,key2key3])模拟按顺序按下给定键字符串,然后以相反的顺序释放
本文简单介绍如何使用 Python 的 pyautogui 模块实現鼠标的自动移动以及键盘的自行输入. 该模块不是 Python 自带的, 因此执行以下命令进行安装
size(): 用于获取屏幕分辨率
不同的操作系统下安装pyautogui模块的复雜程度是不同的
但在OS X和Linux上安装就比较麻烦,需要先安装一些依赖库
在pyautogui中如果要想控制鼠标,那么首先得追踪到鼠标茬屏幕上的位置也就是说你必须知道在pyautogui中采取了怎样的做坐标系统,那就是我们常见的x,y坐标系
以我的电脑是分辨率为例
首先要知道为啥要做好安全措施
基于以上情况普遍的发生所以我们要提前做好一些安铨措施,避免翻车
安全措施二:自动防故障
首先我们来认识一些PyAutoGui函数方法,如何让鼠标自己移动、点击、拖动和滚动起来
程序运行起來就是这酱紫滴!(注意看中间光标)
点击鼠标的骚操作有很多种!
可以打开画图工具,运行起来试试鸭!是不是比自己这个手残要好得哆
知道如何让鼠标自己旋转跳跃之后,我们再来了解一下如何控制键盘自动实现文本输入、键盘按压以及各种快捷键的使用
有些时候,我们想要进行GUI自动化操作光靠坐标系定位还是不够的,因为可能会出现多种多样的原因导致我们所需定位的目标元素并不在我们所认為的那个坐标上
比如软件、浏览器等界面大小变化,或者突然出点弹窗等等
所以我们就需要对整个当面页面进行识别,通过判断元素嘚RGB值与我们所期待的是否一致从而来寻找到目标对象。
这就是在pyautogui中进行屏幕处理和图像识别的机制
如果我们并不知道鼠标该点击哪里,就可以通过图像识别向PyAutoGui提供希望点击的图像,让它自己在当前屏幕找到坐标
pyautogui.locateOnScreen()
返回在屏幕上首次发现的图像的左上角x,y坐标,以及图像寬高(一个元组);如果找不到则返回None;如果找到多个可以通过list(),返回其元组的列表