pyautogui、pyperclip自动化模块基础及测试案例

最新推荐文章于 2024-06-05 15:33:45 发布
最新推荐文章于 2024-06-05 15:33:45 发布
阅读量1.8k 收藏 17
点赞数
分类专栏： # 3.1. python
0.0
本文链接：https://blog.csdn.net/qq_33997198/article/details/107852367
版权

pyautogui、pyperclip自动化模块基础及测试案例

参考【知乎burning】PyAutoGUI——图形用户界面自动化

最后更新日期：2020/8/13
更新说明：补充鼠标坐标定位方法
咱中国人 就没怕过美国！为中华之崛起而读书！

pyautogui官方文档

1. pyautogui、pyperclip基础

1.1 pyautogui

PyAutoGUI用屏幕的xy坐标进行定位，可以控制鼠标的操作、触发键盘操作，非常适合完成windows/linux桌面系统中无聊重复的工作。

1.1.1. 坐标

原点是屏幕左上角，向右x坐标增大，向下y坐标增大,绝对坐标都是正整数。
pyautogui.size()

  • 屏幕的像素元组：Size(width=2560, height=1440)；
  • 左上角坐标为(0, 0)
  • 右下角坐标为(2559, 1439)
1.1.2. 鼠标控制
# 当前鼠标所在坐标
Point(x=1960, y=279) 
# 绝对移动 移动到(1100, 400)，耗时.7秒
pyautogui.moveTo(x=1100, y=400, duration=0.7) 
# 相对移动 相对于当前鼠标位置移动偏移量(-10, -40)，即往左10像素、上40像素
pyautogui.moveRel(xOffset=-10, yOffset=-40)
# 按下左键
pyautogui.mouseDown()
# 释放左键
pyautogui.mouseUp()
# 按下释放一次左键
pyautogui.click() 
# 左击一次
pyautogui.click(clicks=1, button='left', interval=0.05)
# 双击左键
pyautogui.doubleClick()
# 单击右键
pyautogui.rightClick()
# 点击中键
pyautogui.middleClick() 
# 绝对拖动 默认按住左键拖动到(500, 700)，用时1秒
pyautogui.dragTo(x=500, y=700, duration=1)
# 相对拖动 按住右键拖动偏移量(500, -20) 相对于当前鼠标向右500像素，向上20像素，用时1秒
pyautogui.dragRel(xOffset=500, yOffset=-20, button='right', duration=1)
# 滚动 屏幕向上滚动100像素
pyautogui.scroll(-100)

做了几个案例后，发现鼠标的定位是个难题，这里提供一个方便开发的工具：
pyautogui.mouseInfo()
例如我们现在写一个打开桌面回收站并清理的自动化代码，需要如下几个步骤(电脑坏了，待补充！！)

1.1.3. 键盘控制
pyautogui.typewrite(['t', 'e', 's', 't', 'left', 'left', 'left', 'left', 'M', 'S', 'G'], interval=.2)       	# 英文输入 只能单个字符或者一个按键 left代表方向键
pyautogui.keyDown('w')				# 按下w
pyautogui.keyUp('w')				# 释放w
pyautogui.press('end')      		# 封装上两步操作，按下并释放end键
pyautogui.hotkey('ctrl', 'v')		# 热键ctrl+v

pyautogui.hotkey('ctrl', 'v')
与下面四句同效果：

pyautogui.keyDown('ctrl')
pyautogui.keyDown('v')
pyautogui.keyUp('v')
pyautogui.keyUp('ctrl')

关于键盘操作的方法可以输入的字符串有如下：

键盘键字符串                        含义
'a','b','c','A','C','1','2','3',    单个字符的键
'!','@','#'等

'enter'                             回车

‘esc'                              ESC键

'shiftleft','shiftright'            左右Shift键

'altleft','altright'                左右Alt键

'ctrlleft','ctrlright'              左右Ctrl键

‘tab'(or '\t')                     Tab键

'backspace','delete'                Backspace键和Delete键

'pageup','pagedown'                 Page Up 和Page Down键

'home','end'                        Home键和End键

'up','down','left','right'          上下左右箭头键

'f1','f2','f3'等                    F1至F12键

'volumemute','volumeup',volumedown' 静音，放大音量和减小音量键

'pause'                             暂停键

'capslock','numlock','scrolllock'   Caps Lock，Num Lock和 Scroll Lock键

'insert'                            Insert键

'printscreen'                       Prtsc或Print Screen键

'winleft','winright'                左右Win键(在windows上)

'command'                           Command键(在OS X上)

'option'                            Option键(在OS X上)

1.2 pyperclip

暂时用到pyperclip的这一个copy功能，其他不知
pyperclip.copy(con)
再配合pyautogui.hotkey('ctrl', 'v') 复制粘贴，可以将变量con储存的内容粘贴到某处

2. 给女神自动发多喝热水消息测试案例

pyautogui可以模拟人在图形界面移动、点击操作鼠标、键盘输入等行为，在成功尝试输入英文字符串后，发现这个库不能输入中文；

搜索一下，醒悟到可以用复制中文字符后粘贴的方式完成，于是用qq微信都做了测试：

在这里插入图片描述

代码如下，这个是最初学习的demo，后面还会做出更有意思的实用性的工具：

import time
import pyautogui
import pyperclip


def auto_send_msg():
    '''将qq/WX聊天框置顶放在屏幕右侧，程序界面缩小到可以触发为止，保证鼠标移动位置在输入框中即可
    '''
    pyautogui.moveTo(x=1100, y=400, duration=0.7)
    pyautogui.click(clicks=1, button='left', interval=0.05)         # 点击
    time.sleep(1)
    pyautogui.press('shift')    # shift 键切换英文
    pyautogui.typewrite(['t', 'e', 's', 't', 'left', 'left', 'left', 'left', 'M', 'S', 'G'], interval=.2)       # 英文输入
    pyautogui.press('end')      # end键
    pyautogui.press('enter')    # enter键
    pyautogui.hotkey('ctrl', 'enter')
    pyautogui.keyDown('w')
    pyautogui.press('shift')    # shift 键切换中文
    time.sleep(2)
    pyautogui.keyUp('w')
    pyautogui.hotkey('ctrl', 'enter')
    input_str = "/doge多喝热水(＾Ｕ＾)ノ~ＹＯ"
    for j in range(2):
        for con in input_str:
            pyperclip.copy(con)
            time.sleep(0.09)
            pyautogui.hotkey('ctrl', 'v')
            time.sleep(0.09)
        # pyautogui.press('enter')
        pyautogui.hotkey('ctrl', 'enter')


if __name__ == "__main__":           
    auto_send_msg()

所用的屏幕属性如下：
在这里插入图片描述
qq摆放如下安排：
在这里插入图片描述

3. 知乎自动评论测试案例

在这里插入图片描述

import time
import pyautogui
import pyperclip


def send_zhihu_comment():
    print("屏幕像素为", pyautogui.size())
    time.sleep(1)
    pyautogui.moveTo(x=1100, y=400, duration=0.7)                 # 坐标移动
    pyautogui.click(clicks=1, button='left', interval=0.05)       # 点击
    pyautogui.moveRel(xOffset=-10, yOffset=-40)                   # 偏移移动
    pyautogui.click(clicks=1, button='left', interval=0.05)       # 点击
    pyautogui.middleClick()                                       # 单击中键
    pyautogui.moveRel(xOffset=10, yOffset=20)
    # 滚动测试
    time.sleep(.5)
    pyautogui.moveTo(x=1100, y=400, duration=0.7)
    pyautogui.click(clicks=1, button='left', interval=0.05)         # 点击
    time.sleep(.5)
    pyautogui.scroll(-100)
    time.sleep(.5)
    pyautogui.scroll(-100)
    time.sleep(.5)
    pyautogui.scroll(-100)
    # 左右键和拖动测试
    time.sleep(2)
    pyautogui.doubleClick()                                       # 双击左键
    time.sleep(1)
    pyautogui.rightClick()                                        # 单击右键
    pyautogui.dragTo(x=500, y=700, duration=1)
    # 输入评论，中文输入测试
    pyautogui.click(clicks=1, button='left', interval=0.05)         # 点击
    input_str = "up主真棒，加油！"
    for j in range(1):
        for con in input_str:
            pyperclip.copy(con)
            time.sleep(0.09)
            pyautogui.hotkey('ctrl', 'v')
            time.sleep(0.09)
    pyautogui.dragRel(xOffset=500, yOffset=-20, duration=1)
    pyautogui.click(clicks=1, button='left', interval=0.05)         # 点击
    pyautogui.moveRel(xOffset=-100, yOffset=-100)


if __name__ == "__main__":
    send_zhihu_comment()

4. 测试和gif效果

在这里插入图片描述
代码：

import time
import pyautogui
import pyperclip


def send_zhihu_comment():
    print("屏幕像素为", pyautogui.size())
    print("鼠标位置为", pyautogui.position())
    time.sleep(1)
    pyautogui.moveTo(x=1100, y=400, duration=0.7)                 # 坐标移动
    pyautogui.click(clicks=1, button='left', interval=0.05)       # 点击
    pyautogui.moveRel(xOffset=-10, yOffset=-40)                   # 偏移移动
    pyautogui.click(clicks=1, button='left', interval=0.05)       # 点击
    pyautogui.middleClick()                                       # 单击中键
    pyautogui.moveRel(xOffset=10, yOffset=20)
    # 滚动测试
    time.sleep(.5)
    pyautogui.moveTo(x=1100, y=400, duration=0.7)
    pyautogui.click(clicks=1, button='left', interval=0.05)         # 点击
    time.sleep(.5)
    pyautogui.scroll(-100)
    time.sleep(.5)
    pyautogui.scroll(-100)
    time.sleep(.5)
    pyautogui.scroll(-100)
    # 左右键和拖动测试
    time.sleep(2)
    pyautogui.doubleClick()                                       # 双击左键
    time.sleep(1)
    pyautogui.rightClick()                                        # 单击右键
    pyautogui.dragTo(x=500, y=700, duration=1)
    # 输入评论，中文输入测试
    pyautogui.click(clicks=1, button='left', interval=0.05)         # 点击
    input_str = "up主真棒，加油！"
    for j in range(1):
        for con in input_str:
            pyperclip.copy(con)
            time.sleep(0.09)
            pyautogui.hotkey('ctrl', 'v')
            time.sleep(0.09)
    pyautogui.dragRel(xOffset=500, yOffset=-20, button='left', duration=1)      # 按住左键相对拖动
    pyautogui.click(clicks=1, button='left', interval=0.05)         # 点击
    pyautogui.moveRel(xOffset=-100, yOffset=-100)


def auto_send_msg():
    '''将qq/WX聊天框置顶放在屏幕右侧，程序界面缩小到可以触发为止，保证鼠标移动位置在输入框中即可
    '''
    pyautogui.moveTo(x=1100, y=400, duration=0.7)
    pyautogui.click(clicks=1, button='left', interval=0.05)         # 点击
    time.sleep(1)
    pyautogui.press('shift')    # shift 键切换英文
    pyautogui.typewrite(['t', 'e', 's', 't', 'left', 'left', 'left', 'left', 'M', 'S', 'G'], interval=.2)       # 英文输入
    pyautogui.press('end')      # end键
    pyautogui.press('enter')    # enter键
    pyautogui.hotkey('ctrl', 'enter')
    pyautogui.keyDown('w')
    pyautogui.press('shift')    # shift 键切换中文
    time.sleep(2)
    pyautogui.keyUp('w')
    pyautogui.hotkey('ctrl', 'enter')
    input_str = "多喝热水"
    for j in range(2):
        for con in input_str:
            pyperclip.copy(con)
            time.sleep(0.09)
            pyautogui.hotkey('ctrl', 'v')
            time.sleep(0.09)
        # pyautogui.press('enter')
        pyautogui.hotkey('ctrl', 'enter')


if __name__ == "__main__":
    # send_zhihu_comment()
    # auto_send_msg()
    # print(pyautogui.mouseInfo())
    # pyautogui.moveTo(x=1227, y=329, duration=.5)
    # all_wins = pyautogui.getActiveWindowTitle()
    # print(all_wins)

    # TODO:根据图像进行定位完成和优化速度
    time.sleep(2)
    record_img = pyautogui.locateOnScreen("C:\\Users\\randolph\\Desktop\\record.png")
    pyautogui.moveTo(record_img, duration=.5)
    pyautogui.click(clicks=1, button='left', interval=0.05)
    time.sleep(2)
    # # 自动运行
    # run_img = pyautogui.locateOnScreen("C:\\Users\\randolph\\Desktop\\run.png")
    # print(run_img)
    # pyautogui.moveTo(run_img, duration=.5)
    # pyautogui.click(clicks=1, button='left', interval=0.05) 
    # time.sleep(1)
    # 保存位置
    save_img = pyautogui.locateOnScreen("C:\\Users\\randolph\\Desktop\\save.png")
    print(save_img)
    pyautogui.moveTo(save_img, duration=.5)
    pyautogui.click(clicks=1, button='left', interval=0.05) 
    time.sleep(3)
    # 是
    # yes_img = pyautogui.locateOnScreen("C:\\Users\\randolph\\Desktop\\yes.png")
    # print(yes_img)
    # pyautogui.moveTo(yes_img, duration=.5)
    # pyautogui.click(clicks=1, button='left', interval=0.05) 
    # 测试案例
    auto_send_msg()
    time.sleep(2)
    # 停止记录
    stop_record_img = pyautogui.locateOnScreen("C:\\Users\\randolph\\Desktop\\stop_record.png")
    print(stop_record_img)
    pyautogui.moveTo(stop_record_img, duration=.5)
    pyautogui.click(clicks=1, button='left', interval=0.05) 
    # 自动关闭
    stop_img = pyautogui.locateOnScreen("C:\\Users\\randolph\\Desktop\\stop.png")
    print(stop_img)
    pyautogui.moveTo(stop_img, duration=.5)
    pyautogui.click(clicks=1, button='left', interval=0.05)

以下分别是windows环境下LICEcap截图工具、vscode按钮和我改成黑夜模式的系统按钮，用户可以根据自己的实际情况进行修改自定义~
record.png
在这里插入图片描述
run.png
在这里插入图片描述
stop.png
在这里插入图片描述
save.png
在这里插入图片描述
stop_record.png
在这里插入图片描述
yes.png
在这里插入图片描述

disabled_csdN
关注
  • 0
    点赞
  • 踩
  • 17
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
python办公自动化：让PyAutoGUI来帮你干活---实践版
Yuki1127918的博客
02-11 3008
本文以具体的例子来在具体应用里用pyautogui来进行自动化操作，包括键盘，鼠标等移动，点击，自动抓图等。 PyAutoGUI库在各种操作系统上自由控制鼠标和键盘行为。 安装PyAutoGUI 获取鼠标光标的当前位置和显示器的大小 移动并单击鼠标 鼠标相对移动和双击 拖动鼠标 输入字符 截取屏幕截图 用图像定位鼠标 查找图像区域 获得图像区域的中心 点击 关于异常处理 安装PyAutoGUI pip install pyautogui conda .
Python使用pyautogui模块实现自动化鼠标和键盘操作示例
09-20
主要介绍了Python使用pyautogui模块实现自动化鼠标和键盘操作,简单描述了pyautogui模块的功能,并结合实例形式较为详细的分析了Python使用pyautogui模块实现鼠标与键盘自动化操作相关技巧,需要的朋友可以参考下
pyautogui 使用示例
AntHub的博客
07-16 267
pyautogui 示例
Python自动化 -- pyautogui的使用整理
最新发布
sz66cm 学习随笔
06-05 904
python 自动化 win 窗口 自动化点击框架
Python库PyAutoGUI应用实例
MCP的博客
08-21 1366
简 介：本文收集了一些PyAutoGUI的一些应用实例项目。关键词：PyAutoGUI，Python，应用举例 §01 绘制方形螺旋形状   下面是一个在 MS Paint（或任何图形绘制程序）中以方形螺旋形状拖动鼠标的例子。 import pyautogui distance = 200 while distance > 0: pyautogui.drag(distance, 0, duration=0.5) # move right distance -= 10 pyautogui..
Python: pyautogui模块和pyperclip模块的应用--绕开VMware console 禁用粘贴板
Damon1992的博客
01-12 2794
日常工作中，打开VMware的console后发现粘贴板的功能被禁用了。但解锁的密码是非常反人类的各种字符（例如：UIQb$U6QTo），且每台机器各不相同。 每天要很多次的输入这些反人类的密码,真的很烦。于是用python2.7写了以下程序（用pyInstaller 打包 ）： 因为shift键容易在vmware 黏连，所以专门写一个循环来手动释放。 已知 Bug：/ \ [ ] {}
Python pyautogui模块实现鼠标键盘自动化方法详解
09-17
Python的pyautogui模块是一个强大的自动化工具，它允许开发者通过编写Python代码来模拟鼠标和键盘的操作，极大地简化了用户界面的自动化任务。这个模块不是Python的标准库，因此需要单独安装。如果你还没有安装，...
基于PyAutoGUI和OpenCV的桌面自动化Python源码
03-26
项目概述：本项目是一款基于Python语言的桌面自动化工具，结合了PyAutoGUI和OpenCV库，共包含26个文件。其中，Python源代码文件（.py）有9个，配置文件（.xml）6个，数据表格（.xls）3个，版本控制忽略文件（....
Pyautogui：使用Pyautogui创建的一些我的创作
02-18
我使用Pyautogui创建的项目的存储库。 Classs.py： 这是我的私人机器人，可以加入我的Google课程。 目前正在开发一种完全可定制的通用版本。 您可以在我处理它时检查它的进度，要求gmeetclass文件夹位于同一目录中 Click.py 这是使用win32api的函数，donttap.py和whackamole.py用于单击。 但是，不需要下载它，因为我也将其保存在单个文件中...我想仅供参考... Donttap.py 这是一个创造出来的机器人，。 由于我使用的是坐标，因此您可能必须更改机器人所看的坐标。 我已将文件注释掉，以方便更改。 当我对此进行编码时，我的浏览器位于屏幕左侧的一半大小（单击并将浏览器的顶部一直拖动到左侧）。 由于屏幕尺寸不同，指定的坐标可能会起作用，也可能不会起作用。 Meetjoiner.py 曾经加入Google会议并以20秒为间隔发送
UIautomation+pyautogui+pyperclip登录SAP系统并修改姓名
weixin_43739282的博客
12-20 922
UIautomation+pyautogui+pyperclip登录SAP系统并修改姓名Python实现UI自动化下载windows工具Inspect运行saplogon.exe控件重要参数键盘操作剪贴板操作定位控件示例控制控件函数常用的操作 Python实现UI自动化 本文以自动登录SAP系统并修改姓名的方式简单介绍几个Python的UI自动化包 下载windows工具Inspect 官网下载链接：https://docs.microsoft.com/zh-cn/windows/win32/winauto
Python让繁琐工作自动化——chapter18 GUI控制键盘与鼠标
Lynqwest的博客
04-10 554
1. 基础语法"GUI自动化"：通过程序控制应用，向他们发送虚拟的击键和鼠标点击，即图形用户界面自动化import pyautogui#以下指令将返回屏幕分辨率大小 weight , height = pyautogui.size()1.1 鼠标（1）移动鼠标#移动绝对坐标值（x,y,移动到该位置所需时间） pyautogui.moveto(100,200,duration = 0.2) #移动相...
python自动脚本的pyautogui入门学习
09-17
主要介绍了python自动脚本的pyautogui入门学习，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
详解Python中pyautogui库的最全使用方法
09-17
主要介绍了详解Python中pyautogui库的最全使用方法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
python实现GUI自动化（控制鼠标）|屏幕快照&图像识别基础
丨汀、的博客
04-08 4744
python实现GUI自动化（控制鼠标）|屏幕快照&图像识别基础
Python网络爬虫，pyperclip与pyautogui模拟用户双击选择复制粘贴微博关键数据
Zhang Phil
03-02 1914
以成都地铁官微为例，爬虫爬取成都地铁官微的粉丝数量： # pyautogui通过模板匹配，找到新浪微博账户显示粉丝数量的位置， # 然后双击使得数字处于选中状态，再用pyperclip获取粘贴板数字。 import time import pandas as pd from tqdm import tqdm import pyautogui import webbrowser as wb from selenium import webdriver import pyperclip # 启动程序前先
pyautogui
qq_46026178的博客
10-23 1460
pyautogui是自动化控制键盘和鼠标 pyperclip是个剪贴板，用于纯文本的复制和粘贴 鼠标点击 pyautogui.click(x=211, y=64, clicks=1) # 按着像素坐标点击相应位置，clicks为点击次数 pyautogui.doubleClick(x=552, y=346) # 双击 需要确定鼠标点击的像素坐标，因此要用到以下 x,y = pyautogui.position() # 获得光标的像素坐标 输入 两者配合使用 在需要输入中文或英文时，由于输入法影响.
用Python的pyperclip和pyautogui实现微信刷屏工作！
qq_41896335的博客
04-03 1433
print('请勿移动鼠标！正在进行第',num-i,'次刷屏')print('文本区获取成功：',text_x,text_y)print('请先调整好消息窗口位置，不要有其他窗口遮盖')user = input('请输入你要发送的刷屏内容：')print('按钮获取成功：',but_x,but_y)num = int(input('你要刷屏几次？print('现在请将鼠标放在消息发送按钮停留三秒')print('请将鼠标放在消息发送区停留三秒')
最容易学习的pyautogui鼠标控制
热门推荐
Dzf_Ljy的博客
04-27 1万+
上一节主要介绍了Keyboard相关操作，本节来重点介绍一下Mouse Control。 在介绍鼠标操作之前，首先得了解Pyautogui是如何获取屏幕相关信息的，如分辨率；鼠标当前位置。 import pyautogui # 获取本机分辨率 print("本台计算机分辨率为：",pyautogui.size(),type(pyautogui.size())) # Size(wid...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值