聊聊 PC 端自动化最佳方案 - Pywinauto

1. 前言

大家好,我是安果!

上一篇文章,聊到 PC 端的一种自动化方案:WinAppDriver

聊聊 PC 端自动化最佳方案 - WinAppDriver

有小伙伴后台给我留言,说「 pywinauto 」作为 WinAppDriver 的替代方案,也能完美完成 PC 端的自动化

2. 介绍

Pywinauto,完全由 Python 构建的一个模块,可以用于自动化 Windows 上的 GUI 应用程序

同时,它支持鼠标、键盘操作,在元素控件树较复杂的界面,可以辅助我们完成自动化操作

项目地址:https://github.com/pywinauto/pywinauto

支持的应用为下面 2 大类:

  • Win32 API

    包含 MFC、VB6、VCL、simple WinForms controls and most of the old legacy apps

  • MS UI Automation

    包含 WinForms、WPF、Store apps、Qt5, browsers

其中

win32 API 的 backend 为「 win32 」

MS UI Automation 的 backend 为「 uia 」

3. 元素控件

和 WinAppDriver 类似,在编写自动化脚本之前,我们需要先获取元素控件的各类属性值

获取元素控件有 2 种方式:

  • 窗口内置方法

  • 检查工具

其中

窗口对象内置的 2 个方法都可以打印出当前页面的元素控件树

# 窗口对象中内置方法,打印窗体内所有元素控件
# 方式一:
窗体对象.print_control_identifiers()

# 方式二
窗体对象.dump_tree()

常用的检查工具也包含 2 种,分别是:Inspect.exe、Spy++

4. 实战一下

在实战之前,我们先安装依赖包 pywinauto

# 安装依赖
pip3 install pywinauto

接下来,我们还是以上篇文章中的例子来讲解完整的实现过程

4-1 打开微信客户端

首先,通过检查工具判断应用的 backend 属性值,PC 端微信的 backend 为「 uia 」

然后,实例化一个「 Application 」类

最后,使用该对象内置的函数创建一个应用对象

import pywinauto
from pywinauto.application import Application

# 获取应用对象
# 三种方式任选一种
# 方式一:应用进程pid(连接)
app = Application(backend='uia').connect(process=pid)

# 方式二:应用完整路径(连接)
app = Application(backend='uia').connect(path="D:\Program Files (x86)\Tencent\WeChat\WeChat.exe")

# 方式三:打开应用(打开)
app = Application(backend='uia').start('D:\Program Files (x86)\Tencent\WeChat\WeChat.exe')

需要指出的是,获取应用对象有上面 3 种方式,可以按需使用

4-2 获取窗体对象

通过检查工具获取窗体的属性列表,然后使用应用对象 + 窗体属性获取微信首页的窗体对象

image

实现代码如下:

from pywinauto.win32functions import SetFocus

# 获取窗口对象
# 通过title及ClassName获取窗体对象
self.weixin_pc_window = self.app.window(title=u"微信", class_name="WeChatMainWndForPC")

self.weixin_pc_window.set_focus()

4-3 切换到聊天列表

获取左侧聊天切换按钮,获取其坐标位置,模拟点击进入到聊天列表页面

from pywinauto import mouse

def __get_element_postion(self, element):
    """获取元素的中心点位置"""
    # 元素坐标
    element_position = element.rectangle()
    # 算出中心点位置
    center_position = (int((element_position.left + element_position.right) / 2),
                           int((element_position.top + element_position.bottom) / 2))
    return center_position

def start(self):
    # 1、获取左侧【聊天】切换元素
    chat_list_element = self.weixin_pc_window.child_window(title="聊天", control_type="Button")
    # 2、点击进入到聊天列表
    mouse.click(button='left',
                    coords=self.__get_element_postion(chat_list_element))

4-4 进入聊天页面,输入内容并发送

获取「 文件聊天助手 」元素,点击进入到聊天页面,找到输入框元素,使用内置方法输入内容,最后使用键盘模拟点击「 Enter 」键,发送消息

from pywinauto import mouse

# 3、点击【文件传输助手】进入到聊天页面
file_helper_element = self.weixin_pc_window.child_window(title="文件传输助手", control_type="ListItem")

mouse.click(button='left',
                    coords=self.__get_element_postion(file_helper_element))
# 4、获取输入框元素,模拟输入
        edit_element = self.weixin_pc_window.child_window(title=r"输入", control_type="Edit")

sleep(2)
# 输入内容
edit_element.type_keys("星安果")
# 使用键盘模拟回车,即:发送
send_keys('{ENTER}')

4-5 释放资源

完成操作后,可以调用应用对象的「 kill() 」函数关闭进程,释放掉资源

def teardown(self):
    """释放资源"""
    # 结束进程,释放资源
    self.app.kill()

5. 最后

上例中使用 pywinauto 完成了一个简单的发送消息的自动化步骤

实际项目中,结合鼠标、键盘可以实现很多复杂场景的自动化,对这部分有兴趣的可以点击文末的「 阅读原文 」去了解

pywinauto 和 WinAppDriver 都能很好的完成 PC 端的自动化,但是由于 WinAppDriver 支持 Appium,在脚本语法简洁性方面可能更有优势

文中的所有源码我已经上传到公众号后台,关注公众号「 AirPython 」后,回复关键字「 winauto 」获取完整源码

如果你觉得文章还不错,请大家 点赞、分享、留言 下,因为这将是我持续输出更多优质文章的最强动力!

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 220,137评论 6 511
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,824评论 3 396
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 166,465评论 0 357
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 59,131评论 1 295
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 68,140评论 6 397
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,895评论 1 308
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,535评论 3 420
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,435评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,952评论 1 319
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 38,081评论 3 340
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,210评论 1 352
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,896评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,552评论 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,089评论 0 23
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,198评论 1 272
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,531评论 3 375
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,209评论 2 357

推荐阅读更多精彩内容