简介 Pywinauto是完全由Python构建的一个模块,可以用于自动化Windows上的GUI应用程序。同时,它支持鼠标、键盘操作,在元素控件树较复杂的界面,可以辅助我们完成自动化操作。 我在工作中,主要是使用pywinauto来辅助做一些操作,来完成自动化测试。pywinauto安装 先要确认本地有python环境,然后可以通过命令行安装pywinauto:pipinstallpywinauto 如果你是使用ide,可以通过ide安装,比如我习惯使用pycharm,就可以在ProjectInterpreter中添加pywinauto: pycharm添加pywinauto 还有一些手动安装的方法,但是有点繁琐,不是很推荐,这里就不介绍了。访问技术选择 Pywinauto要操作应用,首先需要访问应用,主要有两种访问技术。WIN32访问技术支持MFC、VB6、VCL、简单WinForms控件开发的应用,MSUIAutomation访问技术支持WinForms、WPS、QT5、WPF、Storeapps、browsers等开发的应用。 win32API的backend为win32,MSUIAutomation的backend为uia。 Pywinauto中使用的backend默认为win32。可使用spy或者Inspect工具判断backend适合选哪种。例如:如果使用pyinspect的uia模式,可见的控件和属性更多的话,backend可选uia,反之,backend可选win32。 这里提一下常用的分析工具:SPY,用于WIN32API。当SPY可以显示所有的控件时,访问技术应该选择win32。Inspect。exe:如果Inspect。exe的模式设置为UIA模式,可以比SPY显示更多的控件,则访问技术应该选择uia。pyinspect:支持win32和uia两种访问技术,是SWAPY的替代。UISPY:支持uia访问技术。SWAPY:只支持win32访问技术。 我个人常用的是pyinspect和spy。 pyinspect界面打开应用 多数情况下都是需要打开应用的,实现方式也很简单:appApplication(backenduia)。start(D:WireSharkWireshark。exe) backend参数根据实际情况选择传uia还是win32。 start方法其实可以传两个参数,除了目标应用的启动程序地址,还可以传一个timeout,如果不传,默认是5s。如果你的目标程序启动、运行都很慢,可以将timeout设置久一点。连接应用 如果要操控的应用已经处于启动状态,可以直接进行连接,而连接方式有多种可以选择:通过应用完整路径appApplication(backenduia)。connect(pathD:WireSharkWireshark。exe)通过应用进程pid进行连接appApplication(backenduia)。connect(processpid) 其中Windows的pid可以通过任务管理器进行查看: 查看pid通过窗口句柄appApplication(backenduia)。connect(handle175) 但是我在实际操作的时候使用窗口句柄没有成功过,可能是我使用姿势不对,不过还是不推荐使用窗口句柄。通过组合参数appApplication(backenduia)。connect(titlereWire,classnameMainWindow) titlere参数传递的是应用的部分名称,classname可以通过pyinspect查询到。window,dialog定位 前面获取的对象都是应用,但是我们实际操作的是应用窗口,这里就来介绍怎么获取窗口和对话框。 最常用的是通过title定位:windowapp。window(titleWireshark) 如果不清楚定位工具中的title在哪个位置,显示的是什么,可以通过printcontrolidentifiers()方法将所有的title都打印出来: printcontrolidentifiers()的效果 通过title定位的时候需要注意一下中英文的影响,如果是中文,可能会有编码问题,需要转码。 title其实只是window()方法中的一种关键字参数,window()方法可以接收很多中的关键字参数,且这些参数可以组合使用,例如这样:windowapp。window(titleWireshark,classnameMainWindow) 主要参数有这些:classname:ClassNameclassnamere:正则匹配windowClassnametitle:NameWindow窗口名titlere:正则匹配窗口名bestmatch:模糊匹配类似的titlehandle:句柄frameworkid:FrameworkId(一般情况下FrameworkId不是唯一的)process:ProcessId,进程id(注意:每次启动后,进程id都会变)controlid:在pyinspect可以查询到controltype:在pyinspect可以查询到autoid:在pyinspect可以查询到 通过topwindow()也能比较容易地获取到窗口,但是这个方法获取的是程序的顶级窗口,但可能不是ZOrder中的顶级窗口。所以这个方法使用的时候多调试几次。窗口操作 窗口的操作主要有最小化、最大化、恢复、关闭窗口:最小化窗口dlg。minimize()最大化窗口dlg。maximize()恢复窗口dlg。restore()关闭窗口dlg。close()control定位 控件的定位其实和窗口的定位基本一致,不太清楚为什么pywinauto在设计的时候会将窗口和控件作为一类东西。 相对于前面定位窗口的window()方法,定位控件的时候推荐使用childwindow(),因为直接使用windows()的话,如果控件不是在当前窗口的子控件,是子子控件,就会定位不到,而childwindow()方法就不会有这个问题,当然相对的缺点就是当控件深度太深的时候,执行这个方法会比较耗时。 childwindow()方法传递的参数和window()是一样的。控件操作 控件自带了一些操作方法:单击clickinput()双击doubleclickinput右击rightclickinput 当这些不好用的时候,比如你的控件不支持点击,但是你又想点击一下,可以使用鼠标操作的一些方法:导入鼠标方法frompywinautoimportmouse点击鼠标左键,coords传的是像素位置mouse。click(coords(x,y))wheeldist:为正向上滚动,为负向下滚动mouse。mouse。scroll(coords(x,y),wheeldist1)截图 测试过程中可能会需要截图作为证据,截图的方法也比较简单:buttonapp。window(bestmatchUnsaved)。childwindow(bestmatchCancel)ifbutton。exists():button。。captureasimage()。save(imgpath)模拟键盘的操作 pywinauto也提供了键盘操作的方法:导入键盘方法frompywinauto。keyboardimport全选sendkeys(a):Shift:Ctrl:Alt等待机制 pywinauto有几个设置等待时间的方式,这里介绍一个:等待窗口,超时时间是10s,重试1次window。wait(waitforready,timeout10,retryinteval1)实战 这里简单的演示一下用Wireshark自动抓包并保存:importtimefrompywinautoimportApplication,Desktop,mousefrompywinauto。keyboardimportsendkeysdefclickcontrol(control):controlrectcontrol。rectangle()topcontrolrect。topbottomcontrolrect。bottomleftcontrolrect。leftrightcontrolrect。rightmouse。click(coords(int((leftright)2),int((topbottom)2)))appApplication(backenduia)。start(D:WireSharkWireshark。exe)windowapp。window(bestmatchWireshark)time。sleep(5)window。setfocus()app。window(bestmatchWireshark)。childwindow(bestmatchWLAN)。doubleclickinput()time。sleep(5)app。window(bestmatch正在捕获)。childwindow(bestmatch停止)。clickinput()app。window(bestmatchWLAN)。childwindow(bestmatch文件)。clickinput()app。window(bestmatchWLAN)。childwindow(bestmatch另存为)。clickinput()clickcontrol(app。window(bestmatchWLAN)。childwindow(bestmatch文件名(N)))sendkeys(aaa)app。window(bestmatchWLAN)。childwindow(bestmatch保存)。clickinput()总结 PC端自动化测试使用到的python模块主要有pywinauto、win32gui、pyautogui。这里介绍的pywinauto主要使用到Application类,用于应用程序管理(打开与关闭应用等)、窗口管理(最小化、最大化、关闭窗口)、控件操作。 pywinauto的功能其实挺丰富的,但是真正用到的其实只是其中很小的一块,感兴趣的同学可以多去官网翻一翻。