之前在 Bilibili 上看到 UP 主 不高兴就喝水?使用 Python 做了一个自动化小程序帮助大家解放重复劳动力,他使用的是 PyAutoGUI 第三方库来实现相关功能。看视频演示效果非常不错,也觉得在未来这个东西应该对我也非常有用,所以我便决定研究倒腾一下 Python 的 PyAutoGUI 这个第三方库。(视频传送门)这不整不知道,一整就是一天。
一开始还是非常顺利的,这个库使用起来还是非常简单,相关方法都简单易懂,只要会 Python 的基本语法,这个库上手也就几分钟的事,如果有兴趣的朋友可以参照?这篇文章?学习。三下五除二我就把基本流程写好了,我这里使用 PyAutoGUI 中的 locateCenterOnScreen() 来定位屏幕上的元素。可是在运行的时候,明明该元素就在屏幕上,可是无论如何该方法都返回 None?,也就是说程序并没有匹配到合适的元素,可是这个元素明明就在屏幕上,这让我百思不得其解,后来上网了解到可以在 locateCenterOnScreen() 中加入 confidence 属性,该属性是指定匹配相关程度的,可以适当降低该属性的值来放宽要求。这里我将该属性设定为 0.8 则该方法不再返回 None 而是返回具体的坐标了。(注意:使用 confidence 属性需要安装 opencv-python 库)安装 opencv-python 库推荐使用清华镜像下载安装,否则会很慢,安装命令如下:
pip install opencv-python -i https://pypi.tuna.tsinghua.edu.cn/simple
到这一步,locateCenterOnScreen 已经可以正常返回坐标了,就在我以为完事的时候,弥天大坑出现了😭。通过 pyautogui.moveTo(locateCenterOnScreen("fileName.png", confidence = 0.8)) 移动鼠标到对应的地方,我发现鼠标并不会如我所愿去到正确的位置,在这里倒腾了非常久,最后发现是 MacBook Air 的渲染分辨率和屏幕的实际分辨率不一样,不是点对点渲染的。我们使用 pyautogui.size() 方法查看屏幕的渲染分辨率,得到如下结果:
?也就是说我们屏幕的分辨率为 1440*900,而我们进入到 Apple 系统中查询发现 MacBook Air 13.3-inch 内建显示器实际分辨率为 2560*1600,也就是说 macOS 渲染像素和实际像素并不是点对点的关系。
?后来经过多次实验外加查询资料,最后验证发现,如果需要定位到准确的位置,我们需要将?locateCenterOnScreen() 返回的坐标分别乘上 0.5?,这样才可以准确定位。盲猜是因为 Retina 视网膜屏幕的原因。
后来,通过咨询朋友了解到,似乎只有 13.3 英寸的 MacBook 机型会受到影响,因为屏幕渲染分辨率和实际分辨率不是点对点的关系,其他尺寸的 MacBook 好像不会受到影响,不过我也没有机器进行测试,所以暂时无法求证。
?
|