主要需要用到的库有：pywin32gui，PIL，cv2（opencv-python），pywin32api，pyautogui

这篇文章是用于记录我自己的思路，当初在淘宝买了fgo的挂后，也买了商家的自动刷图脚本，但奈何老是更新用不了，我就打算用python写一个简单的战斗选牌以及重复刷图的脚本。（这个脚本是基于模拟器以及能一键秒杀的情况下，挂自己上某宝搜，基本所有商家都是一个产的（指搬运汉化外国大神卖二手国内））。

实现自动挂机，需要实现两个基本功能，一是图像匹配，二是鼠标移动定位，三是自动选牌。

一，图像匹配和鼠标移动

图像匹配自然分为截图和匹配

截图那自然就是自己预先截图保证到一个文件夹中，然后调用图片（使用PIL的Image函数，opencv的我试过不知道为什么不行，懒得想了），再使用pyautogui.locateCenterOnScreen进行对屏幕的图像匹配，im2是这个攻击按钮的图片，confidence是置信度。

然后如果匹配成功，会返回x值，这个x值是图片的中心坐标。我使用win32api.SetCursorPos进行鼠标移动定位，然后再用pyautogui.click实现鼠标单击。（我也不知道为什么我当时要用两个库实现一个功能，可能是为了学习多一个库的用法吧。）

二，自动选牌 

这一点是脚本的核心所在！

因为fgo的5张牌是随机生成，如果按顺序直接选前3张牌，有可能不能一波结束一个回合，而我需要写一个小算法，简单实现匹配出3张不一样的牌，用列表保存3张牌的图片，在依次用图像匹配寻找坐标位置，在用鼠标点击即可实现快速结束战斗。

1，截取窗口位置

因为我使用的是逍遥模拟器，我需要先定位模拟器窗口的坐标信息

 这里我用的是win32gui.FindWindow先获取窗口的权柄，然后再win32gui.GetWindowRect(handle)返回窗口的坐标信息，返回的坐标（x1,y1,x2,y2），(x1,y1)是窗口的左上角位于屏幕的坐标，而（x2,y2)是窗口右下角的坐标。

 2，截取模拟器窗口内的卡牌位置

思路是，卡牌是永远固定再模拟器窗口里面的固定位置，而我们需要的卡牌坐标自然也是相对于模拟器的坐标（即从模拟器左上角为0点开始计算卡牌坐标位置），而用鼠标选牌的时候，再加上模拟器左上角的坐标（x1，y1），就能得出绝对坐标（相对于电脑屏幕的坐标位置）。

但要注意的第一点是，模拟器的窗口是可以变大变小的，所以我们计算坐标的时候，需要用比例关系算出卡牌位于模拟器的位置。这样一来，无论窗口变化，按照对应的比例我们都能截取到卡牌的位置。

 计算公式可能有点复杂，我们需要知道，基于逍遥模拟器，是有两个边框的（上边和右边），这两个边框的宽度是不变的，所以需要再计算比例的时候留意这个固定数值。

简单解读一下代码，例如x_in的注释里的

中

而里面的固定数字，都是我在某次写代码的时候，游戏窗口的长宽（游戏窗口指的是除去固定的边框后，只有游戏画面的窗口。），这些数据都是用qq截图的坐标显示记录下来的，用qq截图一个一个获取对应卡牌的相对坐标。

i值为1的时候，就是第二张牌的x相对位置坐标，因为牌与牌之间的间隔是一样的，而高度y不变，所以只需要知道第一个牌的坐标就能推导出其他卡牌位置。

对了，卡牌的截取并不是整一张牌，因为我们需要的是打出不同角色的牌，而同一个角色的牌会有三种文字，匹配的时候如果匹配整张牌，会把同一个角色的红绿蓝牌匹配为不同角色的牌，所以我们需要截取的位置是卡牌的人物头像部分即可。

 3，给图片进行排位置

这是自动选牌的核心所在，思路是通过图片与图片匹配，得出置信度，当置信度高于一个阈值，则把这两张牌认为是同一个人。（这里用的是cv2.TM_SQDIFF_NORMED，返回的值越低反而代表图片越相似，如果需要正常的置信度值，可以找cv2.matchTemplate的用法。）

图片匹配：

选牌算法：