python屏幕截图、图像数组、鼠标移动点击的游戏外挂应用

以程序自动完成游戏黑白块为例：

                                 

程序的逻辑是：

一、获取游戏界面屏幕截图

  hwnd = 0 # 窗口的编号，0号表示当前活跃窗口
  # 根据窗口句柄获取窗口的设备上下文DC（Divice Context）
  hwndDC = win32gui.GetWindowDC(hwnd)
  # 根据窗口的DC获取mfcDC
  mfcDC = win32ui.CreateDCFromHandle(hwndDC)
  # mfcDC创建可兼容的DC
  saveDC = mfcDC.CreateCompatibleDC()
  # 创建bigmap准备保存图片
  saveBitMap = win32ui.CreateBitmap()
  # 获取监控器信息
  MoniterDev = win32api.EnumDisplayMonitors(None, None)
  # w = MoniterDev[0][2][2]
  # h = MoniterDev[0][2][3]
  w=620
  h=1080
  #print w,h　　　#图片大小
  # 为bitmap开辟空间
  saveBitMap.CreateCompatibleBitmap(mfcDC, w, h)
  # 高度saveDC，将截图保存到saveBitmap中
  saveDC.SelectObject(saveBitMap)
  # 截取从左上角（0，0）长宽为（w，h）的图片
  saveDC.BitBlt((0, 0), (w, h), mfcDC, (0, 0), win32con.SRCCOPY)
  saveBitMap.SaveBitmapFile(mfcDC, filename)

前面的dc的概念还是挺复杂的，只考虑应用的话关注几个参数就可以了。这一段程序的最中将主屏幕的（0，0）到（620，1080）（（横坐标，纵坐标））的矩形截图保存在python工程目录中。32位色图

二、转化为图像数组

  img = Image.open("haha.jpg")
  img_1 = img.convert('L')  # 转灰度
  img_2 = array(img_1,'f') #转数组

第一行打开图像；

第二行为 “from PIL import Image”中的图像处理

第三行转为array

PIL有九种不同模式: 1，L，P，RGB，RGBA，CMYK，YCbCr，I，F。

其中，1和L较为常用，也容易理解

        1： 非黑即白，也就是二值化，只有0和255

        L： 灰度图，为0到255之间的数

三、游戏逻辑

        太简单了不介绍了

        此外还需要延时方法，高版本python的sleep()已经支持参数为小数了

        import time
        time.sleep(0.5)#延时0.5秒

四、鼠标点击

要安装pyHook、PyMouse、PyUesrInput，安装遇到问题可自行百度。pyHook好像不支持太高版本的python，加上我的pip包也不好使，自己试了好长时间才搞定pyHook             ~WWW~

需要安装

win32gui
pyHook
PyUserInput
PyMoouse
matplotlib
numpy

鼠标点击常用的语句有：

 m = PyMouse()
 a = m.position()  # 获取当前坐标的位置
 m.click(80, 900)  # 移动并且在(x,y)位置左击

最后附上总的代码，不用谢因为：

#time:2022/1/26  18:43
#author:
#
import time
import win32gui, win32ui, win32con, win32api
from pymouse import PyMouse
import numpy as np
import matplotlib.pyplot as plt
# from ctypes import *
import os
from pylab import *
from PIL import Image

def window_capture(filename):
  hwnd = 0 # 窗口的编号，0号表示当前活跃窗口
  # 根据窗口句柄获取窗口的设备上下文DC（Divice Context）
  hwndDC = win32gui.GetWindowDC(hwnd)
  # 根据窗口的DC获取mfcDC
  mfcDC = win32ui.CreateDCFromHandle(hwndDC)
  # mfcDC创建可兼容的DC
  saveDC = mfcDC.CreateCompatibleDC()
  # 创建bigmap准备保存图片
  saveBitMap = win32ui.CreateBitmap()
  # 获取监控器信息
  MoniterDev = win32api.EnumDisplayMonitors(None, None)
  # w = MoniterDev[0][2][2]
  # h = MoniterDev[0][2][3]
  w=620
  h=1080
  #print w,h　　　#图片大小
  # 为bitmap开辟空间
  saveBitMap.CreateCompatibleBitmap(mfcDC, w, h)
  # 高度saveDC，将截图保存到saveBitmap中
  saveDC.SelectObject(saveBitMap)
  # 截取从左上角（0，0）长宽为（w，h）的图片
  saveDC.BitBlt((0, 0), (w, h), mfcDC, (0, 0), win32con.SRCCOPY)
  saveBitMap.SaveBitmapFile(mfcDC, filename)

  img = Image.open("haha.jpg")
  img_1 = img.convert('L')  # 转灰度
  img_2 = array(img_1,'f') #转白色

  m = PyMouse()
  a = m.position()  # 获取当前坐标的位置
  # print(img_2[780][80]+img_2[780][70]+img_2[780][90])
  hhh=720
  if img_2[hhh][80]+img_2[hhh][70]+img_2[hhh][90]<3*200:
    m.click(80, 900)  # 移动并且在(x,y)位置左击
  if img_2[hhh][240]+img_2[hhh][230]+img_2[hhh][250]<3*200:
    m.click(240, 900)  # 移动并且在(x,y)位置左击
  if img_2[hhh][400]+img_2[hhh][410]+img_2[hhh][390]<3*200:
    m.click(400, 900)  # 移动并且在(x,y)位置左击
  if img_2[hhh][560]+img_2[hhh][570]+img_2[hhh][550]<3*200:
    m.click(560, 900)  # 移动并且在(x,y)位置左击
  # # print('色块： ',aaa)
  img_1.save('h灰度.jpg')
  img.close()

used_time=0;
arrey_time=0.1
for i in range(3):
  beg = time.time()
  window_capture("haha.jpg")
  end = time.time()
  used_time=end - beg
  print('延时',used_time,'     ',i)
  if used_time<arrey_time:
    time.sleep(arrey_time+beg-end)