目标
使用模板匹配在一幅图像中查找目标
学习函数: cv2.matchTemplate(), cv2.minMaxLoc()
原理
模板匹配是用来在一副大图中搜寻查找模版图像位置的方法。 OpenCV 提供了函数: cv2.matchTemplate()。和 2D 卷积一样,它也是用模板图像在输入图像(大图)上滑动,并在每一个位置对模板图像和与其对应的输入图像的子区域进行比较。 OpenCV 提供了几种不同的比较方法,返回的结果是一个灰度图像,每一个像素值表示了此区域与模板的匹配程度。
如果输入图像的大小是(WxH),模板的大小是(wxh),输出的结果的大小就是(W-w+1, H-h+1)。当你得到这幅图之后,就可以使用函数cv2.minMaxLoc() 来找到其中的最小值和最大值的位置了。第一个值为矩形左上角的点(位置),(w, h)为 moban 模板矩形的宽和高。这个矩形就是找到的模板区域了。
注意: 如果你使用的比较方法是 cv2.TM_SQDIFF, 最小值对应的位置才是匹配的区域。
1、 OpenCV 中的模板匹配
我们在蕾娜的照片中搜索眼睛。所以我们要制作下面这样一个模板:
尝试使用不同的比较方法,这样我们就可以比较一下它们的效果了。
import cv2
import numpy as np
from matplotlib import pyplot as plt
img = cv2.imread('image/2.jpg',0)
img2 = img.copy()
template = cv2.imread('image/2_eye.png',0)
w,h = template.shape[::-1]
methods = ['cv2.TM_CCOEFF','cv2.TM_CCOEFF_NORMED','cv2.TM_CCORR','cv2.TM_CCORR_NORMED','cv2.TM_SQDIFF','cv2.TM_SQDIFF_NORMED']
for meth in methods:
img = img2.copy()
method = eval(meth)
res = cv2.matchTemplate(img, template, method)
min_val,max_val,min_loc,max_loc = cv2.minMaxLoc(res)
if method in [cv2.TM_SQDIFF,cv2.TM_SQDIFF_NORMED]:
top_left = min_loc
else:
top_left = max_loc
bottom_right = (top_left[0]+w,top_left[1]+h)
cv2.rectangle(img, top_left, bottom_right, 255,2)
plt.subplot(121),plt.imshow(res,cmap = 'gray')
plt.title('Matching Result'),plt.xticks([]),plt.yticks([])
plt.subplot(122),plt.imshow(img,cmap = 'gray')
plt.title('Detected Point'),plt.xticks([]),plt.yticks([])
plt.suptitle(meth)
plt.show()
结果图:
可以看到 cv2.TM_CCORR 的效果不想我们想的那么好。
2 、多对象的模板匹配
在前面的部分,我们在图片中搜素蕾娜的眼睛,而且蕾娜只在图片中出现了一次。假如你的目标对象只在图像中出现了很多次怎么办呢?函数cv.imMaxLoc() 只会给出最大值和最小值。此时,我们就要使用阈值了。在下面的例子中我们要经典游戏 Mario 的一张截屏图片中找到其中的硬币。
import cv2
import numpy as np
from matplotlib import pyplot as plt
img_rgb = cv2.imread('image/ma.png')
img_gray = cv2.cvtColor(img_rgb, cv2.COLOR_BGR2GRAY)
template = cv2.imread('image/ma_coin.png',0)
w,h = template.shape[::-1]
res = cv2.matchTemplate(img_gray, template, cv2.TM_CCOEFF_NORMED)
threshold = 0.8
loc = np.where(res >= threshold)
for pt in zip(*loc[::-1]):
cv2.rectangle(img_rgb, pt, (pt[0] + w,pt[1] + h), (0,0,255),2)
cv2.imwrite('247.png', img_rgb)
结果图:
参考:Opencv官方教程中文版(For Python)