块匹配算法-全搜索

原理:

假设有两帧图片,第K帧(当前帧)与第K-1帧(上一帧),第K帧图片以M*N的图像块为单位,分成一个个块,块间不重叠。对于第x个图像块A,在第K-1帧中,寻找与它最匹配的图像块A',我们认为A图像块是由A'图像块平移而得到的。于是就把图像块A'到A的运动矢量MV记作图像块A的运动矢量。

全搜索算法:

假设图像块在X方向与Y方向的可以最大位移为Xmax与Ymax,那么在以图像块A为中心的(M+2*Xmax,N+2*Ymax)的范围内,对每一个可能的图像块都进行匹配计,寻找一个最优的匹配块。全搜索算法最简单,但是算法耗时比较多,计算量大。

匹配准则:

1 互相关函数


2 均方误差函数


3 绝对平均误差函数


这是常用的三个匹配准则,一般情况下,用第三个准则,比较简单。

代码:

本程序中,两帧图片进行了块匹配操作,第二帧图片是288*352的,分成8*8的小块,其中的每个块都是在前一帧中匹配而来的。

%本程序用于试验块匹配法

path='e:\test-pic\foreman.yuv';
yuvx=288;
yuvy=352;
start=1;
count=100;
pics=loadYUV(path,yuvx,yuvy,start,count);%得到RGB序列
picsgray=zeros(size(pics,1),size(pics,2),size(pics,4));
for i=1:count
    picsgray(:,:,i)=rgb2gray(pics(:,:,:,i));%得到灰度序列
%     imshow(picsgray(:,:,i));
%     pause(0.1);
end
pic1=picsgray(:,:,1);%前一帧的图片
pic2=picsgray(:,:,2);%当前帧的图片
pic3=zeros(size(pic1));%预测帧
%imshow(pic1-pic2);
pich=size(pic1,1);
picl=size(pic1,2);
blockx=8;
blocky=8;%设置块的大小
blockh=pich/blockx;
blockl=picl/blocky;
blocka=zeros(blockx,blocky);%当前帧的某块
blockb=zeros(blockx,blocky);%在上一帧中匹配的块
vx=30;
vy=30;%一块运动的最大速度
min=1000000;%存放绝对误差的最小值
for i=1:blockh
    for j=1:blockl
        blocka=pic2( (i-1)*8+1:i*8,(j-1)*8+1:j*8 );%当前帧中的块
        %在pic1中匹配
        for ii=(i-1)*8+1-vy:i*8+vy-blockx+1
            for jj=(j-1)*8+1-vx:j*8+vx-blockx+1
                if (ii>=1) && (ii<=(pich-7)) && (jj>=1) && (jj<=picl-7)
                    blockb=pic1(ii:ii+7,jj:jj+7);
                    temp=sum(sum(abs(blocka-blockb)));
                    if min>temp
                        min=temp;
                        blockc=blockb;
                        %px=ii;py=jj;
                    end
                end
            end
        end
        pic3( (i-1)*8+1:i*8,(j-1)*8+1:j*8 )=blockc;
        min=1000000;
    end
end

pic1=uint8(pic1);%前一帧
pic2=uint8(pic2);%当前帧实际图像
pic3=uint8(pic3);%当前帧估计图像
figure(1);
imshow(pic1);
title('前一帧');
figure(2);
imshow(pic2);
title('当前帧');
figure(3);
imshow(pic3);
title('当前帧预测图像');
figure(4);
imshow(abs(pic2-pic1));
title('当前帧与前一帧差');
figure(5);
imshow(abs(pic2-pic3));
title('当前帧与预测帧差');
程序运行的效果如下:


可以看出,预测后的图片跟当前帧更加的接近啦。但是有一个问题,就是块匹配法预测的图片,容易产生方块现象,从预测图片中就可以看出来。


  • 3
    点赞
  • 25
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
匹配算法是一种基于像素点匹配运动估计算法。常见的匹配算法搜索算法、三步搜索算法和快速搜索算法等。 下面是一个简单的匹配算法的代码实现: ```python import numpy as np import cv2 # 读取两帧图像 prev_frame = cv2.imread('prev.jpg', cv2.IMREAD_GRAYSCALE) curr_frame = cv2.imread('curr.jpg', cv2.IMREAD_GRAYSCALE) # 定义大小,搜索范围和最小匹配误差 block_size = 16 search_range = 16 min_error = 1e9 # 遍历当前帧的每个 for i in range(0, curr_frame.shape[0] - block_size, block_size): for j in range(0, curr_frame.shape[1] - block_size, block_size): # 初始化最小误差和最佳位移 min_error_block = np.zeros((block_size, block_size), dtype=np.uint8) best_offset = (0, 0) # 遍历搜索范围内的每个像素点 for k in range(-search_range, search_range + 1): for l in range(-search_range, search_range + 1): # 计算当前和参考的均方误差 curr_block = curr_frame[i:i+block_size, j:j+block_size] ref_block = prev_frame[i+k:i+k+block_size, j+l:j+l+block_size] error_block = cv2.absdiff(curr_block, ref_block) error = np.sum(error_block) # 更新最小误差和最佳位移 if error < min_error: min_error = error min_error_block = error_block best_offset = (k, l) # 将当前与最佳匹配的位移绘制到当前帧中 cv2.rectangle(curr_frame, (j, i), (j+block_size, i+block_size), (255, 0, 0), 1) cv2.arrowedLine(curr_frame, (j+block_size//2, i+block_size//2), (j+block_size//2+best_offset[1], i+block_size//2+best_offset[0]), (0, 0, 255), 2) cv2.imshow('motion estimation', curr_frame) cv2.waitKey(0) cv2.destroyAllWindows() ``` 该代码实现了一个简单的匹配运动估计算法,可以在两帧图像中找到每个的最佳匹配,并绘制出位移向量。注意,该代码只是一个简单的示例,实际应用中还需要进一步优化和改进。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

大指挥官

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值