opencv 仿射变换 根据眼睛坐标进行人脸对齐 计算变换后对应坐标

使用OpenCV对人脸图像进行仿射变换, 实现人脸对齐功能 
 
 
 
 
人脸图像及68个面部关键点                             仿射变换后人脸图像及关键点 
 
 
仿射变换将原坐标(x, y)变换为新坐标(x', y')的计算方法: 
 
 
通过上面的公式, 可计算出原图像经过变换后的新图像。 
 
 
Opencv仿射变换函数warpAffine: 

  1. //! warps the image using affine transformation
  2. void warpAffine( InputArray src, OutputArray dst,
  3.                               InputArray M, Size dsize,
  4.                               int flags=INTER_LINEAR,
  5.                               int borderMode=BORDER_CONSTANT,
  6.                               const Scalar& borderValue=Scalar());

参数:src - 输入图像 
          dst - 输出图像,图像大小为dsize 
          M - 2X3变换矩阵 
          dsize - 输出图像的大小 
         flags - 差值方法 
         borderMode - 像素填充方法,BORDER_CONSTANT表示固定值填充 
      borderValue - 填充的值 
 
 
计算仿射变换矩阵函数getRotationMatrix2D 

  1. Mat getRotationMatrix2D( Point2f center, double angle, double scale );

根据旋转中心, 旋转角度,缩放因子计算仿射变换矩阵。 
计算方法: 
 
 
实现代码: 
 

  1. //根据眼睛坐标对图像进行仿射变换
  2. //src - 原图像
  3. //landmarks - 原图像中68个关键点
  4. Mat getwarpAffineImg(Mat &src, vector<Point2f> &landmarks)
  5. {
  6.     Mat oral;src.copyTo(oral);
  7.     for (int j = 0; j < landmarks.size(); j++)
  8.     {
  9.         circle(oral, landmarks[j], 2, Scalar(255, 0, 0));
  10.     }
  11.     //计算两眼中心点,按照此中心点进行旋转, 第31个为左眼坐标,36为右眼坐标
  12.     Point2f eyesCenter = Point2f( (landmarks[31].x + landmarks[36].x) * 0.5f, (landmarks[31].y + landmarks[36].y) * 0.5f );
  13.     
  14.     // 计算两个眼睛间的角度
  15.     double dy = (landmarks[36].y - landmarks[31].y);
  16.     double dx = (landmarks[36].x - landmarks[31].x);
  17.     double angle = atan2(dy, dx) * 180.0/CV_PI; // Convert from radians to degrees.
  18.     
  19.     //由eyesCenter, andle, scale按照公式计算仿射变换矩阵,此时1.0表示不进行缩放
  20.     Mat rot_mat = getRotationMatrix2D(eyesCenter, angle, 1.0);
  21.     Mat rot;
  22.     // 进行仿射变换,变换后大小为src的大小
  23.     warpAffine(src, rot, rot_mat, src.size());
  24.     vector<Point2f> marks;
  25.     
  26.     //按照仿射变换矩阵,计算变换后各关键点在新图中所对应的位置坐标。
  27.     for (int n = 0; n<landmarks.size(); n++)
  28.     {
  29.         Point2f p = Point2f(0, 0);
  30.         p.x = rot_mat.ptr<double>(0)[0] *landmarks[n].x + rot_mat.ptr<double>(0)[1] * landmarks[n].y + rot_mat.ptr<double>(0)[2];
  31.         p.y = rot_mat.ptr<double>(1)[0] * landmarks[n].x + rot_mat.ptr<double>(1)[1] * landmarks[n].y + rot_mat.ptr<double>(1)[2];
  32.         marks.push_back(p);
  33.     }
  34.     //标出关键点
  35.     for (int j = 0; j < landmarks.size(); j++)
  36.     {
  37.         circle(rot, marks[j], 2, Scalar(0, 0, 255));
  38.     }
  39.     return rot;
  40. }

 
 
将缩放因子scale = 0.5,仿射变换后结果为: 
 
     原图像                                                      按照眼睛坐标进行校正,缩放因子0.5 

人脸对齐是在人脸识别中的一个重要预处理步骤,可以提高人脸识别的准确率和稳定性。在早期的OpenCV版本中,由于不支持人脸Landmark检测,通常通过对人脸进行分割,然后通过角点检测来寻找眼睛的两个角点,根据它们的水平线角度进行旋转,实现人脸对齐。\[1\] 而在OpenCV3.x版本开始,支持获取Landmark数据,最常见的Landmark数据是人脸的68个标准点位。通过这些关键点,可以进行仿射变换,找出变换矩阵,然后将原始图像中的所有像素点变换到标准人脸上,实现人脸对齐。反对齐则是将对齐后的人脸再次进行仿射变换,使其回到原始图像的位置。\[2\] 具体的像素变换计算公式如下: 设仿射矩阵为M,像素点为(pixel\[0\], pixel\[1\]),变换后的像素点为(x, y),则有: x = M\[0,0\]*pixel\[0\] + M\[0,1\]*pixel\[1\] + M\[0,2\] y = M\[1,0\]*pixel\[0\] + M\[1,1\]*pixel\[1\] + M\[1,2\] 通过这样的计算,可以实现对齐和反对齐操作。\[2\] 在实际操作中,可以通过Landmark数据提取眼睛的位置坐标计算眼睛之间的角度,然后通过几何变换实现人脸对齐。具体的代码可以参考引用\[3\]中的示例。\[3\] 总结来说,人脸对齐是通过Landmark数据或角点检测来找到眼睛的位置,然后进行旋转或仿射变换,使得人脸在图像中的位置和角度更加一致,从而提高人脸识别的准确性和稳定性。 #### 引用[.reference_title] - *1* *3* [OpenCV实现人脸对齐](https://blog.csdn.net/qq_42722197/article/details/121668671)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down1,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* [python-opencv-人脸对齐和反对齐](https://blog.csdn.net/Coding_Ann/article/details/104693126)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值