opencv+face_recognition+python实现换脸(face swap)操作1———基础理论概述

相关链接:
1、人脸特征点提取
2、基于普氏分析法(Procrustes Analysis)的代码实现
3、基于Delaunay 三角剖分的代码实现
使用opencv实现换脸主要分为人脸对齐和进行换脸操作
而人脸对齐中又包含:
1、脸部检测
2、脸部特征点提取
3、映射变换
换脸操作用到的是opencv中的泊松融合(seamlessClone)这个库

 cv2.seamlessClone(src, dst, mask, center, flags)

其中
src 目标影像,用于替换脸部的脸部图片

dst 背景图像,也就是要被替换脸部的图片

mask 目标影像上的mask

center 目标影像的中心在背景图像上的坐标!注意是目标影像的中心!

flags 选择融合的方式,目前有NORMAL_CLONE、MIXED_CLONE和MONOCHROME_TRANSFER三种方法。
接下来我们大致描述一下整个换脸的步骤流程:

1、提取两张图片的脸部特征点

对于两张照片(目标照片和源照片)分别均使用使用face_recognitio库的face_locations方法获得人脸边界坐标数组 ,再使用face_recognitio的face_landmarks的人脸特征点位置

2、为两张图片创建mask

首先创建一个全黑的图片,通过1中得到的人脸特征点位置使用opencv中fillPoly进行对特征点围成的区域填充白色就得到这张图片对应的mask

3、进行映射变换使得人脸对齐

我们知道目标图片和背景图片两张图片的大小不一样而且其脸部的大小和方向以及脸部特征的位置也不一样 我们需要通过映射变换的操作将目标图片变换成背景图片相对于的大小和方位 。图片的原始图片和其对应mask图片都需要进行这个操作。
这一步一般都需要1中提取的人脸特征点 变换的方法一般有 基于深度学习的方法,基于Delaunay 三角剖分的映射变换对齐 以及使用普氏分析法(Procrustes Analysis)的映射变换对齐

4、使用opencv的泊松融合将两张图片合成

 cv2.seamlessClone(src, dst, mask, center, flags)

泊松融合中 目标图片和MASK都应该是通过映射变换后的图片

  • 0
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
下面是一个基于PythonOpenCVface_recognition库的简单人脸识别代码示例: ```python import cv2 import face_recognition # 加载已知的人脸图像和对应的名字 obama_image = face_recognition.load_image_file("obama.jpg") obama_face_encoding = face_recognition.face_encodings(obama_image)[0] biden_image = face_recognition.load_image_file("biden.jpg") biden_face_encoding = face_recognition.face_encodings(biden_image)[0] known_face_encodings = [ obama_face_encoding, biden_face_encoding ] known_face_names = [ "Barack Obama", "Joe Biden" ] # 打开摄像头 cap = cv2.VideoCapture(0) while True: # 读取一帧图像 ret, frame = cap.read() # 转换为RGB图像 rgb_frame = frame[:, :, ::-1] # 检测人脸 face_locations = face_recognition.face_locations(rgb_frame) face_encodings = face_recognition.face_encodings(rgb_frame, face_locations) # 遍历每个检测到的人脸 for (top, right, bottom, left), face_encoding in zip(face_locations, face_encodings): # 判断是否和已知人脸匹配 matches = face_recognition.compare_faces(known_face_encodings, face_encoding) name = "Unknown" # 如果匹配到了已知人脸,则获取对应的名字 if True in matches: first_match_index = matches.index(True) name = known_face_names[first_match_index] # 在图像上绘制人脸矩形和名字 cv2.rectangle(frame, (left, top), (right, bottom), (0, 0, 255), 2) cv2.rectangle(frame, (left, bottom - 35), (right, bottom), (0, 0, 255), cv2.FILLED) font = cv2.FONT_HERSHEY_DUPLEX cv2.putText(frame, name, (left + 6, bottom - 6), font, 1.0, (255, 255, 255), 1) # 显示图像 cv2.imshow('Video', frame) # 按下q键退出 if cv2.waitKey(1) & 0xFF == ord('q'): break # 释放摄像头和窗口资源 cap.release() cv2.destroyAllWindows() ``` 注意,这个代码示例需要在已经安装了face_recognition库和OpenCV库的Python环境中运行,还需要把`obama.jpg`和`biden.jpg`两个已知人脸图像放在代码所在目录下。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值