【ARFoundation自学05】人脸追踪（AR Face manager）以及随机换脸的实现

已于 2024-06-14 17:29:45 修改
阅读量1k 收藏 8
点赞数 6
分类专栏： UnityARFoundation零基础教程 文章标签： ar
于 2024-06-06 22:37:33 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/leoysq/article/details/139511300
版权

1. 修改摄像机朝向渲染方式-选中user

这个方式就会调用前置摄像头

2 创建 AR Session、XR Origin，然后在XR Origin上面添加组件

注意：XR Origin 老版本仍然叫 AR Session Origin

接下来在XR  Origin上面添加AR Face Manager组件，如下图！

这个组件需要一个面部可视化预制体，我们在层级面板中创建系统送的预设XR-AR Default Face即可！自己也可以从0创建空物体，添加和他一样的组件也可以。这个AR Default Face需要拖拽到Asset 里面做成蓝色的预制体，才可以被只用࿰

了解本专栏 订阅专栏 解锁全文 超级会员免费看
Unity3d青子
关注
专栏目录
订阅专栏
ARFoundation教程 - 人脸追踪实现
2301_79326559的博客
08-13 305
通过导入必要的依赖项和库，创建AR会话并配置AR Face Manager组件，编写自定义脚本来接收和处理面部数据，最后将脚本附加到AR Session中即可实现人脸追踪。然后，在Inspector窗口中单击"Add Component"按钮，添加"AR Session"和"AR Face Manager"组件。在Inspector窗口中的"AR Face Manager"组件下找到"Face Prefab"属性，并将其设置为你自定义的预制体（例如一个3D模型或者是一个UI画布）。
ARFoundation系列教程：人脸跟踪编程
最新发布
CodeNexus的博客
09-20 59
设置AR会话和相机：在Unity的Hierarchy窗口中，创建一个新的空对象并将其命名为“AR Session”。添加人脸识别功能：在Unity的Hierarchy窗口中，选择“AR Session”对象，然后在Inspector窗口中找到“AR Session”组件的“AR Face Manager”属性。添加人脸识别功能：在Unity的Hierarchy窗口中，选择“AR Session”对象，然后在Inspector窗口中找到“AR Session”组件的“AR Face Manager”属性。
谷歌的ARCore平台现在可以跟踪人脸，拥有更好的内存
tling2019的博客
09-15 416
谷歌正在继续改进其增强现实平台ARCore，并发布了Android和iOS的更新，增加了面部增强功能，并改进了现有的云锚，允许AR对象永久存在。 新增加的面部增强功能，允许用户附加有趣的效果到他们的脸上，跟踪他们的动作，并对他们的表情作出实时反应。这项技术与ios的animojis和memojis相似，但存在关键差异。虽然iOS内置的AR效果需要一个深度感应摄像头（最新iPhone上的TrueDe...
ARFoundation之路－人脸检测增强之二
DavidWang
08-22 3974
版权声明：Davidwang原创文章，严禁用于任何商业途径，授权后方可转载。   前节所述使用“标准模型”匹配人脸以检测人脸姿态是众多人脸姿态检测方法中的一种，实际上，人脸姿态估计还有很多，如柔性模型法、非线性回归法、嵌入法等等 。在计算机视觉中，头部姿势估计是指推断头部朝向，结合AR位置信息构建人脸矩阵参数的能力，有利因素是人体头部运动范围是有限的，可以借此消除一些误差。 （一）人脸姿态   人...
Google ARCore 学习——ARCore与人脸识别相结合
qq_28251907的博客
12-22 3418
Google于8月份正式推出了ARCore，介绍ARCore和人脸结合的Demo。ARCore的基础概念 ARCore与人脸识别接入 加载带mtl的obj模型
ARFoundation系列讲解-教程目录
热门推荐
a451319296的博客
12-22 3万+
一、教程目录 ARFoundation快速入门-01简介 ARFoundation快速入门-02环境搭建 ARFoundation快速入门-03环境配置之iOS ARFoundation快速入门-04环境配置之Android ARFoundation快速入门-05ARKit设备支持列表 ARFoundation快速入门-06ARCore设备支持列表 ARFoundation快速入门-07检查设备支持 ARFoundation快速入门-08平面检..........
ARFoundation系列讲解 - 62 人脸跟踪三
a451319296的博客
05-20 1228
六、实现京剧换脸案例 1.在Unity中新建一个文件夹，命名为“Resources/ FaceTexture”，用来存放我们需要动态加载的脸谱图片。 2.导入脸谱图片到FaceTexture文件夹中。（脸谱图片下载链接：https://hisceneapp.oss-cn-shenzhen.aliyuncs.com/CSDN/FaceTexture.zip） 3.新建一个脚本，命名为“ChangeFace.cs”。（代码如下） using UnityEngine; using UnityEn..
unityar自动识别人脸_AR开发实战项目之人脸识别（实现换脸、人脸涂妆、动作特效）...
weixin_39736934的博客
12-19 3327
一、框架视图Main.png二、关键代码WebCamTextureARSampleusing UnityEngine;using System.Collections;using System.Collections.Generic;using UnityEngine.UI;#if UNITY_5_3 || UNITY_5_3_OR_NEWERusing UnityEngine.SceneMana...
C# 人脸识别,摄像头人脸追踪
07-24
在本文中，我们将深入探讨如何使用C#编程语言结合OpenCvSharp库和虹软算法进行人脸识别和摄像头人脸追踪。OpenCvSharp是OpenCV的一个.NET版本，它为C#开发者提供了丰富的计算机视觉功能，而虹软算法则是一种高效、...
ARFoundation之路－人脸检测增强之一
DavidWang
08-21 3588
版权声明：Davidwang原创文章，严禁用于任何商业途径，授权后方可转载。   在AI物体检测识别领域，最先研究的是人脸检测识别，目前技术发展最成熟的也是人脸检测识别。人脸检测识别已经广泛应用于安防、机场车站闸机、人流控制、安全支付等众多社会领域，也广泛应用于直播特效、美颜、Animoji等娱乐领域。 （一）人脸检测概念   人脸检测（Face Detection）是利用计算机在数字图像或视频中...
AR人脸数据集
11-29
AR人脸数据集共2600张人脸数据（50位男性，50位女性，每人26个样本），已经转为mat文件，可直接使用
AR基础教程 - 实现人脸跟踪的编程指南
ByteWhizX的博客
08-16 185
ARFoundation是Unity官方提供的一个跨平台AR开发框架，它集成了ARCore（Android）和ARKit（iOS），使得开发者可以使用统一的API来构建支持Android和iOS设备的AR应用程序。
ARFoundation系列讲解 - 63 人脸跟踪四
a451319296的博客
05-20 1017
七、人脸区域识别 人脸区域识别，是ARCore特有的功能，ARCore将人脸分为三个区域来识别姿势。（如下图红点标记所示） ARCoreFaceRegion属性 属性 描述 Left Forehead 左前额 Right Forehead 右前额 Nose Tip 以及鼻尖 实现人脸区域识别案例 1.首先下载狐狸面罩图片，..
[AR Foundation] 人脸检测的流程
qq_51533157的博客
09-24 642
当我们给时间faceChanged注册方法后，faceChanged不为空，从而调用我们自己定义的方法OnFaceChanged，同时将ARFaceManager检测到的人脸变化情况保存到 ARFacesChangedEventArgs 类当中，并且作为我们注册的自定义函数的参数，因此在OnFaceChanged函数中我们可以使用检测到的人脸变化。因此，ARFaceManager 只生成了一张人脸，只负责检测的情况，比如是新添加的，还是一直在屏幕里的，还是从屏幕中移除的，给出位置坐标。
AR Foundation系列讲解 - 实现人脸跟踪的编程指南
2301_79331328的博客
09-09 191
然后，在OnEnable方法中，我们订阅了facesChanged事件，该事件在检测到新的脸部、更新已检测到的脸部或移除脸部时触发。然后，在OnEnable方法中，我们订阅了facesChanged事件，该事件在检测到新的脸部、更新已检测到的脸部或移除脸部时触发。然后，在OnEnable方法中，我们订阅了facesChanged事件，该事件在检测到新的脸部、更新已检测到的脸部或移除脸部时触发。最后，在OnFacesChanged方法中，我们可以处理新检测到的脸部、更新已检测到的脸部或移除脸部的逻辑。
ARFoundation系列讲解 - 64 人脸跟踪五
a451319296的博客
05-24 849
八、眼睛姿势 眼睛姿势，主要是识别和跟踪左眼和右眼的位置、旋转角度。 实现眼睛姿势可视化案例 1.创建一个空物体命名为“Eye Pose Prefab”，在空物体下创建3个轴的模型。（模型大小根据自己需要设置） 2.在Eye Pose Prefab对象上，添加AR Face脚本。并制作成为预制件，从Hierarchy面板中删除。 3.新建一个脚本，命名为“EyePoseVisualizer.cs”。（代码如下） using UnityEngine; using Uni...
ARFoundation系列教程 - 实现人脸跟踪
TechRoar的博客
08-13 287
接下来，我们将创建一个空的场景，并将一个AR Session组件添加到场景中的主摄像机上。ARFoundation是一个强大的工具包，它结合了ARKit和ARCore的功能，使我们能够在多个平台上轻松构建增强现实应用程序。然后，我们将创建一个UI界面，用于显示检测到的人脸信息。在Start()方法中，我们需要获取对ARFaceManager和Text组件的引用。在上述代码中，我们将获取第一个检测到的人脸，并使用其顶点、三角形、法线和纹理坐标的数量来更新UI文本。首先，我们需要引入所需的命名空间。
unity arcore_Unity的手持式AR生态系统：AR Foundation，ARCore和ARKit
culiao6493的博客
09-08 591
unity arcoreA lot has happened since we first announced the AR Foundation package for multi-platform handheld AR development. We want to take this opportunity to share how the package has evolved sinc...
用face_recognition库实现无缝换脸的python程序
05-22
要实现无缝换脸的Python程序，可以使用`face_recognition`库和`OpenCV`库。下面是一个简单的程序示例： ```python import face_recognition import cv2 # 加载图片和模型 image1 = face_recognition.load_image_file("image1.jpg") image2 = face_recognition.load_image_file("image2.jpg") face_encoding1 = face_recognition.face_encodings(image1)[0] face_encoding2 = face_recognition.face_encodings(image2)[0] # 识别人脸位置 face_locations1 = face_recognition.face_locations(image1) face_locations2 = face_recognition.face_locations(image2) # 获取人脸关键点 landmarks1 = face_recognition.face_landmarks(image1, face_locations1) landmarks2 = face_recognition.face_landmarks(image2, face_locations2) # 创建一个空白的图像，大小与第一张图片相同 output_image = cv2.imread("image1.jpg") # 将第二张图片的人脸替换到第一张图片上 for face_location2, landmark2 in zip(face_locations2, landmarks2): # 计算换脸后的人脸位置和大小 top, right, bottom, left = face_location2 width = right - left height = bottom - top center = (left + width//2, top + height//2) # 对第二张图片的人脸进行仿射变换 M = cv2.estimateAffinePartial2D( src=landmark2["chin"], dst=landmarks1[0]["chin"], method=cv2.RANSAC)[0] warped_image2 = cv2.warpAffine( image2, M, (output_image.shape[1], output_image.shape[0])) # 将换脸后的人脸复制到空白图像上 mask = 255 * np.ones(warped_image2.shape, warped_image2.dtype) center = (left + width//2, top + height//2) output_image = cv2.seamlessClone( warped_image2, output_image, mask, center, cv2.NORMAL_CLONE) # 显示结果 cv2.imshow("Output Image", output_image) cv2.waitKey(0) cv2.destroyAllWindows() ``` 这个程序首先加载两张图片和人脸模型，然后使用`face_recognition`库识别出两张图片中的人脸位置和关键点。接下来，程序对第二张图片的人脸进行仿射变换，将其转换为与第一张图片中人脸位置和大小相同的形状。最后，程序使用`OpenCV`库的`seamlessClone`函数将换脸后的人脸复制到空白图像上，并显示结果。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Unity3d青子

难题的解决使成本节约，求打赏

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值