python+unity表情驱动一

最新推荐文章于 2024-01-15 16:17:28 发布
最新推荐文章于 2024-01-15 16:17:28 发布
阅读量1.9k 收藏 20
点赞数
分类专栏： python应用 文章标签： 人脸识别
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_44870829/article/details/114127115
版权
本文介绍了使用Python进行人脸识别，识别68个关键点，并通过本地端口将数据传输到Unity，利用C#脚本接收并反馈到Unity人物模型，以实现虚拟人物表情控制。提供了相关视频链接、代码资源下载及运行效果展示。
摘要由CSDN通过智能技术生成

python+unity表情驱动工具一

引言

最近看到一个视频关于python控制unity人物表情的视频，大体思路是使用python控制摄像头进行人脸识别，识别68个关键点，再将识别后的数据通过本地端口传递给unity，unity中的脚本是使用C#编写的，C#进行端口数据的接收人脸数据，再将数据反馈到unity中的人物模型上，以达到控制虚拟人物表情的功能。

源视频链接如下：
https://www.youtube.com/watch?v=KOFOGIElcGU&list=PLDV2CyUo4q-JFGrpG595jMdWZLwYOnu4p&index=2
B站视频链接如下：
https://www.bilibili.com/video/av971767208
python代码：https://github.com/kwea123/VTuber_Unity
下载后的VTuber_Unity文件如下：

ui界面

在这里插入图片描述

了解本专栏 订阅专栏 解锁全文 超级会员免费看
吾名招财
关注
专栏目录
订阅专栏
3D人物说话时的嘴部动作与表情与语音如何配合到一起的
zhangzhechun的专栏
03-18 1033
最后，使用Play方法播放动画剪辑。在程序中，可以使用3D引擎的API将混合形变动画剪辑加载到人物模型上，并使用音频分析库对音频进行处理，提取音频的声音频谱信息。然后，根据声音频谱信息，计算每个形状关键帧的权重，并将其应用于模型的面部和嘴部形状上，从而实现人物模型的嘴部动作和面部表情与音频的自然配合。该技术通过预先录制不同的嘴部形状和面部表情，并将其存储为形状关键帧，然后根据音频的声音频谱分析结果来控制形状关键帧的权重，从而实现嘴部动作和面部表情的自然过渡。
python+unity手势控制地球大小
最新发布
qq_30895747的博客
06-18 357
python实现手势控制地球大小
python+unity表情驱动二（打包成exe）
qq_44870829的博客
02-28 730
python+unity表情驱动工具二（打包成exe）使用pyinstaller在控制台打包工具的使用效果 使用pyinstaller在控制台打包 这里并没有使用auto-py-to-exe界面工具进行打包，因为在打包的时候出现了错误，打包成exe后会报错弹出警告框，尽管不影响后面程序的运行，但还是比较影响使用，就在网上找到了解决方法。 所报的错误如下所示： 此错误的解决方案参考链接： https://blog.csdn.net/weixin_43218120/article/details/108596
anime.js 图片位移动画_在Unity中实现角色的表情动画
weixin_39849070的博客
11-25 363
前段时间研究3D智能语音助手的时候，顺路研究了Unity中的角色表情，现在把实现方式分享给大家。软件准备本人当时做研究的时候使用的是以下软件：FaceGen Modeller：用来制作角色头部模型的小工具，并且可以捏脸、制作各种表情，使用起来也很简单。FaceGen Modeller​facegen.comMaya：这个大家都很熟，就不用介绍了，主要用来制作Blend Shape（下面会讲）。Un...
基于unity的卡通角色驱动(有问题可加Q群583442643)
12-15
具体环境安装操作流程可看链接：https://pan.baidu.com/s/1Q7V2Fz_cv4Sjsam_tbRD4g?pwd=bing 提取码：bing 基于python的flask工具构建服务端，进行3D姿态和人脸关键点相关推断计算，然后在unity构建卡通角色的人脸和人体的驱动客户端。博客可见https://blog.csdn.net/zb1165048017/article/details/109834126 注意先运行server文件夹下的run_server.bat，相关python环境请自行安装。然后再在unity中打开firstscene客户端。
Unity人脸识别，基于OpenCvForUnity插件，实现摄像头画面通用人脸识别功能，适合小白入门（二）
GottaYiWanLiu的博客
06-10 7581
上一篇讲到如何在Unity中识别人脸位置但是不能区分id，本文将说明如何通过自定义训练的方式，实现识别不同的人脸，也就是能够区分出张三是张三，李四是李四 核心思想，就是利用opencv 3.x自带的工具： opencv_createsamples.exe opencv_traincascade.exe 利用此工具，训练出我们需要的人脸数据 然后再将上一篇博客中提到的xml文件...
【unity学习笔记】语音驱动blendershape
yljwhat的博客
01-15 1056
Queue Processor（必须加此脚本）：控制前三个组件的脚本。1.选择小人，点击添加组件。2.分别对组件进行设置。
基于python使用mediapipe完成手部面部的识别 unity端驱动虚拟人物源码.zip
04-25
在本项目中，我们主要探讨如何利用Python的Mediapipe库进行手部和面部识别，并将这些识别结果应用于Unity引擎中驱动虚拟人物。Mediapipe是一个强大的开源跨平台解决方案，它集成了多种计算机视觉任务，如物体检测、...
Unity C# 之 Azure 微软SSML语音合成TTS流式获取音频数据以及表情嘴型 Animation 的简单整理
仙魁XAN
08-16 3238
Unity 工具类，自己整理的一些游戏开发可能用到的模块，单独独立使用，方便游戏开发。本节介绍，这里在使用微软的Azure 使用SSML进行SS语音合成的音频，并且获取表情嘴型Animation 数据，并且保存到本地，在特定的情况下，用于本地读取音频和表情嘴型Animation 数据，直接使用，避免可能网络访问造成的延迟问题，这里简单说明，如果你有更好的方法，欢迎留言交流。语音合成标记语言 (SSML) 是一种基于 XML 的标记语言，可用于微调文本转语音输出属性，例如音调、发音、语速、音量等。
VTuber_unity_exe.rar
02-27
经过installer打包后的界面文件
unity语音识别并控制任务作出相应动作
08-09
unity语音识别并控制任务作出相应动作，很好用的一个demo
OculusLipSync unity 面部驱动
05-24
OculusLipSync unity 面部驱动
卡通角色表情驱动系列二
风翼冰舟的博客
07-17 4094
前言 之前介绍了使用传统算法求解BS系数的表情驱动方法，其中提到过的三种方法之一是基于网格形变迁移做的，那么这篇文章就是对《Deformation Transfer for Triangle Meshes》做表情驱动的解析。 国际惯例，参考博客： 论文原文《Deformation Transfer for Triangle Meshes》 大佬的代码 本博文实现几乎照搬大佬代码，但是大佬代码实在是太多太复杂了，搞了很多库和函数，还有很多重复的实现，所以本博客一边解析论文，一边按照大佬的代码简化实现，把几
Unity3d C#实现语音合成(TTS)试听并选择路径保存下载功能（含源码）
qq_33789001的博客
04-29 1740
Unity3d C#实现语音合成试听并选择路径保存下载功能（含源码）前言准备工作注册账号下载LitJson实现功能认证与鉴权语音合成选择路劲保存试听功能项目源码 前言 计划实现语音的合成功能，将文字转语音，支持试听和保存功能，经过一段时间的研究，发现搜狗可以使用，用100–200万字的免费额度： 决定就对接搜狗接口完成这些功能。 效果： 准备工作 可以直接参考官方指南：https://ai.sogou.com/doc/?url=/docs/content/overview/guides/ 注册账号 前往
unitypython_Unity 与 Python 实现TCP通讯
weixin_39668571的博客
12-03 189
from PyQt5.QtCore import * from PyQt5.QtWidgets import * from PyQt5.QtNetwork import * import string import copy class Server(): def __init__(self): self.tcpServer = None s...
【游戏开发&Unity】捏脸系统（附源码）
weixin_30752377的博客
03-17 4147
本着“没有捏脸系统算什么RPG”的想法，着手做一个2d简易捏脸demo。其实换装游戏都差不多啦~ github代码地址：Simple-Character-Edit-System（Unity版本：5.6.x） 成品如下图： 图是我二十分钟糊出来的（捂脸），喜欢绿头发=3= 转载于:https://www.cnblogs.com/liez/p/65...
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

吾名招财

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值