移植了OVRLipSync到UE4

最新推荐文章于 2024-05-17 09:45:49 发布
最新推荐文章于 2024-05-17 09:45:49 发布
阅读量8.4k 收藏 11
点赞数 3
分类专栏： 视频音频 文章标签： LipSync UE4 Unity
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xoyojank/article/details/52636952
版权

OVRLipSync 是Oculus为Unity开发的一个口型同步插件, 能够实时处理语音数据转换成相应的口型, 按照它的规范, 一共有15个口型:
这里写图片描述
这里写图片描述
这里写图片描述
上面的截图是基于MorphTarget的, 这个插件也提供了基于贴图的表现形式:
这里写图片描述
这里写图片描述

通过分析插件可以知道, 核心算法封装在OVRLipSync.dll里, 这个dll经过我测试是可以独立运行的:
这里写图片描述

之前也有个人尝试把它整合进UE4: https://github.com/ChairGraveyard/ovrlipsync-example
不过这个人没有把效果调对

最低0.47元/天 解锁文章
xoyojank
关注
  • 3
    点赞
  • 踩
  • 11
    收藏
    觉得还不错? 一键收藏
  • 7
    评论
专栏目录
王祢&李文磊-将桌面级VR通过Vulkan和UE4移植到移动平台
09-25
该文档来自MDCC 2016中国移动开发者大会。王祢&李文磊发表了题为“将桌面级VR通过Vulkan和UE4移植到移动平台”的主题演讲，欢迎下载！
ue4血迹贴花
04-14
虽然UE4和U3D是两个不同的游戏引擎，但某些资源，如2D纹理，它们的基本格式是通用的，因此可以相互移植。不过，实际应用时，开发者可能需要对材质、粒子系统等部分进行适配，以确保在不同引擎中的表现一致。 文件...
基于Unity尝试唇同步/LipSync/OVRLipSync（附Demo及源码）
热门推荐
qq_29261149的博客
08-03 1万+
编者言 在视频创作的时候，这个小破站的审核制度有点气人。所以想着写一个工具，以相对较小的成本，尽可能快的加工视频。算是在唇同步技术上的一个小尝试。 目的和初步的想法 基于Unity3D开发语音输入与3D模型开发唇同步软件，以此来丰富个人视频创作的内容，解决个人创作资源相对匮乏的局面，让个人可以把更多的精力投入到内容的组织上去，是这个软件所要解决的问题。 在Unity3D中加载已经组织好的视频，利用Oculus Lipsync视频中的音频所拥有的面部动作，并在选中的模型上播放该动作，并逐帧录制导出
OVRlipsync嘴型匹配技术在UE4的应用
晨蓝的博客
07-15 4792
OVRlipsync在UE4中的测试 官方文档: https://developer.oculus.com/documentation/unreal/audio-ovrlipsync-using-unreal/ 此插件可用于实时模拟嘴型，或模拟指定音频的嘴型。 使用： 使用建模软件制作几个基本口型的变形(MorphTarget)(unity里叫blendshapes)(blender里叫...
探秘高效Unity唇同步工具：uLipSync
最新发布
gitblog_00099的博客
05-17 341
探秘高效Unity唇同步工具：uLipSync 项目地址:https://gitcode.com/hecomi/uLipSync 在游戏开发中，尤其是角色交互和叙事类游戏，真实的语音同步是提升沉浸感的关键。今天，我们将向您推荐一款名为uLipSync的开源工具，它为Unity开发者提供了高效且易于使用的唇同步解决方案。 项目介绍 uLipSync是一款专为Unity设计的资产，利用Unity的Jo...
基于OVRLipSync的虚拟人口型匹配技术的2D实现
kamel_wang的专栏
07-27 1981
基于OVRLipSync实现的虚拟人口型匹配技术，2D角色，Spine创建
Unity实现文字转语音并且与人物模型口型同步
weixin_43559607的博客
09-28 4115
今天我们用Unity实现文字转语音并且与人物模型口型同步，要实现这个功能，我们需要用到两个插件：语音口型同步“OVRLipSync”和文字转语音“RTVoice”。
Unity语音口型学习（Oculus发布的OVRLipSync示例）
悲欢离合的博客
08-23 7879
了解该部分可以参考Oculus发布的OVRLipSync示例。 https://developer3.oculus.com/downloads/ 将下载下来的package导入Unity，可以运行官方Demo。 该Demo中模型的口型动作，可以通过 Maya Cinema4D 3D Studio Max Blender Cheetah 3D XSI Any tool that s
如何移植Linux到晶心平台
01-19
鉴于越来越多使用者将Linux移植到晶心平台（Andes Embedded）上（AndesCore N12或N10），本文的目的在协助使用者快速、有效率的将Linux 移植到自建的FPGA板子上（CPU是AndesCore 的 N12或N10）。笔者曾协助多家公司...
从STM32F4xx移植到GD32F4xx
06-14
然而，由于厂商不同，它们在寄存器配置、外设接口、固件库等方面存在差异，因此在从STM32F4xx移植到GD32F4xx时，需要注意以下几个关键知识点： 1. **内核与架构**：虽然两者都是基于Cortex-M4，但具体的内核版本...
OculusLipSync unity 面部驱动
05-24
OculusLipSync unity 面部驱动
OVRLipSync.zip
11-10
超好用的口型插件
OVRLipSync
10-09
OVRLipSync 是Unity3d的一个音频口型插件，可以根据音频波形去播放对应的模型口型动画。
OVRLipSyncPlugin OVRLipSync插件：同步虚拟头像口型和声音
12-20
没试过,下载需谨慎
OVRLipSyncforUnity
03-19
OVRLipSync 是一个音频口型插件，可以根据读取的输入音频去播放人物对应的口型动画，即设置人物的Blendshape的权重值的Unity插件
剥离UE4的WebBrowser组件为独立插件（含动态库）
07-15
要将WebBrowser剥离为插件，你需要按照UE4的插件模板创建一个新的插件项目，然后将WebBrowser的源码移植到其中。 4. **动态库的构建**：剥离后，WebBrowser组件应该被编译为一个动态链接库（DLL）。这需要配置工程...
关于用pycharm启动Fay项目，连接ue5数字人模型，数字人没反应的问题
qq_37402556的博客
10-19 1246
关于用pycharm启动Fay项目，连接ue5数字人模型，数字人没反应的问题。
Unity发布安卓包之后出现dll无法调用问题
菰城茧的博客
09-13 1332
今天出安装包出现了一个问题，在这里记录下。 游戏中使用了一个用.net 3.5写的dll，用来做前后端共享代码的，在unity编辑器上可以正常运行游戏，但是除了apk包之后在安卓机上运行就会出现TypeLoadException，无法读取dll中的类。 经过各种检查发现，原因是该dll的后缀是.Dll而不是.dll。这个大小写区分在pc上没有问题，但是打包到安卓之后就会造成无法识别，不知道是安卓
stm32f4移植到gd32f4
05-10
stm32f4和gd32f4都是基于arm cortex-M4内核的微控制器，其指令集和寄存器都基本一致，因此在移植过程中，大部分的移植工作都是针对外设和底层库的。 首先，要对gd32f4的外设进行熟悉和比较。stm32f4和gd32f4的许多外设都是相同的，但也有一些外设的寄存器地址和控制寄存器的位定义略有不同。这就需要我们根据gd32f4的技术手册进行修改和调整，以确保代码可以在gd32f4上正确运行。 其次，需要对底层库进行移植。stm32f4的底层库是基于设备寄存器编写的，而gd32f4的底层库使用的是标准外设库，也就是cortex-M4通用的底层库。因此，移植时需要对底层库进行适配，以便支持gd32f4所需的外设。 移植完成后，还需要进行测试和调试。我们需要测试代码在gd32f4上的稳定性和性能。在测试过程中，可以借助在线调试工具和示波器等工具进行调试，以找出问题并解决。 需要注意的是，stm32f4和gd32f4虽然指令集大致一致，但芯片本身的电路设计、特性和性能还是存在差异的。因此，在移植过程中，需要注意这些差异，避免因为硬件不兼容等问题导致代码运行不稳定甚至崩溃。 综上所述，stm32f4移植到gd32f4的过程不是很复杂，主要是针对外设和底层库的适配和调整。移植成功后，可以为gd32f4提供更多的代码资源和支持，进一步提升开发效率和产品质量。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 7
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值