ue4 播放程序化生成的声音

最新推荐文章于 2024-04-26 15:20:04 发布
最新推荐文章于 2024-04-26 15:20:04 发布
阅读量3.3k 收藏 9
点赞数 2
分类专栏： ue4 ue4 学习与实践
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u010385624/article/details/102779686
版权

首先了解音频有几个重要的概念:

采样频率：每秒钟采样次数,采样率越高，数字波形的形状越接近原始模拟波形，通常的采用频率有22050，44100，48000，96000

采样位数：采样声波时，为每个采样指定最接近原始声波振幅的振幅值。 采样位数提高可提供更多可能的振幅值，产生更大的动态范围、更低的噪声基准和更高的保真度。通常的采样位数有8bit，16bit，24bit，32bit。

通道数：即声音的通道的数目。常有单声道和立体声之分，单声道的声音只能使用一个喇叭发声（有的也处理成两个喇叭输出同一个声道的声音），立体声可以使两个喇叭都发声（一般左右声道有分工） ，更能感受到空间效果，当然还有更多的通道数。

 

 

PCM :PCM（Pulse Code Modulation----脉码调制录音)。所谓PCM录音就是将声音等模拟信号变成符号化的脉冲列，再予以记录。PCM信号是由[1]、[0]等符号构成的数字信号，而未经过任何编码和压缩处理。与模拟信号比，它不易受传送系统的杂波及失真的影响。动态范围宽，可得到音质相当好的影响效果。

 

WAV：wav是一种无损的音频文件格式，WAV符合 PIFF(Resource Interchange File Format)规范。所有的WAV都有一个文件头，这个文件头音频流的编码参数。WAV对音频流的编码没有硬性规定，除了PCM之外，还有几乎所有支持ACM规范的编码都可以为WAV的音频流进行编码。

WAV和PCM的关系

WAV可以使用多种音频编码来压缩其音频流，不过我们常见的都是音频流被PCM编码处理的WAV，但这不表示WAV只能使用PCM编码，MP3编码同样也可以运用在WAV中，和AVI一样，只要安装好了相应的Decode，就可以欣赏这些WAV了。在Windows平台下，基于PCM编码的WAV是被支持得最好的音频格式，所有音频软件都能完美支持，由于本身可以达到较高的音质的要求，因此，WAV也是音乐编辑创作的首选格式，适合保存音乐素材。因此，基于PCM编码的WAV被作为了一种中介的格式，常常使用在其他编码的相互转换之中，例如MP3转换成WMA。

简单来说：pcm是无损wav文件中音频数据的一种编码方式，但wav还可以用其它方式编码。

 

网上很多资料都是移除wav文件的头部44个字节后，获取的就是pcm。但这样不能用于全部情况，具体请看这里

http://www-mmsp.ece.mcgill.ca/Documents/AudioFormats/WAVE/WAVE.html。

 

UE中要播放动态生成的声音，可以使用USoundWaveProcedural 派生类生成波形资源，也可以使用USynthComponent

派生新的组件输出动态声音。 主要是 通过USoundWave的函数GeneratePCMData，在该函数中获取需要播放的声音数据。

 

UCLASS(hidecategories=Object, editinlinenew, BlueprintType)

class ENGINE_API USoundWave : public USoundBase

{

       /**

        * This is only used for DTYPE_Procedural audio. It's recommended to use USynthComponent base class

        * for procedurally generated sound vs overriding this function. If a new component is not feasible,

        * consider using USoundWaveProcedural base class vs USoundWave base class since as it implements

        * GeneratePCMData for you and you only need to return PCM data.

        */

        virtual int32 GeneratePCMData(uint8* PCMData, const int32 SamplesNeeded) { ensure(false); return 0; }

       /**

       * Return the format of the generated PCM data type. Used in audio mixer to allow generating float buffers and avoid unnecessary format conversions.

       * This feature is only supported in audio mixer. If your procedural sound wave needs to be used in both audio mixer and old audio engine,

       * it's best to generate int16 data as old audio engine only supports int16 formats. Or check at runtime if the audio mixer is enabled.

       * Audio mixer will convert from int16 to float internally.

       */

        virtual Audio::EAudioMixerStreamDataFormat::Type GetGeneratedPCMDataFormat() const { return Audio::EAudioMixerStreamDataFormat::Int16; }

}

需要模块的build.cs 中加入依赖库 "AudioMixer"

PublicDependencyModuleNames.AddRange(new string[] { "Core", "CoreUObject", "Engine", "InputCore", "AudioMixer"});

 

第一种：使用USynthComponent派生组件进行声音的输出：

 

class MOTIONMOCAP_API UMocapAudioComponent : public USynthComponent

{

       GENERATED_BODY()

       // Called when synth is created

       virtual bool Init(int32& SampleRate) override;

       // Called to generate more audio

       virtual int32 OnGenerateAudio(float* OutAudio, int32 NumSamples) override;

protected:

       UPROPERTY(BlueprintReadOnly, EditAnywhere, meta = (ClampMin = "8000 ", ClampMax = "192000"))

       int32 ResSampleRate = 44100;

       UPROPERTY(BlueprintReadOnly, EditAnywhere, meta = (ClampMin = "1", ClampMax = "2"))

       int32 ResNumChannels = 2;

};

 

// Fill out your copyright notice in the Description page of Project Settings.

#include "MocapAudioComponent.h"

#include "AudioReceiveThread.h"

bool UMocapAudioComponent::Init(int32& SampleRate)

{

       SampleRate = ResSampleRate;

       NumChannels = ResNumChannels;

       return true;

}

 

int32 UMocapAudioComponent::OnGenerateAudio(float* OutAudio, int32 NumSamples)

{

         for(int i=0; i < NumSamples/NumChannels; i++){

            for(int j = 0; j <NumChannels; j++ ){

                   //获取每个信道的采样数据,这里仅是简单展示数据关系

                OutAudio[i*NumChannels + j]= FMath::RandRange(-1.0f, 1.0f);

            }

         }

       return NumSamples;

}

 

 

bool UMocapAudioComponent::Init(int32& SampleRate)

{

       // Initialize the DSP objects

       SampleRate = ResSampleRate;

       NumChannels = ResNumChannels;

       return true;

}

 

在该组件中的Init函数中，我们需要设置SampleRate和NumChannels。该设置决定了输出音频的采样率和音频的通道数量。

 

int32 UMocapAudioComponent::OnGenerateAudio(float* OutAudio, int32 NumSamples)

{

         for(int i=0; i < NumSamples/NumChannels; i++){

            for(int j = 0; j <NumChannels; j++ ){

                   //获取每个信道的采样数据

                OutAudio[i*NumChannels + j]= FMath::RandRange(-1.0f, 1.0f);

            }

         }

       return NumSamples;

}

 

在OnGenerateAudio中，我们根据NumSamples 获取指定数量的声音数据，该值是每个声道需要的采样数*声道数。  OutAudio是存放输出数据的地址。返回值返回的是实际获得的数据长度。声音的振幅为-1到1. 这里的 OnGenerateAudio 并不是主线程中调用的，我们在使用时需要注意。

第二种：使用USoundWaveProcedural派生类生成波形资源，然后使用AudioComponent输出：

 

#include "CoreMinimal.h"

#include "Sound/SoundWaveProcedural.h"

#include "DSP/Osc.h"

#include "NewSoundWaveProcedural.generated.h"

/**

 *

 */

UCLASS()

class DEMOPROJECT_API UNewSoundWaveProcedural : public USoundWaveProcedural

{

       GENERATED_BODY()

public:

       UNewSoundWaveProcedural(const FObjectInitializer& ObjectInitializer);

       virtual int32 OnGeneratePCMAudio(TArray<uint8>& OutAudio, int32 NumSamples) override;

       virtual Audio::EAudioMixerStreamDataFormat::Type GetGeneratedPCMDataFormat() const override;

protected:

       Audio::FOsc Osc;

};

 

UNewSoundWaveProcedural::UNewSoundWaveProcedural(const FObjectInitializer& ObjectInitializer)

       :Super(ObjectInitializer)

{

       NumChannels = 2;

       SampleRate = 44100;

         //下面的是简单的测试声音生成设置。

       Osc.Init(SampleRate);

       Osc.SetFrequency(440.0f);

       Osc.Start();

}

int32 UNewSoundWaveProcedural::OnGeneratePCMAudio(TArray<uint8>& OutAudio, int32 NumSamples)

{

       OutAudio.Reset();

       OutAudio.AddZeroed(NumSamples * sizeof(int16));

       int16* OutAudioBuffer = (int16*)OutAudio.GetData();

       for (int32 i = 0; i < NumSamples; ++i)

       {

              OutAudioBuffer[i] = (int16)(32767.0f * FMath::Clamp(Osc.Generate(), -1.0f, 1.0f));

       }

       return NumSamples;

}

Audio::EAudioMixerStreamDataFormat::Type UNewSoundWaveProcedural::GetGeneratedPCMDataFormat() const

{

       return Super::GetGeneratedPCMDataFormat();

}

 

需要指定波形文件的NumChannels和SampleRate。 然后OnGeneratePCMAudio 中获取输出的声音数据。NumSamples同样是每个声道需要的采样数*声道数。 OutAudio中，需要存储的数据是与GetGeneratedPCMDataFormat有关的。 默认是Audio::EAudioMixerStreamDataFormat::Int16。从上面的代码我们可以看到OutAudio最终获取的数据长度其实是NumSamples*sizeof(int16)。默认OnGeneratePCMAudio是在主线程中的。如果设置了bCanProcessAsync = true; 则OnGeneratePCMAudio 将运行于线程池。

sork
关注
  • 2
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 7
    评论
专栏目录
[UE4]C++代码实现播放USoundCue和USoundWave以及关闭
玄冬Wong
02-02 2972
播放SoundCue 1，音频文件必须是wav，导入工程后 2，新建一个SoundCue资源：右键 -》 Sounds -》 SoundCue 3，将SoundWave摔了拖入编辑器，并连接上Output节点。这样SoundCue就创建完成。如果需要循环播放指定SoundWave，选中后勾选Looping  4，在构造函数中加载该SoundCue static Constructor...
UE4_LEJSON蓝图插件v4.19
07-23
在UE4中，蓝图系统允许开发者通过图形化的方式创建和编辑游戏逻辑，极大地降低了编程门槛。而LEJSON蓝图插件正是为了解决UE4中处理JSON数据的问题，它为UE4提供了便捷的JSON解析和操作功能。 LEJSON蓝图插件v4.19是...
PLGTest:UE4中程序内容生成的C++实现
06-21
测试 在 UE4 中使用 C++ ##Screenshots 实现程序内容生成：
UE4 音效声道动态切换
最新发布
weixin_48995813的博客
04-26 106
ue4 的声道动态切换方式
UE4声音可视化蓝图
designerchu的博客
04-03 734
UE4 从文件导入音频文件
东门吹白雪的博客
12-16 2072
UE4 C++导入音频文件 .h UFUNCTION(BlueprintCallable, Category = "NormalFunctionLibrary|InputSound") static class USoundWave* GetSoundWaveFromFile(const FString& filePath); .cpp #include "Sound/SoundWave.h" USoundWave* GetSoundWaveFromFile(const FStrin
UE4 获取关卡最终合成的音频数据
krabbit1997的博客
04-03 348
众所周知，要让某个Actor发出声音，只需要给它添加一个AudioComponent，然后实现相应方法。但如果反过来，要获取UE关卡中已有的声音，然后将其写成文件或者进行网络广播，该怎么做？UE给用户提供了订阅者模式的框架，大致思路如下：1）写一个类继承自2）注册/反注册3）实现其唯一的接口。
UE C++ Windows平台调用讯飞语音合成接口
qq_31042143的博客
05-21 1728
每次合成语音时，调用QTTSTextPut，然后循环调用QTTSAudioGet持续获取合成音频数据，直到数据全部接收完成，调用QTTSSessionEnd结束本次语音合成任务。
UE4自适应地图
04-23
5. **程序化生成**：UE4的蓝图系统可以用来创建复杂的逻辑，实现地图的程序化生成。这使得地图可以在游戏进程中随机生成，或者根据玩家的选择和进度动态扩展，提供无限的重玩价值。 6. **导航网格**：UE4的导航网格...
UE4安卓开发环境配置
12-15
UE4 安卓开发环境配置 UE4 是 Unity Engine 4 的缩写，是一个功能强大且...但是，只要按照正确的步骤进行配置，就可以轻松地开发 UE4 安卓应用程序。本文旨在帮助读者快速地配置 UE4 安卓开发环境，从而提高开发效率。
UnrealHttpServer：带有HTTP服务器的UE4插件
02-06
该插件的核心功能在于提供了一个内置的HTTP服务器，允许UE4应用程序作为服务器端点，能够接收和响应来自HTTP客户端（如网页、移动应用或其他服务器）的请求。这在实现多人在线游戏、实时数据交换、远程控制等场景中...
UE4 音频学习笔记
liuzhimu2018的博客
11-30 3446
UE4音频的要求和规范 1，音频文件需要十六位，采样率可以任选 2，支持的格式有WAV， AIFF， FLAC，Ogg Voribis，WAV是最常用的。 3，UE4支持环绕声格式5.1或者Ambisonic 4，在进行音频制作之前要先进行规划，首先要对文件进行分类，然后设置文件的命名规范，通过使用统一的命名规范，可以在后期管理过程中，以及在制作过程中很方便的进行控制。 制作环境音效 1，在制作环境音效的时候可以直接把一个SoundWave拖入到场景中，可以不使用SoundCue 2，环境音效一般都会有根据
UE C++ 播放SoundWave音乐
jfengsky的博客
12-02 1917
#include "Sound/SoundWave.h" #include "Kismet/GameplayStatics.h" // ...... auto cls = StaticLoadObject(UObject::StaticClass(), nullptr, TEXT("SoundWave'/Game/Assets/Sound/song16_master.song16_master'")); USoundWave* StartBGM = Cast<USoundWave>(cls
WebRTC 中的基本音频处理操作
tq08g2z的专栏
12-13 4459
在 RTC，即实时音视频通信中，要解决的音频相关的问题，主要包括如下这些： 音频数据的采集及播放。 音频数据的处理。主要是对采集录制的音频数据的处理，即所谓的 3A 处理，AEC (Acoustic Echo Cancellation) 回声消除，ANS (Automatic Noise Suppression) 降噪，和 AGC (Automatic Gain Control) 自动增益控制。...
基于C++代码的UE4学习（四十六）——为坦克开火添加声音系统
虎牙维护世界和平
08-26 882
声音播放涉及两种方式，一种是直接播放Wave，一种是通过cue进行播放。 先讲解第一种，直接播放音频文件（必须为Wave）。 USoundWave* fireSound; 添加在头文件中。 在源文件中加载声音资源。 1 auto fireSoundAsset = ConstructorHelpers::FObjectFinder<USoundWave>(TEXT("SoundWave'/Game/BP/fireSound.fireSound'")); 2 i...
UE4中如何循环播放动态加载的指定文件夹声音
xiao__sha的博客
09-14 806
2.创建一个ACTOR类，添加组件MediaSound，并在细节处设置其MediaPlayer为上一步创建的MediaPlayer。如果动态修改导入引擎中的声音循环设置，也是可以通过c++暴露LOOPING这个接口就可以。那么动态加载引擎外的声音文件来设置循环播放，该如何操作呢。这里我分享一个方法，如果大家有更好的方法可以交流。3.封装一个方法，输入的三个变量分别是声音文件地址，是否循环，音量。我这个方法是利用引擎的MediaPlayer来实现的。5.方法中传入相应参数即可。4.获取指定文件夹的声音。
ue4 设置关卡加载loading界面，全屏影片播放，游戏开头影片播放
pzh的博客
07-03 8369
游戏开头影片播放 游戏开头可以添加开始的视频，用以等待游戏的第一个关卡的加载。 在项目的Movies中设置 waitforMoviestoComplete勾选时，是指即便关卡加载完成。影片仍然播放直到结束。 MoiesAreSkippable勾选室，是指当关卡加载完成后，如果影片还在播放。那么可以点击屏幕结束影片播放。 StartupMovies 是所...
Audio - UE4中的音效系统
GT的虚幻引擎文档
09-20 5097
 本人的一篇学习笔记，总结Content Example中的音效相关，UE4音频音效相关，虚幻引擎Audio相关：  
UE4流送方案对比
新缸中之脑
03-13 2614
本文介绍在虚幻引擎上实现像素流送的各种可能方案并给出对比报告。 1、简介 自 2018 年底以来1，虚幻引擎包含了一个称为像素流送（Pixel Streaming）的系统，通过该系统，来自远程虚幻引擎实例的音频和视觉图像被流式传输到 WebRTC 对端（通常是网络浏览器），而键盘、鼠标和触屏输入则可以从 WebRTC 对端传回，以促进与此 Pixel Streaming Unreal Engine 实例的交互。2 Unreal Engine 的 Pixel Streaming 系统是建立在 WebRTC 之
使用ue4 生成程序化网格
03-27
在UE4中生成程序化网格，您可以使用蓝图和C++两种方法： 使用蓝图： 1. 创建一个Actor，并在其上添加一个静态网格组件。 2. 在蓝图编辑器中，创建一个新的蓝图，并将其设为Actor的子类。 3. 在蓝图中，添加一个Construction Script事件，并连接该事件到一个Sequence节点。 4. 在Sequence节点中，添加一个创建StaticMeshComponent的节点，并将其连接到该Actor的RootComponent上。 5. 添加一个用于设置StaticMeshComponent网格的节点，并将其连接到创建StaticMeshComponent节点上。 6. 添加一个用于设置StaticMeshComponent材质的节点，并将其连接到创建StaticMeshComponent节点上。 7. 添加一个用于设置StaticMeshComponent位置、旋转和缩放的节点，并将其连接到创建StaticMeshComponent节点上。 8. 在Construction Script事件中，添加一个For循环节点，并将其连接到Sequence节点。 9. 在For循环节点中，添加一个用于计算网格位置、旋转和缩放的节点，并将其连接到Sequence节点。 10. 将Sequence节点连接到For循环节点的Body输出。 11. 在蓝图中添加一个自定义事件，并将其命名为GenerateMesh。 12. 在GenerateMesh事件中，添加一个用于生成网格的节点，并将其连接到Sequence节点。 13. 使用Actor蓝图来创建Actor，并调用GenerateMesh事件以生成程序化网格。 使用C++： 1. 创建一个继承自Actor的C++类，并添加一个静态网格组件。 2. 在C++类中，创建一个构造函数，并在其中添加StaticMeshComponent的创建、设置网格、材质和位置、旋转和缩放的代码。 3. 创建一个用于生成网格的函数，并在其中添加计算网格位置、旋转和缩放的代码。 4. 调用生成网格函数以生成程序化网格。 无论您选择哪种方法，都可以使用蓝图或C++来生成程序化网格。这将使您能够动态地创建和修改网格，以实现更多的交互和自定义效果。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 7
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值