鸿蒙HarmonyOS开发实战—多媒体开发（音频开发 一）_鸿蒙音频讲解

最新推荐文章于 2024-07-20 16:09:29 发布
最新推荐文章于 2024-07-20 16:09:29 发布
阅读量860 收藏 11
点赞数 11
分类专栏： 2024年程序员学习 文章标签： harmonyos 音视频 华为
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_84164527/article/details/137937602
版权

先自我介绍一下，小编浙江大学毕业，去过华为、字节跳动等大厂，目前阿里P7

深知大多数程序员，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年最新HarmonyOS鸿蒙全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
img

img
img
htt

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上鸿蒙开发知识点，真正体系化！

由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新

如果你需要这些资料，可以添加V获取：vip204888 （备注鸿蒙）
img

正文

音频播放的主要工作是将音频数据转码为可听见的音频模拟信号并通过输出设备进行播放，同时对播放任务进行管理。

接口说明

音频播放类AudioRenderer的主要接口

接口名描述
AudioRenderer(AudioRendererInfo audioRendererInfo, PlayMode pm)构造函数，设置播放相关音频参数和播放模式，使用默认播放设备。
AudioRenderer(AudioRendererInfo audioRendererInfo, PlayMode pm, AudioDeviceDescriptor outputDevice)构造函数，设置播放相关音频参数、播放模式和播放设备。
start()播放音频流。
write(byte[] data, int offset, int size)将音频数据以byte流写入音频接收器以进行播放。
write(short[] data, int offset, int size)将音频数据以short流写入音频接收器以进行播放。
write​(float[] data, int offset, int size)将音频数据以float流写入音频接收器以进行播放。
write​(java.nio.ByteBuffer data, int size)将音频数据以ByteBuffer流写入音频接收器以进行播放。
pause()暂停播放音频流。
stop()停止播放音频流。
release()释放播放资源。
getCurrentDevice()获取当前工作的音频播放设备。
setPlaybackSpeed(float speed)设置播放速度。
setPlaybackSpeed​(AudioRenderer.SpeedPara speedPara)设置播放速度与音调。
setVolume(ChannelVolume channelVolume)设置指定声道上的输出音量。
setVolume(float vol)设置所有声道上的输出音量。
getMinBufferSize​(int sampleRate, AudioStreamInfo.EncodingFormat format, AudioStreamInfo.ChannelMask channelMask)获取Stream播放模式所需的buffer大小。
getState()获取音频播放的状态。
getRendererSessionId()获取音频播放的session ID。
getSampleRate()获取采样率。
getPosition()获取音频播放的帧数位置。
setPosition​(int position)设置起始播放帧位置。
getRendererInfo​()获取音频渲染信息。
duckVolume​()降低音量并将音频与另一个拥有音频焦点的应用程序混合。
unduckVolume​()恢复音量。
getPlaybackSpeed()获取播放速度、音调参数。
setSpeed(SpeedPara speedPara)设置播放速度、音调参数。
getAudioTime()获取播放时间戳信息。
flush()刷新当前的播放流数据队列。
getMaxVolume()获取播放流可设置的最大音量。
getMinVolume()获取播放流可设置的最小音量。
getStreamType()获取播放流的音频流类型。
开发步骤
  1. 构造音频流参数的数据结构AudioStreamInfo，推荐使用AudioStreamInfo.Builder类来构造，模板如下，模板中设置的均为AudioStreamInfo.Builder类的默认值，根据音频流的具体规格来设置具体参数。

AudioStreamInfo audioStreamInfo = new AudioStreamInfo.Builder()
.sampleRate(AudioStreamInfo.SAMPLE_RATE_UNSPECIFIED)
.audioStreamFlag(AudioStreamInfo.AudioStreamFlag.AUDIO_STREAM_FLAG_NONE)
.encodingFormat(AudioStreamInfo.EncodingFormat.ENCODING_INVALID)
.channelMask(AudioStreamInfo.ChannelMask.CHANNEL_INVALID)
.streamUsage(AudioStreamInfo.StreamUsage.STREAM_USAGE_UNKNOWN)
.build();

复制

以真实的播放pcm流为例：

AudioStreamInfo audioStreamInfo = new AudioStreamInfo.Builder().sampleRate(44100) // 44.1kHz
.audioStreamFlag(AudioStreamInfo.AudioStreamFlag.AUDIO_STREAM_FLAG_MAY_DUCK) // 混音
.encodingFormat(AudioStreamInfo.EncodingFormat.ENCODING_PCM_16BIT) // 16-bit PCM
.channelMask(AudioStreamInfo.ChannelMask.CHANNEL_OUT_STEREO) // 双声道输出
.streamUsage(AudioStreamInfo.StreamUsage.STREAM_USAGE_MEDIA) // 媒体类音频
.build();

复制

  1. 使用创建的音频流构建音频播放的参数结构AudioRendererInfo，推荐使用AudioRendererInfo.Builder类来构造，模板如下，模板中设置的均为AudioRendererInfo.Builder类的默认值，根据音频播放的具体规格来设置具体参数。

AudioRendererInfo audioRendererInfo = new AudioRendererInfo.Builder().audioStreamInfo(audioStreamInfo)
.audioStreamOutputFlag(AudioRendererInfo.AudioStreamOutputFlag.AUDIO_STREAM_OUTPUT_FLAG_NONE)
.bufferSizeInBytes(0)
.isOffload(false)
.sessionID(AudioRendererInfo.SESSION_ID_UNSPECIFIED)
.build();

复制

以真实的播放pcm流为例：

AudioRendererInfo audioRendererInfo = new AudioRendererInfo.Builder().audioStreamInfo(audioStreamInfo)
.audioStreamOutputFlag(AudioRendererInfo.AudioStreamOutputFlag.AUDIO_STREAM_OUTPUT_FLAG_DIRECT_PCM) // pcm格式的输出流
.bufferSizeInBytes(100)
.isOffload(false) // false表示分段传输buffer并播放，true表示整个音频流一次性传输到HAL层播放
.build();

复制

  1. 根据要播放音频流指定PlayMode，不同的PlayMode在写数据时存在差异，详情见步骤7，其余播放流程是无区别的。并通过构造函数获取AudioRenderer类的实例化对象。

  2. 使用构造函数获取AudioRenderer类的实例化对象，其中步骤2、步骤3中的数据为构造函数的必选参数，指定播放设备为可选参数，根据使用场景选择不同的构造函数。

  3. （可选）构造音频播放回调，首先构造对象AudioInterrupt，其中setInterruptListener方法的入参需要实现接口类InterruptListener，setStreamInfo方法使用步骤1的AudioStreamInfo作为入参。然后调用AudioManager类的activateAudioInterrupt(AudioInterrupt interrupt)方法进行音频播放回调注册。代码示例如下：

AudioRenderer renderer = new AudioRenderer(audioRendererInfo, AudioRenderer.PlayMode.MODE_STREAM);
AudioInterrupt audioInterrupt = new AudioInterrupt();
AudioManager audioManager = new AudioManager();
audioInterrupt.setStreamInfo(audioStreamInfo);
audioInterrupt.setInterruptListener(new AudioInterrupt.InterruptListener() {
@Override
public void onInterrupt(int type, int hint) {
if (type == AudioInterrupt.INTERRUPT_TYPE_BEGIN
&& hint == AudioInterrupt.INTERRUPT_HINT_PAUSE) {
renderer.pause();
} else if (type == AudioInterrupt.INTERRUPT_TYPE_BEGIN
&& hint == AudioInterrupt.INTERRUPT_HINT_NONE) {

} else if (type == AudioInterrupt.INTERRUPT_TYPE_END && (
hint == AudioInterrupt.INTERRUPT_HINT_NONE
|| hint == AudioInterrupt.INTERRUPT_HINT_RESUME)) {
renderer.start();
} else {
HiLog.warn(TAG, “unexpected type or hint”);
}
}
});
audioManager.activateAudioInterrupt(audioInterrupt);

复制

6. 调用AudioRenderer实例化对象的start()方法启动播放任务

AudioRenderer renderer = new AudioRenderer(audioRendererInfo, AudioRenderer.PlayMode.MODE_STREAM);
renderer.start();

复制

7. 将要播放的音频数据读取为byte流或short流，对于选择MODE_STREAM模式的PlayMode，需要循环调用write方法进行数据写入。对于选择MODE_STATIC模式的PlayMode，只能通过调用一次write方法将要播放的音频数据全部写入，因此该模式限制在文件规格较小的音频数据播放场景下才能使用

AudioRenderer renderer = new AudioRenderer(audioRendererInfo, AudioRenderer.PlayMode.MODE_STREAM);
String Path = “resources//.pcm”; // 自定义pcm文件
BufferedInputStream bis1 = null;
try {
RawFileDescriptor rawFileDescriptor = getResourceManager().getRawFileEntry(Path).openRawFileDescriptor();
FileDescriptor fileDescriptor1 = rawFileDescriptor.getFileDescriptor();
bis1 = new BufferedInputStream(new FileInputStream(fileDescriptor1));
int minBufferSize = renderer.getMinBufferSize(44100, AudioStreamInfo.EncodingFormat.ENCODING_PCM_16BIT,
AudioStreamInfo.ChannelMask.CHANNEL_OUT_STEREO);
byte[] buffers = new byte[minBufferSize];
while ((bis1.read(buffers)) != -1) {
boolean write1 = renderer.write(buffers, 0, buffers.length);
renderer.flush();
}
} catch (Exception e) {
e.printStackTrace();
} finally {
if (bis1!=null){
try {
bis1.close();
} catch (IOException e) {
e.printStackTrace();
}
}
}

BufferedInputStream bis2 = null;
try {
RawFileDescriptor rawFileDescriptor = getResourceManager().getRawFileEntry(Path).openRawFileDescriptor();
FileDescriptor fileDescriptor1 = rawFileDescriptor.getFileDescriptor();
bis2 = new BufferedInputStream(new FileInputStream(fileDescriptor1));
int minBufferSize = renderer.getMinBufferSize(44100, AudioStreamInfo.EncodingFormat.ENCODING_PCM_16BIT,
AudioStreamInfo.ChannelMask.CHANNEL_OUT_STEREO);
byte[] buffers = new byte[minBufferSize];
int len ;
while ((len = bis2.read(buffers)) != -1) {
short[] shorts = new short[len];
boolean write2 = renderer.write(shorts, 0, shorts.length);
renderer.flush();
}
} catch (Exception e) {
e.printStackTrace();
} finally {
if (bis2!=null){
try {
bis2.close();
} catch (IOException e) {
e.printStackTrace();
}
}
}

AudioRenderer renderer1 = new AudioRenderer(audioRendererInfo, AudioRenderer.PlayMode.MODE_STATIC);
String Path1 = “resources//.pcm”;
BufferedInputStream bis3 = null;
try {
RawFileDescriptor rawFileDescriptor = getResourceManager().getRawFileEntry(Path1).openRawFileDescriptor();
FileDescriptor fileDescriptor1 = rawFileDescriptor.getFileDescriptor();
bis3 = new BufferedInputStream(new FileInputStream(fileDescriptor1));
byte[] bytes = new byte[bis3.available()];
boolean write3 = renderer1.write(bytes, 0, bytes.length);
} catch (IOException e) {
e.printStackTrace();
}finally {
if (bis3!=null){
try {
bis3.close();
} catch (IOException e) {
e.printStackTrace();
}
}
}

BufferedInputStream bis4 = null;
try {
RawFileDescriptor rawFileDescriptor = getResourceManager().getRawFileEntry(Path1).openRawFileDescriptor();
FileDescriptor fileDescriptor1 = rawFileDescriptor.getFileDescriptor();
bis4 = new BufferedInputStream(new FileInputStream(fileDescriptor1));
short[] shorts = new short[bis4.available()];
boolean write4 = renderer1.write(shorts, 0, shorts.length);
} catch (IOException e) {
e.printStackTrace();
}finally {
if (bis4!=null){
try {
bis4.close();
} catch (IOException e) {
e.printStackTrace();
}
}
}

复制

8. （可选）当需要对音频播放进行暂停或停止时，调用AudioRenderer实例化对象的pause()或stop()方法进行暂停或停止播放。

AudioRenderer renderer = new AudioRenderer(audioRendererInfo, AudioRenderer.PlayMode.MODE_STREAM);
renderer.pause();

复制

9. （可选）调用AudioRenderer实例化对象的setSpeed调节播放速度，setVolume调节播放音量。

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以添加V获取：vip204888 （备注鸿蒙）
img

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

oRenderer实例化对象的setSpeed调节播放速度，setVolume调节播放音量。

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以添加V获取：vip204888 （备注鸿蒙）
[外链图片转存中…(img-3iB7MVGo-1713445712915)]

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

2401_84164527
关注
  • 11
    点赞
  • 踩
  • 11
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
鸿蒙HarmonyOS应用开发之Rawfile开发指导_rawfiledescriptor 怎么导入(3)
m0_57541068的博客
04-11 1220
基本涵盖了95%以上HarmonyOS鸿蒙开发知识点，真正体系化！**
使用AssetFileDescriptor 来读取(android)app的raw文件夹下的数据
热门推荐
yangqinjiang的专栏
04-23 1万+
//mp是MediaPlayer实例对象,fd是读取raw文件夹下的文件信息类try { AssetFileDescriptor fd = getResources().openRawResouceFd(R.raw.greet_1); mp.setDataSource(fd.getFileDescriptor(), fd.getStartOffset(), fd.getLength());
华为鸿蒙HarmonyOS开发整理资料汇总.zip
11-25
华为鸿蒙HarmonyOS开发整理资料汇总，共38份。 1学前必读：HarmonyOS学习资源主题分享 2学前必读：OpenHarmony-联盟生态资料合集 3-1.HarmonyOS概述：技术特性 3-2.HarmonyOS概述：开发工具与平台 3-3.HarmonyOS概述：系统安全 3-4.HarmonyOS概述：系统定义 3-5.HarmonyOS概述：下载与安装软件 3-6.HarmonyOS概述：应用开发基础知识 3-7.HarmonyOS概述：最全HarmonyOS文档和社区资源使用技巧 4-1.生态案例：【开发者说】重塑经典，如何在HarmonyOS手机上还原贪吃蛇游戏 4-2.生态案例：HarmonyOLabo涂鸦鸿蒙亲子版 4-3.生态案例：HarmonyOS分镜头APP案例 4-4.生态案例：HarmonyOS时光序历史学习案例 4-5.生态案例：HarmonyOS先行者说 宝宝巴士携手HarmonyOS共同打造儿童教育交互新体验 4-6.生态案例：HarmonyOS智能农场物联网连接实践 4-7.生态案例：分布式开发样例，带你玩转多设备 4-8.生态案例：华为分布式日历应用开发实践 5-1.【Codelab】HarmonyOS基于图像模块实现图库图片的四种常见操作 5-2.【CodeLab】手把手教你创建第一个手机“Hello World” 5-3.【Codelab】如此简单！一文带你学会15个HarmonyOS JS组件 5-4.【Codelab】懒人“看”书新法—鸿蒙语音播报，到底如何实现？ 5-5.【Codelab】基于AI通用文字识别的图像搜索，这波操作亮了 5-6.【Codelab】开发样例概览 6-1.技术解读之HarmonyOS轻量JS开发框架与W3C标准差异分析 6-2.技术解读之HarmonyOS驱动加载过程分析 6-3.技术解读之HarmonyOS组件库使用实践 6-4.技术解读之华为架构师解读：HarmonyOS低时延高可靠消息传输原理 6-5.技术解读之解密HarmonyOS UI框架 6-6.技术解读之如何从OS框架层面实现应用服务功能解耦 7-1.常见问题之HarmonyOS元服务的设计与开发解析 7-2.常见问题之Java开发 7-3.常见问题之JS开发 7-4.常见问题之模拟器登录 7-5.常见问题之模拟器运行 7-6.常见问题之如何使用JsJava开发HarmonyOS UI 7-7.常见问题之应用配置 7-8.常见问题之预览器运行 8【视频合集】入门到进阶视频学习资料合集30+
HarmonyOS学习路之开发篇—多媒体开发（音频开发 一）
爱吃土豆丝的打工人的博客
06-22 314
音频播放的主要工作是将音频数据转码为可听见的音频模拟信号并通过输出设备进行播放，同时对播放任务进行管理。
鸿蒙实战开发-如何使用AudioRenderer开发音频播放功能
2401_82546228的博客
05-08 1124
AudioRenderer是音频渲染器，用于播放PCM（Pulse Code Modulation）音频数据，相比AVPlayer而言，可以在输入前添加数据预处理，更适合有音频开发经验的开发者，以实现更灵活的播放功能。
鸿蒙读取raw资源文件
qq_22718203的博客
08-31 1202
private void playShortSound(){ try { RawFileDescriptor filDescriptor = abilitySlice.getResourceManager().getRawFileEntry("resources/rawfile/camera_clicked1.mp3").openRawFileDescriptor(); Source source = new Source(filDescriptor.getFile.
多媒体架构----Audio介绍
Winston
03-16 1375
前言：
华为鸿蒙HarmonyOS开发者资料大全鸿蒙系统开发资料汇总.zip
06-16
鸿蒙HarmonyOS开发者资料大全鸿蒙系统开发资料汇总,包括如下： DevEco Studio 1.0 使用指南.pdf HarmonyOS-NFC开发指南.pdf HarmonyOS应用开发之页面开发.pdf HarmonyOS开发必备基础知识.pdf WLAN开发指南.pdf 图像...
最新鸿蒙HarmonyOS开发文档汇总.zip
08-03
HarmonyOS开发文档（一）； HarmonyOS入门文档； HarmonyOS设备应用开发文档； HarmonyOS应用设计文档； HarmonyOS智慧屏设计文档； HarmonyOS智能穿戴应用设计文档； Huawei DevEco Studio使用指南；
book_鸿蒙入门HarmonyOS应用开发_书中源码.zip
02-07
【标题】"book_鸿蒙入门HarmonyOS应用开发_书中源码.zip" 提供了对鸿蒙操作系统（HarmonyOS）应用开发的基础教程资源，其中包含了一个名为 "book_HarmonyOS_demo-main" 的子文件。这个压缩包很可能是为初学者准备的...
HarmonyOS开发从入门到实践 掌握这些资源就够了.pdf
05-29
HarmonyOS开发从入门到实践 掌握这些资源就够了
安卓音频模块HAL层浅析
海豚的成长日记
09-10 2520
手机可以说是现在人日常生活中最离不开的电子设备了。它自诞生以来，从模拟的发展到数字的，从1G发展到目前的4G以及不久将来的5G，从最初的只有唯一的功能（打电话）发展到目前的全功能，从功能机（feature phone）发展到智能机（smart phone），可谓变化巨大。对于手机上的音频来说，刚开始只有语音通信功能，现在不仅语音通信，还可以听音乐、录音、智能语音（语音输入/语音交互）等。智能手机中的音频场景众多，可以说是手机多媒体系统中最复杂的子系统了。今天我们就谈谈Android智能手机上的音频。 .
android中的asset文件和raw文件
z936689039的博客
03-03 2515
一.Assets文件： Android 中资源分为两种,一种是res下可编译的资源文件, 这种资源文件系统会在R.Java里面自动生成该资源文件的ID，访问也很简单,只需要调用R.XXX.id即可;第二种就是放在assets文件夹下面的原生资源文件,放在这个文件夹下面的文件不会被R文件编译,所以不能像第一种那样直接使用.Android提供了一个工具类,方便我们操作获取assets文件下的文件:A...
官方总结鸿蒙应用开发常见问题与实现方法典型案例
华为开发者联盟
11-18 5156
1自定义Dialog的布局 1.1 问题描述 如何实现自定义的Dialog？ 1.2 实现方法 添加自定义Dialog代码 CommonDialog commonDialog = new CommonDialog(this); Component component = LayoutScatter.getInstance(getContext()) .parse(ResourceTable.Layout_dialog_custom_layout,
【HarmonyOS学习】Calendar Kit日历管理
包包熊的博客
07-16 697
Calendar Kit为用户提供了一系列接口来获取日历账户，并使用特定的接口向日历账户中写入日程。 如果写入的日程带有提醒时间则系统会在时间到达时向用户发送提醒。
【HarmonyOS学习】动画
包包熊的博客
07-16 407
分类介绍了常用动画的类型，并包含相关示例代码方便学习
HarmonyOS NEXT零基础入门到实战-第二部分
最新发布
sxwn123的专栏
07-20 282
tabBar(this.myBuilder(0, '购物车', $r('app.media.startIcon'), $r('app.media.xm'))).tabBar(this.myBuilder(1, '我的', $r('app.media.startIcon'), $r('app.media.hw'))).tabBar(this.myBuilder(2, '我的', $r('app.media.startIcon'), $r('app.media.hw')))（文字、图片...）
鸿蒙Navigation路由能力汇总
qq_36859035的博客
07-17 219
属性汇总：https://developer.huawei.com/consumer/cn/doc/harmonyos-references/ts-basic-components-navigation。
鸿蒙语言基础类库：【@system.prompt (弹窗)】
2301_76813281的博客
07-18 1266
showToast(options: ShowToastOptions): void
鸿蒙HarmonyOS车机应用开发与驾驶模式指南
"HarmonyOS车机应用设计文档主要讲解了如何在华为的HarmonyOS操作系统上为汽车场景开发安全、适应性的应用。文档强调了驾驶模式和非驾驶模式的概念，并提出了对车载应用的约束与限制，以保障驾驶安全。此外，还介绍...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值