html语音接口,HTML5 音频 API Web Audio

原标题:HTML5 音频 API Web Audio

此文介绍HTML5音频API的主要框架和工作流程,因为音频处理模块很多,因此只简单介绍几种音频处理模块,并通过例子来展示效果。后续会介绍利用HTML5音频API实现的项目,欢迎大家关注,敬请期待。

HTML5音频API的主要框架和工作流程如下图,在 AudioContext音频上下文中,把音频文件转成 buffer格式,从音频源 source开始,经过 AuidoNode处理音频,最后到达 destination输出音乐。这里形成了一个音频通道,每个模块通过 connect方法链接并传送音频。

f6cb72c2002fb9ef44cdeffd520ad50a.png

AudioContext

AudioContext 是一个音频上下文,像一个大工厂,所有的音频在这个音频上下文中处理。

letaudioContext =new(window.AudioContext|| window.webkitAudioContext)();

AudioContext 音频上下文提供了很多属性和方法,用于创建各种音频源和音频处理模块等,这里只介绍一部分,更多属性和方法可到MDN(https://developer.mozilla.org/zh-CN/docs/Web/API/AudioContext)查阅文档。

属性

AudioContext.destination

返回 AudioDestinationNode对象,表示当前 AudioContext中所有节点的最终节点,一般表示音频渲染设备。

方法

AudioContext.createBufferSource()

创建一个 AudioBufferSourceNode对象, 他可以通过 AudioBuffer对象来播放和处理包含在内的音频数据。

AudioContext.createGain()

创建一个 GainNode,它可以控制音频的总音量。

AudioContext.createBiquadFilter()

创建一个 BiquadFilterNode,它代表代表一个双二阶滤波器,可以设置几种不同且常见滤波器类型:高通、低通、带通等。

createOscillator()

创建一个 OscillatorNode, 它表示一个周期性波形,基本上来说创造了一个音调。

音频转换成Buffer格式

使用 decodeAudioData()方法把音频文件编译成buffer格式。

functiondecodeAudioData(audioContext, url) {

returnnewPromise((resolve) => {

letrequest =new();

request.open('GET', url,true);

request.responseType ='arraybuffer';

request. = () => {

audioContext.decodeAudioData(request.response, (buffer) => {

if(!buffer) {

alert('error decoding file data: '+ url);

return;

}else{

resolve(buffer);

}

})

}

request. =function() {

alert('BufferLoader: XHR error');

}

request.send();

})

}

letbuffer = decodeAudioData(audioContext,'./sounds/music.mp3');AudioNode

音频节点接口是一个音频处理模块。包括音频源,音频输出,中间处理模块。

方法

AudioNode.connect()

链接两个 AudioNode节点,把音频从一个 AudioNode节点输出到另一个 AudioNode节点,形成一个音频通道。

AudioNode.disconnect()

把 AudioNode节点与其他节点断开链接。

AudioBufferSourceNode

音频源有多种,这里只介绍 buffer的音频源, buffer的音频源通过 AudioContext接口的 createBufferSource方法来创建。音频源节点继承 AudioNode音频节点。

letbufferSource = audioContext.createBufferSource();

创建了 AudioBufferSourceNode对象后,把 buffer格式的音频数据赋值给 AudioBufferSourceNode对象的 buffer属性,此时音频已经传递到音频源,可以对音频进行处理或输出。

bufferSource.buffer = buffer;方法

AudioBufferSourceNode.start([when][, offset][, duration])

开始播放。

when:延迟播放时间,单位为秒。

offset:定位音频到第几秒开始播放。

duration:从开始播放结束时长,当经过设置秒数后自动结束音频播放。

AudioBufferSourceNode.stop([when])

when:延迟停止时间,单位为秒。

停止播放,注意调用该方法后,无法再次调用 AudioBufferSourceNode.start播放。

AudioDestinationNode

音频终点是通过 AudioContext接口的 destination属性访问的。音频终点继承 AudioNode音频节点,

AudioDestinationNode节点无法再把音频信息传递给下一个音频节点,即无法再链接其他音频节点,因为他已经是终点,没有输出,也可以理解为他自己就是输出。

letaudioDestinationNode = audioContext.destination;

此时我们有音频起点 AudioBufferSourceNode和音频终点 AudioDestinationNode,使用 AudioNode.connect()方法把起点和终点链接起来,就形成了一条有输入输出的音频通道,可以把音频直接播放出来。

bufferSource.connect(audioDestinationNode);

戳我看栗子

GainNode

用于音量变化。它是一个 AudioNode类型的音频处理模块。

letgainNode = audioContext.createGain();

把音频源、音频输出和音频处理模块链接一起,形成可控制音量大小的音频。

bufferSource.connect(gainNode);

gainNode.connect(audioDestinationNode);

letcontrolVolume = value => {

gainNode.gain.value = value);

}

// 两倍音量播放

controlVolume(2);

ac9a90785f4a1a3945688b5e238e4bd1.png

戳我看栗子

BiquadFilterNode

表示一个简单的低频滤波器,可控制声调。它是一个 AudioNode类型的音频处理模块。

letfilterNode = audioContext.createBiquadFilter();

输出一个变调的音频:

bufferSource.connect(filterNode);

filterNode.connect(audioDestinationNode);

letcontrolFrequency =function(value) {

filterNode.frequency.value = value;

}

// 音频为1000变调

controlFrequency(1000);多个音频源

在一个音频上下文中,可以有多个音频处理通道,即多个音频源同时输出。各个音频处理通道内的操作是独立的,不影响其他音频通道。

a22e648df7a007fe2c6e03ee756541d8.png

戳我看栗子

多个音频处理模块

一个音频源可以经过多个音频处理模块处理,音频处理模块叠加效果后输出。

戳我看栗子:

https://codepen.io/leechikit/pen/Nvpwrq

欢迎关注:

Leechikit(https://segmentfault.com/u/leechikit/articles)

原文链接:

https://segmentfault.com/a/1190000010561222

到此本文结束,欢迎提问和指正。写原创文章不易,若本文对你有帮助,请点赞、推荐和关注作者支持。返回搜狐,查看更多

责任编辑:

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值