利用多核架构并采用图形化方式去设计和调试音频和语音解决方案

作者：牟涛， XMOS亚太区市场和销售负责人

XMOS推出的基于其第三代xcore架构的xcore.ai系列可编程SoC芯片，在一颗器件里面集成了边缘AI、DSP、控制单元和I/O等功能，因而可以针对应用利用软件将其定义为不同的器件系统，在保持灵活性和可编程性的同时提供优异的性能，从而可以有更快的速度和更低的成本完成全新器件系统的开发。

本文将介绍如何利用xcore.ai芯片开发DSP系统，并以XMOS与DSP Concepts近期宣布的合作协议为例，展示音频开发人员如何将 XMOS 的高度确定性、低延迟的 xcore.ai 平台与 DSP Concepts 的 Audio Weaver 软件相结合，使用户能够利用多核架构并采用图形化方式去设计和调试音频和语音解决方案。

灵活地构建DSP系统

xcore 能够以最低的系统物料清单成本来构建整个 DSP 系统，可支持包括定点和浮点格式的主要DSP工作负载。xcore平台的灵活性还使解决方案能够集成其他关键组件，例如 IO 协议、控制算法甚至人工智能组件。xcore 的独特之处在于，整个 DSP 系统可以仅使用软件构建。

独特的硬件可编程性

凭借其独特的多线程、多核微架构，xcore.ai 提供了世界领先的具有可预测性的可编程能力，这对于需要极高实时性的 DSP 应用来说至关重要。xcore 的独特架构可确保系统的不同部分互不干扰，从而提供 DSP 系统（尤其是支持多采样率的系统）所需的稳健性、低延迟和可确保的执行时间。

提供丰富的功能

xcore.ai是一种独特的可编程处理器阵列——每个xcore.ai具有16个硬件线程（HART），它们分属2个独立多线程处理器“单元”，其中每个单元配备512kB的SRAM存储空间，以及一个能够完成高效块浮点运算的整数矢量单元，使每个 HART 都能执行一套通用的控制、DSP、AI 和 IO 指令。强大的处理器间专用通信链路可在任意数量的xcore.ai芯片之间进行高速通信，并将这些器件变成一颗更大的器件。所有这一切都在同一个、同质和强大的开发环境中实现。

嵌入式 DSP

xcore.ai提供的多线程简化了将具有硬件实时特性的DSP功能集成到单芯片嵌入式解决方案中的过程。

除了提供基本的DSP构建模块库，XMOS 还提供了一整套高级功能，例如 PDM 接口、声学回声消除、噪声抑制、异步采样率转换、自动增益控制等。这些功能被封装为参考应用，可以随时进行修改和扩展，以满足特定应用独特的系统功能和接口要求，所有这些功能都被集成在一个高性价比的器件中。

主频为800MHz的xcore.ai的高性能

800 MFLOPS的持续处理能力

1,600 MFLOPS的峰值处理能力

98,561 FFT/s

11,300浮点FFT/s

1,024-Pt复杂 FFT（Radix 2）/s

957M FIR filter taps/s

251M IIR filter (per biquad)/s

另外值得关注的是xcore.ai的可扩展性——XMOS在片上设计提供专用的XMOS互联链路，支持用户将多颗xcore.ai芯片连接在一起形成更大的系统并无缝扩展性能。

使用合作伙伴的技术来打造各种解决方案，如构建DSP系统

XMOS的xcore系列芯片已经建立了完善而丰富的生态系统，开发者可以利用这些生态伙伴的技术快速甚至是低代码实现应用。例如，使用DSP Concepts公司提供的Audio Weaver工具，就可以跳过撰写源代码并设计音频DSP系统。这个功能齐全的开发工具是业界的黄金标准，它支持工程师通过调用和刷新xcore可执行项，就能在一块开发板上进行完整音频系统的设计、部署、调节和控制。

现场例证：观看XMOS与DSP Concepts联合举办的网络研讨会

该网络研讨会由XMOS与DSP Concepts联合举办，在这个简短的网络研讨会中，双方深入探讨了合作背后的细节，并探讨了XMOS高确定性、低延迟的xcore.ai平台与DSP Concepts的Audio Weaver软件工具配合，正在彻底改变音频和语音产品的开发过程。

xcore.ai多通道音频开发板可支持全高速USB操作、USB Audio Class 2.0和1.0、MIDI、HID和DFU等音频格式和版本。

该开发板集成了四个立体声音频DAC和两个四通道音频ADC，可同时支持8个双向音频流。它还包括用于S/PDIF和MIDI输入和输出端口的电信号和光信号接口。将以下链接复制到浏览器，即可登录或者注册下载该网络研讨会：

https://www.xmos.com/develop/dsp#

DSP工具库

• lib_dsp
• lib_xcore_math —— 一个完整的数学函数库
• lib_src —— 采样率转换工具库

用于语音应用的DSP

• 双麦克风前端
• 音频流水线功能包括回声消除、干扰消除和噪声抑制
• I2S到USB接口，支持的异步采样率介于44.1 kHz – 192 kHz
• 双向信号路径
• 更多信息，请参见xcore-voice平台介绍；点击或复制以下链接到浏览器也可以了解详情：

XCORE-VOICE | XMOS

购买该开发套件或者索取xcore.ai样片

欢迎购买xcore-voice开发套件，仅需几个步骤几个搭建好自己的智能音频系统并开始应用的开发。

开发者资源

资源库

XMOS的资源库提供可重用的软件，并且可作为通用功能的源文件。

完整的数学模型和DSP函数库，包括整数、浮点数、矢量化和复杂运算。

采样率转换（SRC）工具库提供同步和异步音频采样率转换功能。

定点数字信号处理软件库，它实现了一套整常用的信号处理功能。