广告

不只是高性能DSP,软件定义SoC给音频汽车工业等应用带来多通道和AI等丰富功能

2024-08-14 15:40:31 牟涛, XMOS亚太区市场和销售负责人 阅读:  
本文将介绍如何利用xcore.ai芯片开发DSP系统,并以XMOS与DSP Concepts近期宣布的合作协议为例,展示音频开发人员如何将XMOS的高度确定性、低延迟的xcore.ai平台与DSP Concepts的Audio Weaver软件相结合,使用户能够利用多核架构并采用图形化方式去设计和调试音频和语音解决方案。
广告

XMOS推出的基于其第三代xcore架构的xcore.ai系列可编程SoC芯片,在一颗器件里面集成了边缘AI、DSP、控制单元和I/O等功能,因而可以针对应用利用软件将其定义为不同的器件系统,在保持灵活性和可编程性的同时提供优异的性能,从而可以有更快的速度和更低的成本完成全新器件系统的开发。

本文将介绍如何利用xcore.ai芯片开发DSP系统,并以XMOS与DSP Concepts近期宣布的合作协议为例,展示音频开发人员如何将 XMOS 的高度确定性、低延迟的 xcore.ai 平台与 DSP Concepts 的 Audio Weaver 软件相结合,使用户能够利用多核架构并采用图形化方式去设计和调试音频和语音解决方案。

广告

灵活地构建DSP系统

xcore 能够以最低的系统物料清单成本来构建整个 DSP 系统,可支持包括定点和浮点格式的主要DSP工作负载。xcore平台的灵活性还使解决方案能够集成其他关键组件,例如 IO 协议、控制算法甚至人工智能组件。xcore 的独特之处在于,整个 DSP 系统可以仅使用软件构建。

独特的硬件可编程性

凭借其独特的多线程、多核微架构,xcore.ai 提供了世界领先的具有可预测性的可编程能力,这对于需要极高实时性的 DSP 应用来说至关重要。xcore 的独特架构可确保系统的不同部分互不干扰,从而提供 DSP 系统(尤其是支持多采样率的系统)所需的稳健性、低延迟和可确保的执行时间。

提供丰富的功能

xcore.ai是一种独特的可编程处理器阵列——每个xcore.ai具有16个硬件线程(HART),它们分属2个独立多线程处理器“单元”,其中每个单元配备512kB的SRAM存储空间,以及一个能够完成高效块浮点运算的整数矢量单元,使每个 HART 都能执行一套通用的控制、DSP、AI 和 IO 指令。强大的处理器间专用通信链路可在任意数量的xcore.ai芯片之间进行高速通信,并将这些器件变成一颗更大的器件。所有这一切都在同一个、同质和强大的开发环境中实现。

嵌入式 DSP

xcore.ai提供的多线程简化了将具有硬件实时特性的DSP功能集成到单芯片嵌入式解决方案中的过程。

除了提供基本的DSP构建模块库,XMOS 还提供了一整套高级功能,例如 PDM 接口、声学回声消除、噪声抑制、异步采样率转换、自动增益控制等。这些功能被封装为参考应用,可以随时进行修改和扩展,以满足特定应用独特的系统功能和接口要求,所有这些功能都被集成在一个高性价比的器件中。

主频为800MHzxcore.ai的高性能

800 MFLOPS的持续处理能力

1,600 MFLOPS的峰值处理能力

98,561 FFT/s

11,300浮点FFT/s

1,024-Pt复杂 FFT(Radix 2)/s

957M FIR filter taps/s

251M IIR filter (per biquad)/s

另外值得关注的是xcore.ai的可扩展性——XMOS在片上设计提供专用的XMOS互联链路,支持用户将多颗xcore.ai芯片连接在一起形成更大的系统并无缝扩展性能。

使用合作伙伴技术来打造各种解决方案,如构建DSP系统

XMOS的xcore系列芯片已经建立了完善而丰富的生态系统,开发者可以利用这些生态伙伴的技术快速甚至是低代码实现应用。例如,使用DSP Concepts公司提供的Audio Weaver工具,就可以跳过撰写源代码并设计音频DSP系统。这个功能齐全的开发工具是业界的黄金标准,它支持工程师通过调用和刷新xcore可执行项,就能在一块开发板上进行完整音频系统的设计、部署、调节和控制。

现场例证:观看XMOSDSP Concepts联合举办的网络研讨会

该网络研讨会由XMOS与DSP Concepts联合举办,在这个简短的网络研讨会中,双方深入探讨了合作背后的细节,并探讨了XMOS高确定性、低延迟的xcore.ai平台与DSP Concepts的Audio Weaver软件工具配合,正在彻底改变音频和语音产品的开发过程。

xcore.ai多通道音频开发板可支持全高速USB操作、USB Audio Class 2.0和1.0、MIDI、HID和DFU等音频格式和版本。

该开发板集成了四个立体声音频DAC和两个四通道音频ADC,可同时支持8个双向音频流。它还包括用于S/PDIF和MIDI输入和输出端口的电信号和光信号接口。将以下链接复制到浏览器,即可登录或者注册下载该网络研讨会:

https://www.xmos.com/develop/dsp#

DSP工具

  • lib_dsp
  •  —— 一个完整的数学函数库
  •  —— 采样率转换工具库

用于语音应用的DSP

  • 双麦克风前端
  • 音频流水线功能包括回声消除、干扰消除和噪声抑制
  • I2S到USB接口,支持的异步采样率介于44.1 kHz – 192 kHz
  • 双向信号路径
  • 更多信息,请参见xcore-voice平台介绍;点击或复制以下链接到浏览器也可以了解详情:

https://www.xmos.com/xcore-voice

购买该开发套件或者索取xcore.ai样片

欢迎购买xcore-voice开发套件,仅需几个步骤几个搭建好自己的智能音频系统并开始应用的开发。购买或者进一步了解,请发邮件给:thomasmu@xmos.com

开发者资源

资源库

XMOS的资源库提供可重用的软件,并且可作为通用功能的源文件。

完整的数学模型和DSP函数库,包括整数、浮点数、矢量化和复杂运算。

采样率转换(SRC)工具库提供同步和异步音频采样率转换功能。

定点数字信号处理软件库,它实现了一套整常用的信号处理功能。

  • 初步评估0121地震未造成台南晶圆厂重大损害,但恐加剧1Q25电视面板 嘉义地区里氏规模6.4地震,台南亦是重要面板产地,厂商实际受影响情况尚待确认,只是此次地震可能加大2025年第一季电视面板供给压力......
  • 2025年中国云终端市场七大洞察 前瞻未来市场将面对的机遇和挑战,IDC总结并给出了2025年中国云终端市场七大洞察……
  • 中科院微电子所在大区域掩模三维光刻潜像的快速仿真方面取得新进 该方法首先建立掩模三维潜像数据库,以训练条件生成对抗网络。使用训练好的网络计算出大区域掩模中局部位置的三维潜像,通过拼接获得最终结果。
  • 中国汽车厂商的全球扩张会加速电动汽车的普及吗? • 中国本土汽车厂商的海外业务正在表现出显着增长,与 2023 年上半年相比,这些厂商在中国以外的销售额翻了一番。 • 欧洲、东南亚和拉丁美洲正在成为中国汽车厂商的主要目标市场。 • 2023 年中国超过日本,成为全球最大的汽车出口国。 • 由于地缘政治的保护主义政策愈演愈烈,中国汽车厂商的快速扩张可能会在某些市场放缓。
  • 含硅还是不含硅? 大多数研发人员和导热界面材料配方设计师可能会推荐使用具备诸多优异特性的硅。然而,也存在一些例外情况。这些问题强调了在选择导热界面材料时考虑终端产品最终应用的重要性.....
  • CES 2025:芯科科技CTO Daniel Cooley专访 在与芯科科技(Silicon Labs)首席技术官Daniel Cooley的交谈中,我们了解到该公司在物联网(IoT)和智能边缘领域所发挥的作用和未来发展。
  • 欧洲汽车制造商面临双重打击!中国攻势猛烈,排放标准严苛 • 2024欧洲电动汽车销售遭遇增长瓶颈,多家车企将面临因无法满足欧七排放标准而带来的巨额罚款风险。 • 汽车厂商将电动汽车销售贡献作为降低旗下所有车辆平均排放量的关键。 • 汽车制造商需要解决消费者对电动汽车价格高、相关保险费和充电体验差的看法,以提高电动汽车的销量。
  • 2024Q3全球智能手机出货量增长 2%,收入和平均售价创历史新高 • 2024 年第三季度,全球智能手机市场同比增长 2%,出货量达到 3.07 亿部。 • 全球智能手机收入同比增长 10%,平均售价增长 7%。收入和平均售价均创下历史新高。 • 三星在出货量方面继续领跑市场,占据 19% 的销量份额。 • 苹果在营收方面领先,并创下了其历年第三季度出货量、收入和平均售价的最高记录。 • 小米位居第三,收入增长超过出货量增长比例,而 OPPO 则位居第四。vivo 在前五大手机品牌厂商 中同比增长最快。
  • 人工智能服务器目前占全球服务器市场的三分之一 • 由于对 AI 服务器的强劲需求,服务器市场在 2024 年第二季度急剧增长,同比增长了 35%。 • 三大巨头分别是戴尔、超微和HPE。但由于微软、亚马逊、谷歌和 Meta 继续定制自己的服务器,ODM 直销占据主导地位。
  • 中国成为最大腕戴设备市场,引领全球增长 腕戴设备市场包含智能手表和手环产品。其中,智能手表市场在2024年前三季度全球出货量1.1亿台,同比下降3.8%;而中国智能手表市场出货量3,286万台,同比增长……
广告
广告
热门推荐
广告
广告
广告
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了