广告

不只是高性能DSP,软件定义SoC给音频汽车工业等应用带来多通道和AI等丰富功能

2024-08-14 15:40:31 牟涛, XMOS亚太区市场和销售负责人 阅读:
本文将介绍如何利用xcore.ai芯片开发DSP系统,并以XMOS与DSP Concepts近期宣布的合作协议为例,展示音频开发人员如何将XMOS的高度确定性、低延迟的xcore.ai平台与DSP Concepts的Audio Weaver软件相结合,使用户能够利用多核架构并采用图形化方式去设计和调试音频和语音解决方案。
广告

XMOS推出的基于其第三代xcore架构的xcore.ai系列可编程SoC芯片,在一颗器件里面集成了边缘AI、DSP、控制单元和I/O等功能,因而可以针对应用利用软件将其定义为不同的器件系统,在保持灵活性和可编程性的同时提供优异的性能,从而可以有更快的速度和更低的成本完成全新器件系统的开发。

本文将介绍如何利用xcore.ai芯片开发DSP系统,并以XMOS与DSP Concepts近期宣布的合作协议为例,展示音频开发人员如何将 XMOS 的高度确定性、低延迟的 xcore.ai 平台与 DSP Concepts 的 Audio Weaver 软件相结合,使用户能够利用多核架构并采用图形化方式去设计和调试音频和语音解决方案。

灵活地构建DSP系统

xcore 能够以最低的系统物料清单成本来构建整个 DSP 系统,可支持包括定点和浮点格式的主要DSP工作负载。xcore平台的灵活性还使解决方案能够集成其他关键组件,例如 IO 协议、控制算法甚至人工智能组件。xcore 的独特之处在于,整个 DSP 系统可以仅使用软件构建。

独特的硬件可编程性

凭借其独特的多线程、多核微架构,xcore.ai 提供了世界领先的具有可预测性的可编程能力,这对于需要极高实时性的 DSP 应用来说至关重要。xcore 的独特架构可确保系统的不同部分互不干扰,从而提供 DSP 系统(尤其是支持多采样率的系统)所需的稳健性、低延迟和可确保的执行时间。

提供丰富的功能

xcore.ai是一种独特的可编程处理器阵列——每个xcore.ai具有16个硬件线程(HART),它们分属2个独立多线程处理器“单元”,其中每个单元配备512kB的SRAM存储空间,以及一个能够完成高效块浮点运算的整数矢量单元,使每个 HART 都能执行一套通用的控制、DSP、AI 和 IO 指令。强大的处理器间专用通信链路可在任意数量的xcore.ai芯片之间进行高速通信,并将这些器件变成一颗更大的器件。所有这一切都在同一个、同质和强大的开发环境中实现。

嵌入式 DSP

xcore.ai提供的多线程简化了将具有硬件实时特性的DSP功能集成到单芯片嵌入式解决方案中的过程。

除了提供基本的DSP构建模块库,XMOS 还提供了一整套高级功能,例如 PDM 接口、声学回声消除、噪声抑制、异步采样率转换、自动增益控制等。这些功能被封装为参考应用,可以随时进行修改和扩展,以满足特定应用独特的系统功能和接口要求,所有这些功能都被集成在一个高性价比的器件中。

主频为800MHzxcore.ai的高性能

800 MFLOPS的持续处理能力

1,600 MFLOPS的峰值处理能力

98,561 FFT/s

11,300浮点FFT/s

1,024-Pt复杂 FFT(Radix 2)/s

957M FIR filter taps/s

251M IIR filter (per biquad)/s

另外值得关注的是xcore.ai的可扩展性——XMOS在片上设计提供专用的XMOS互联链路,支持用户将多颗xcore.ai芯片连接在一起形成更大的系统并无缝扩展性能。

使用合作伙伴技术来打造各种解决方案,如构建DSP系统

XMOS的xcore系列芯片已经建立了完善而丰富的生态系统,开发者可以利用这些生态伙伴的技术快速甚至是低代码实现应用。例如,使用DSP Concepts公司提供的Audio Weaver工具,就可以跳过撰写源代码并设计音频DSP系统。这个功能齐全的开发工具是业界的黄金标准,它支持工程师通过调用和刷新xcore可执行项,就能在一块开发板上进行完整音频系统的设计、部署、调节和控制。

现场例证:观看XMOSDSP Concepts联合举办的网络研讨会

该网络研讨会由XMOS与DSP Concepts联合举办,在这个简短的网络研讨会中,双方深入探讨了合作背后的细节,并探讨了XMOS高确定性、低延迟的xcore.ai平台与DSP Concepts的Audio Weaver软件工具配合,正在彻底改变音频和语音产品的开发过程。

xcore.ai多通道音频开发板可支持全高速USB操作、USB Audio Class 2.0和1.0、MIDI、HID和DFU等音频格式和版本。

该开发板集成了四个立体声音频DAC和两个四通道音频ADC,可同时支持8个双向音频流。它还包括用于S/PDIF和MIDI输入和输出端口的电信号和光信号接口。将以下链接复制到浏览器,即可登录或者注册下载该网络研讨会:

https://www.xmos.com/develop/dsp#

DSP工具

  • lib_dsp
  •  —— 一个完整的数学函数库
  •  —— 采样率转换工具库

用于语音应用的DSP

  • 双麦克风前端
  • 音频流水线功能包括回声消除、干扰消除和噪声抑制
  • I2S到USB接口,支持的异步采样率介于44.1 kHz – 192 kHz
  • 双向信号路径
  • 更多信息,请参见xcore-voice平台介绍;点击或复制以下链接到浏览器也可以了解详情:

https://www.xmos.com/xcore-voice

购买该开发套件或者索取xcore.ai样片

欢迎购买xcore-voice开发套件,仅需几个步骤几个搭建好自己的智能音频系统并开始应用的开发。购买或者进一步了解,请发邮件给:thomasmu@xmos.com

开发者资源

资源库

XMOS的资源库提供可重用的软件,并且可作为通用功能的源文件。

完整的数学模型和DSP函数库,包括整数、浮点数、矢量化和复杂运算。

采样率转换(SRC)工具库提供同步和异步音频采样率转换功能。

定点数字信号处理软件库,它实现了一套整常用的信号处理功能。

本文为EET电子工程专辑 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
  • Imagination GPU为边缘智能提供高效率的加速 在“2024奕斯伟计算开发者伙伴大会”上,来自Imagination英国总部的专家发表了主题为《用RISC-V CPU + PowerVR GPU迎接边缘生成式AI的到来》的演讲。
  • 面向AI的下一代以太网技术 随着AI应用的广泛普及和数据流量的迅猛增长,传统以太网技术在延迟、带宽、拥塞控制和高性能可扩展方面天然局限,导致其难以应对AI网络的复杂需求。
  • 智能手机疲软,但超薄柔性玻璃出货量势头正猛 可折叠盖板玻璃必须符合以下所有标准:透明、可折叠、坚固、平整和轻薄,这些基本要素缺一不可。
  • 全球折叠屏手机快速增长,中国品牌压制三星 • 得益于西欧、关键亚洲市场和拉丁美洲市场的增长,以及中国品牌的持续领先,全球折叠屏手机出货量在2024年第二季度同比增长了48%。 • 荣耀凭借其在西欧特别强劲的表现,成为最大的贡献者,成为该地区排名第一的品牌。 • 摩托罗拉的Razr 40系列在北美和拉丁美洲表现良好,为其手机厂商的出货量贡献了三位数的同比增长。 • 我们预计,头部中国手机品牌厂商的不断增加将至少在短期内抑制三星Z6系列在第三季度的发布。
  • AI网络物理层底座: 大算力芯片先进封装技术 AI技术的发展极大地推动了对先进封装技术的需求,在高密度,高速度,高带宽这“三高”方面提出了严苛的要求。
  • 智能手表OLED面板超 60%中国制造 智能手表在新冠肺炎疫情后获得了越发广泛的关注,其功能包括语音、健康检查、运动和活动追踪、GPS、通信和个人数据监控。全球智能手表显示面板的出货量已从2022年的2.59亿片增长到2023年的3.51亿片。到 2024年,Omdia预测智能手表显示面板的出货量将达到3.59亿片,其中TFT LCD占63%,OLED占37%。
  • 无处不在的Arm软硬件生态赋能开发者AI创新 随着计算变得愈发复杂,计算效率的重要性更胜以往。
  • 荣耀拿下欧洲横折手机榜第一 既然可以保留几乎相同的旧款手机,或者以更低的价格购买旧款手机,为什么要购买最新款的智能手机呢?但变化已经到来,智能手机品牌厂商正带着其最前沿的创新技术重返欧洲市场……
  • 如何选择数据中心的最佳运营地点 选择最佳数据中心位置需要评估几个关键标准,以确保最佳性能、效率和未来增长。每项标准在确定数据中心运营地点的适宜性方面都起着至关重要的作用……
  • 高通收购Sequans后,获得了哪些增强? • 高通通过收购Sequans的4G技术加强物联网领导地位 • 高通已经以2亿美元收购了Sequans Communications的4G技术,扩展到蜂窝物联网市场。 • 该交易增强了高通在低功耗广域网(LPWA)领域的业务,通过Sequans先进的4G物联网技术解决了性能和效率方面的差距。 • 该收购为Sequans提供了用于5G开发的资金,同时允许其继续利用其4G物联网技术。
广告
广告
热门推荐
广告
广告
广告
EE直播间
在线研讨会
广告
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了