不只是高性能DSP,软件定义SoC给音频汽车工业等应用带来多通道和AI等丰富功能

发布者:EE小广播最新更新时间:2024-08-14 来源: EEWORLD作者: 牟涛, XMOS亚太区市场和销售负责人关键字:DSP  软件定义  SoC  音频  汽车工业  AI 手机看文章 扫描二维码
随时随地手机看文章

XMOS推出的基于其第三代xcore架构的xcore.ai系列可编程SoC芯片,在一颗器件里面集成了边缘AI、DSP、控制单元和I/O等功能,因而可以针对应用利用软件将其定义为不同的器件系统,在保持灵活性和可编程性的同时提供优异的性能,从而可以有更快的速度和更低的成本完成全新器件系统的开发。


image.png


本文将介绍如何利用xcore.ai芯片开发DSP系统,并以XMOS与DSP Concepts近期宣布的合作协议为例,展示音频开发人员如何将 XMOS 的高度确定性、低延迟的 xcore.ai 平台与 DSP Concepts 的 Audio Weaver 软件相结合,使用户能够利用多核架构并采用图形化方式去设计和调试音频和语音解决方案。


灵活地构建DSP系统


xcore 能够以最低的系统物料清单成本来构建整个 DSP 系统,可支持包括定点和浮点格式的主要DSP工作负载。xcore平台的灵活性还使解决方案能够集成其他关键组件,例如 IO 协议、控制算法甚至人工智能组件。xcore 的独特之处在于,整个 DSP 系统可以仅使用软件构建。


image.png

独特的硬件可编程性


凭借其独特的多线程、多核微架构,xcore.ai 提供了世界领先的具有可预测性的可编程能力,这对于需要极高实时性的 DSP 应用来说至关重要。xcore 的独特架构可确保系统的不同部分互不干扰,从而提供 DSP 系统(尤其是支持多采样率的系统)所需的稳健性、低延迟和可确保的执行时间。


提供丰富的功能


xcore.ai是一种独特的可编程处理器阵列——每个xcore.ai具有16个硬件线程(HART),它们分属2个独立多线程处理器“单元”,其中每个单元配备512kB的SRAM存储空间,以及一个能够完成高效块浮点运算的整数矢量单元,使每个 HART 都能执行一套通用的控制、DSP、AI 和 IO 指令。强大的处理器间专用通信链路可在任意数量的xcore.ai芯片之间进行高速通信,并将这些器件变成一颗更大的器件。所有这一切都在同一个、同质和强大的开发环境中实现。


嵌入式 DSP


xcore.ai提供的多线程简化了将具有硬件实时特性的DSP功能集成到单芯片嵌入式解决方案中的过程。


除了提供基本的DSP构建模块库,XMOS 还提供了一整套高级功能,例如 PDM 接口、声学回声消除、噪声抑制、异步采样率转换、自动增益控制等。这些功能被封装为参考应用,可以随时进行修改和扩展,以满足特定应用独特的系统功能和接口要求,所有这些功能都被集成在一个高性价比的器件中。


主频为800MHz的xcore.ai的高性能


800 MFLOPS的持续处理能力

1,600 MFLOPS的峰值处理能力

98,561 FFT/s

11,300浮点FFT/s

1,024-Pt复杂 FFT(Radix 2)/s

957M FIR filter taps/s

251M IIR filter (per biquad)/s


另外值得关注的是xcore.ai的可扩展性——XMOS在片上设计提供专用的XMOS互联链路,支持用户将多颗xcore.ai芯片连接在一起形成更大的系统并无缝扩展性能。


image.png

使用合作伙伴的技术来打造各种解决方案,如构建DSP系统


XMOS的xcore系列芯片已经建立了完善而丰富的生态系统,开发者可以利用这些生态伙伴的技术快速甚至是低代码实现应用。例如,使用DSP Concepts公司提供的Audio Weaver工具,就可以跳过撰写源代码并设计音频DSP系统。这个功能齐全的开发工具是业界的黄金标准,它支持工程师通过调用和刷新xcore可执行项,就能在一块开发板上进行完整音频系统的设计、部署、调节和控制。


现场例证:观看XMOS与DSP Concepts联合举办的网络研讨会


该网络研讨会由XMOS与DSP Concepts联合举办,在这个简短的网络研讨会中,双方深入探讨了合作背后的细节,并探讨了XMOS高确定性、低延迟的xcore.ai平台与DSP Concepts的Audio Weaver软件工具配合,正在彻底改变音频和语音产品的开发过程。


xcore.ai多通道音频开发板可支持全高速USB操作、USB Audio Class 2.0和1.0、MIDI、HID和DFU等音频格式和版本。


该开发板集成了四个立体声音频DAC和两个四通道音频ADC,可同时支持8个双向音频流。它还包括用于S/PDIF和MIDI输入和输出端口的电信号和光信号接口。将以下链接复制到浏览器,即可登录或者注册下载该网络研讨会:


DSP工具库


  • lib_dsp

  • lib_xcore_math —— 一个完整的数学函数库

  • lib_src —— 采样率转换工具库


用于语音应用的DSP


  • 麦克风前端

  • 音频流水线功能包括回声消除、干扰消除和噪声抑制

  • I2S到USB接口,支持的异步采样率介于44.1 kHz – 192 kHz

  • 双向信号路径

  • 更多信息,请参见xcore-voice平台介绍。


购买该开发套件或者索取xcore.ai样片


欢迎购买xcore-voice开发套件,仅需几个步骤几个搭建好自己的智能音频系统并开始应用的开发。


image.png


开发者资源


资源库


  • XMOS的资源库提供可重用的软件,并且可作为通用功能的源文件。

  • 完整的数学模型和DSP函数库,包括整数、浮点数、矢量化和复杂运算。

  • 采样率转换(SRC)工具库提供同步和异步音频采样率转换功能。

  • 定点数字信号处理软件库,它实现了一套整常用的信号处理功能。



关键字:DSP  软件定义  SoC  音频  汽车工业  AI 引用地址:不只是高性能DSP,软件定义SoC给音频汽车工业等应用带来多通道和AI等丰富功能

上一篇:莱迪思AvantTM-X:捍卫数字前沿
下一篇:借助 AMD Kria SOM 通过混合方式实现分布式计算

推荐阅读最新更新时间:2024-11-11 11:38

化繁为简,IP-XACT构建自定义SoC组装平台
翻译自——Semiwiki,Bernard Murphy 我已经断断续续和Chouki Aktouf (CEO)和Bastien Gratreaux(市场营销)谈了关于Defacto已有好几年了。我想知道为什么他们不会像我们一样遇到同样的问题。脚本驱动的RTL编辑,设计重组,真正的问题,这只需要很少的解决方案。最近我和Chouki进行了一次热烈的讨论,现在我相信我明白了。 为了解释清楚,我需要倒退几步。首先,自动化SoC装配和相关功能现在非常普遍。这个过程中有很多是非常机械的——放入ip进行顶级连接,通过脚本和一堆电子表格很容易实现自动化。如果它不是纯粹的记账,那么它可以很好地用于进一步的脚本驱动的附加功能,比如通过寄存器
[半导体设计/制造]
化繁为简,IP-XACT构建自<font color='red'>定义</font><font color='red'>SoC</font>组装平台
Qualcomm推出下一代DDFA音频放大器技术
2017年6月14日,中国深圳——在深圳举办的Qualcomm语音和音乐开发者大会前夕,Qualcomm Incorporated(NASDAQ: QCOM)子公司Qualcomm Technologies International, Ltd.今日宣布推出支持高解析度音频设备的下一代Qualcomm® DDFA™音频放大器技术,包括无线扬声器、条形音箱(soundbar)、联网音频和耳机放大器。 尽管传统的D类放大器具有很高功效,但它们通常不能提供传统线性放大器所支持的音质。DDFA的全数字化脉宽调制器(Pulse Width Modulation,PWM)和专有闭环架构弥补了电源级和输出级的非线性,在保留D类放大器优势的同时,
[手机便携]
Nordic BLE SOC让创鸿新智能深紫外LED测温消毒笔功耗更低
Nordic Semiconductor宣布总部位于深圳的物联网(IoT) 解决方案供应商创鸿新智能科技有限公司选择Nordic入门级nRF52810低功耗蓝牙 (Bluetooth® Low Energy /Bluetooth LE) 芯片级系统(SoC),为其 “深紫外 (UVC) LED测温消毒笔” 提供核心处理能力和无线连接。 深紫外LED测温消毒笔是一款紧凑便携的消毒设备 (157 x 20 x 20mm,51g),内置温度传感器和产生深紫外光的LED。其中集成的Nordic nRF52810 SoC带有64MHz的32位Arm®Cortex®M4处理器,使得该设备能够精确地测量各种物体表面 (例如,皮肤表面、
[测试测量]
Nordic BLE <font color='red'>SOC</font>让创鸿新智能深紫外LED测温消毒笔功耗更低
将脑、身、脊髓以电子方式连接,AI大脑植入技术恢复患者感觉和运动
图片来源:诺斯韦尔健康中心范斯坦生物电子医学研究所 据美国《大众科学》网站最新消息,美国诺斯韦尔健康中心范斯坦生物电子医学研究所开发的人工智能(AI)大脑植入技术已可帮助瘫痪患者恢复其感觉和运动。 基思·托马斯在2020年遭遇了一场车祸,这导致他的C4和C5椎骨受伤,胸部以下的感觉和运动能力完全丧失。不过,现在托马斯现已能随意移动手臂,并能感觉到他妹妹握着他的手。 研究团队花了几个月的时间用核磁共振成像绘制他的大脑图,以确定他大脑中负责手臂运动和手部触觉的确切位点。4个月前,外科医生对其进行了历时15个小时的手术,将微芯片植入他的大脑中。在术中,托马斯的某些部位甚至是有感觉的,当医生探测器官的某些部位时,他可告知医生产生什么
[医疗电子]
将脑、身、脊髓以电子方式连接,<font color='red'>AI</font>大脑植入技术恢复患者感觉和运动
自动化陪玩机器人 瞄准AI与真人互动市场
防疫期间民众在家时间增加,导致网络购物、游戏等宅经济发威。此外,在与人接触大幅降低时,感情互动的需求,也能透过新方式来满足。Sony设计出一种情感反应组件,是一种游戏时可在玩家身边作出情感回应的自动化游戏伴游机器人,并且已取得美国专利商标局(USPTO)的专利许可。 根据CB Insights这款陪玩家玩游戏的机器人,外表如同棉花糖一样,没有嘴但有圆滚滚眼睛,专利文件上指出,如果玩家向机器人说话,机器人会用语言回应,手或脚或头部也能作出动作。机器人可从语气与摄影机的影像,感受玩家的各种情绪,并能在游戏成功或失败时给予赞美或安慰。 机器人甚至还能透过,检测出玩家的心跳数、排汗量等生理反应,补充判断的依据。这项技术与So
[机器人]
英国警方准备使用人工智能预测犯罪
AI 在未来或许可以帮助警察在犯罪发生之前对其进行预测,并及时制止。但与「少数派报告」不同的是,英国警方提出的计划采取更为友善的干预方式,而不会像电影中一样,让特警队破门而入。不过该计划仍然引发了对伦理问题的大量争论。 近日,据 New Scientist 报道,英国警察正希望使用人工智能预测严重暴力犯罪。这一计划的执行方式是:被计算机系统标注的高风险人群将被提前干预,例如接受询问,以避免潜在的犯罪行为。 然而,世界领先的数据科学研究机构在看到这一提案的编辑版本之后表达了对该项目的严重关切。 英国提出的 AI 系统名为国家数据分析解决方案(NDAS),它使用人工智能和统计数据来评估个人试图持枪或持刀犯罪的可能性,同时也可以评估个人
[安防电子]
地平线四度亮相CES,车规级AI芯片征程二代引爆多项量产合作
在拉斯维加斯举行的2020年国际消费电子展(CES)上,边缘 AI 芯片全球领导者地平线携中国首款车规级AI芯片征程二代、ADAS 解决方案、新一代Matrix自动驾驶计算平台及一系列智能驾驶落地成果参展,向参展观众展示了一个多层次、多维度、多场景的智能驾驶“芯”生态。 2019年,随着征程二代量产并成功批量部署前装定点,地平线国内外业务增长迎来了新的拐点。作为商业化的关键一年,地平线与全球多家顶级Tier1s在ADAS、自动驾驶、多模交互等领域展开多维度合作,智能驾驶业务年内订单高达数亿元。四度参展 CES,从零到一,地平线用自己的方式为人工智能普惠大众走出了一条坚实的商业化道路。 位于南 2 馆 260
[汽车电子]
地平线四度亮相CES,车规级<font color='red'>AI</font>芯片征程二代引爆多项量产合作
如何利用嵌入式仪器调试SoC(一)
随着系统级芯片(SoC)的复杂度不断提高,软、硬件开发融合所带来的挑战已经不可小觑。这些功能强大的系统现在由复杂的软件、固件、嵌入式处理器、GPU、存储控制器和其它高速外设混合而成。更高的功能集成度与更快的内部时钟速度以及复杂的高速I/O相结合,意味着提供正常运行、并经过全面验证的系统比以前变得更难。   传统上,软件验证和调试及硬件验证和调试一直是两个不同的世界。通常情况下,软件团队和硬件团队各自为政,前者专注于编程模型内部的软件执行,后者则在硬件开发框架内进行调试,其中时钟周期精度、并行运行及调试数据回溯原始设计的关系是关键。理论上,经过全面调试后,软件和硬件应无差错地协同运行。但在实际环境中,无差错协同运行的情况不多,正因如此
[模拟电子]
如何利用嵌入式仪器调试<font color='red'>SoC</font>(一)
小广播
最新嵌入式文章
何立民专栏 单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved