全球领先的边缘 AI 和智能音频专家XMOS近日 宣布：公司已推出 端侧多模态 AI传感器融合接口（ AI Sensor Hub），该接口利用 XMOS的 xcore软件定义系统级芯片（ SoC）上灵活的接口和高效的算力，在边缘对来自不同接口的包括音频、图像、视觉和其他多种传感器输出的多模态信号进行融合以及 AI计算，既可支持本地设备独立地对各种传感器信号进行 AI推理计算，也可作为智算系统的输入前端并执行相应的功能。该方案可立即实施的应用包括大模型、云服务和专用网络及系统的智能接入，以及智能视频门铃、视频监控设备、多模态传感器集中器、车牌识别等边缘智能设备。

与那些装备精良、耗费靡多的云服务和计算机系统不同， XMOS 利用其集 AI 、 DSP 、控制和 I/O 于一体的 xcore 软件定义 SoC ，结合诸如深度神经网络（ DNN ）等模型，可以超小型化和低功耗的单芯片就实现了这些多种传感信号的多模态 AI 处理。 XMOS 的多模态 技术已经取得了突破性进展， 合作伙伴通过使用 xcore 这样的嵌入式 SoC 不仅运行了 DNN 模型， 还开发了实现人脸检测、特征提取、身份验证、安防报警、车牌识别和 图像分 类等功能的系统解决方案，而且还根据平台需求开发了实时数据预处理智能前端 。

xcore.ai 之所以能够在各种 AI 应用中成为一种可以提供低延迟和高度确定性的 AI 功能的处理器，得益于独特的多线程微架构。每个 xcore.ai 具有 16 个逻辑内核，分属两个多线程处理器功能块，而每个功能块配备 512kB 的 SRAM 和一个提供整数和浮点 ALU 的矢量单元。强大的处理器间通信基础设施为每个集成处理器和多个 xcore.ai SoC 之间提供高速通信，不仅可以实现最终的可扩展性，而且还实现了并行多线程、多核矩阵计算。

系统架构

X MOS 解决方案的优势

·可以无需联网，持续工作，始终可用

·无需外部存储，完成实时图像等信号的处理

·绝对保护隐私，可设置为离线解决方案，不将数据传递到云端

·边缘 AI 提供低延迟响应

·将所有代码和模式的大小缩减到仅有 0.6MB

X MOS   xcore.ai 处理器如何支持边缘 AI?

·可开发和训练你自己的模型

·使用 XMOS 的 “ AI 工具 ”进行 转换

·生成最优化的、矢量化的 xcore 代码

·可同时运行多个模型

·用 C 或 C++ 语言 定义您自己的应用程序

对于 AI 芯片的开发来说，友好的开发环境极为重要。为了帮助设计师更好地开发各种边缘 AI 应用， XMOS 把所有计算资源及其调度管理都放在同一个易用和强大的开发环境中。这为开发人员提供了完善的技术支持、工具支持和其他支持。 XMOS 提供完善的开发工具链与丰富的软件库，如免版税的软件、强大的 XTC 开发工具套件，以及专门设计的评估平台。通过使用这些工具，显著降低了开发难度，帮助工程师快速将产品概念转化为实际应用，并缩短了产品上市时间。

“ XMOS 的多模态 AI 模型处理 功能可在 极具挑战性的 应用场景中，实现 实时 的、持续工作的 AI 应用，同时保护个人数据和隐私 ， ”   XMOS 亚太区市场和销售负责人牟涛说道。 “当然，该方案也可以根据需要，灵活地作为大模型、云和网络的智能输入接口，对传感信号进行数据格式转换提供给下一级平台处理，或者进行本地 AI 处理后只将关键信息提供给平台。同时， XMOS 提供的集成开发环境和第三方软件可以很方便地开发出商用的边缘 AI 解决方案”

与 XMOS 面对面交流

第 23 届广州国际专业灯光、音响展览会（以下简称“广州展”）将于 5 月 27 – 30 日在中国进出口商品交易会展馆 A 、 B 、 D 区盛大启幕！ XMOS 作为全球领先的数字音频及多媒体 AI 处理芯片及解决方案提供商，将携其分销商晓龙国际、威健实业和瑞致科技，以及增值分销及设计公司飞腾云和其它方案公司共同参加本届广州展，届时将展出先进音频接口、 AI 降噪及空间音频、 DSP 音效、 Hi-Fi 解码器参考设计和麦克风阵列参考设计等技术和方案。欢迎莅临 XMOS 展位： 5.2A66 。