使用STM32的机器学习功能进行音频场景分类
音频场景分类(ASC)赋予设备智能感知能力,可精准识别用户所处环境,从而在可穿戴设备、安防监控、医疗健康等诸多应用场景中大幅提升功能体验与产品价值。相关研发的主要难点在于软硬件开发的高复杂度,尤其是对算力、内存及功耗均受制约的便携式和可穿戴设备而言挑战尤为突出。意法半导体(ST)依托高性价比、超低功耗的STM32微控制器打造人工智能解决方案,有效化解了成本与设计之间的矛盾。
该系统通过两个MP34DT05数字MEMS全向麦克风来捕获环境声音,以确保精确的声音传感,并通过STM32L475VG微控制器实现高效处理。这款超低功耗MCU具有信号处理外设和浮点单元(FPU),以便实现快速AI软件执行。FP-AI-SENSING软件为涉及神经网络库(由STM32CubeMX的X-CUBE-AI扩展生成)的ASC配置解决方案。
STM32WB55VGY提供兼容Bluetooth?低功耗SIG规范5.2的超低功耗无线连接。通过面向Android和iOS设备的适当应用程序,如意法半导体BLE传感器应用程序(版本 4.1.0或更高版本),可通过蓝牙将算法输出传输到智能手机。该应用程序可显示所产生的声学场景分类和推断,以及记录在ASC系统上并用于AI再训练的活动数据。
从而产生了基于AI神经网络技术的高性价比低功耗音频场景分类解决方案。它使用户能够借助智能手机应用程序根据环境音频数据来识别环境(例如,室内、室外、车内等)。
主要产品优势
STM32L475VG?- 具备DSP功能的强大微控制器
这款采用Arm? Cortex?-M4内核的微控制器具有用于管理传入的数字音频信号的必要外设,以及用于确保以最低功耗快速、精确地识别音频的处理能力和内存。
MP34DT05?- 全向MEMS麦克风
这款MEMS数字麦克风具有高全向灵敏度和高声学过载点,以便在嘈杂的环境中进行音频采集而不失真。
STM32WB55VGY?- 超低功耗BLE 5.2模块
这款高度紧凑的超低功耗无线模块符合Bluetooth?低功耗SIG规范v5.2,并提供免版税协议栈。
All Features_zh
具有用于实时音频场景分类的人工神经网络(ANN)实现的即用型固件
边缘处理方法可确保比集中式云解决方案更低的功耗和延迟,并能在基于音频(图像)的应用中提供更出色的私密性
基于实时操作系统(RTOS)的超低功耗实现
兼容面向Android/iOS系统的意法半导体BLE传感器应用程序,可显示已识别的音频场景和管理数据记录
得益于STM32Cube,可在不同MCU系列之间轻松移植
兼容Bluetooth?低能耗(BLE) SIG规范v5.2
说明:内容基于公开信息整理,不代表原厂官方意见,仅供工程师学习用,若涉及侵权,请联系删除。
本文涉及芯片 • 点击直达华强平台供应
