摘要. M; W8 m" u# U8 X3 q) D$ I j% { ST在边缘人工智能领域投入已超过10年,不仅拥有STM32Cube.AI和NanoEdge™ AI Studio软件工具;还与NVIDIA合作,整合NIVIDIA TAO和STM32Cube.AI工具,让开发者STM32微控制器上无缝训练和实现神经网络模型。 1 X! X* b; p2 a' V9 Z8 k( @3 E+ e 本文为2023 STM32峰会连接篇重点内容。 ST 为什么要积极投入边缘人工智能及我们所提供的服务 (Cube.AI, NEAI) 人工智能无处不在,但实现的方式和涉及到的软硬件实现是不同的。随着嵌入式应用需求的深入和迭代,边缘人工智能正成为热议话题,它将提供越来越多的产品价值,也或将成为改变AI未来游戏规则的驱动力。 在这场人工智能浪潮中,很多数人的观念还停留在人工智能是由云服务器中的大型数据中心驱动,但在边缘侧、在应用设备终端涌现出一种非常不同且令人振奋的分化 —— 边缘人工智能,它由芯片来驱动。这是STM32擅长的领域,它将在边缘人工智能的实现和落地发挥关键作用。 显而易见,在边缘侧设备中运行人工智能模型有很多优势:设备响应速度快、超低延时;降低数据传输量;更有效地保护隐私、增强信息安全;降低边缘侧设备的运行功耗;还可以降低推理成本以实现其他新的功能操作。 我们花了10年时间研发投入边缘人工智能的硬件和软件栈开发。为了在可预见的未来,当嵌入式人工智能普及时,可以向STM32用户提供完成的产品组合。不仅包括硬件、加速引擎,还有极为重要的软件工具,保证开发者能够在MCU和MPU上优化和运行AI模型。 & O! H x! |/ Y3 O6 d# t( D W6 ^ 从“Orlando”芯片的问世,到广受欢迎的“STM32Cube.AI”工具的诞生,使开发者在MCU上优化AI模型成为可能;再到对”Cartesiam“的收购,让我们拥有了NanoEdge AI Studio这一工具,可以提供一个易于实施的TinyML解决方案,解决预测性维护等工业应用问题;近来,我们又专注STM32N6的研发,这是第一个带有神经网络硬件处理单元的微控制器。 / J5 {; W3 P4 x5 G4 E2 E( o! q B a STM32Cube.AI是一款用来评估、转换、优化和部署已训练好的神经网络模型的工具,适合主流的人工智能框架,可为开发者提供评估和调整算法的能力。 7 G8 T. D2 U- V7 H- I4 n NanoEdge™ AI Studio(NanoEdgeAIStudio)是一种新型机器学习(ML)技术,它进一步降低了边缘人工智能开发的门槛。NanoEdge™ AI Studio可以开发人员基于少量数据,通过创建、清理、优化数据集等步骤创建适配的ML库。NanoEdge具有异常检测与设备学习的能力,也提供分类和回归库。 ! f# ^' }8 k- D/ t STM32 x NVIDIA TAO,让边缘AI走向“破茧时刻“ / s* ?: ]0 Z+ [1 v! B8 c; k; ]8 F在最近的GTC活动中,英伟达发布了TAO工具包。NVIDIA TAO是一个加速AI算法开发和优化的开发环境,TAO工具包提供了一个低代码的人工智能框架,以加速视觉模型的开发,从新手到专家级数据科学家都能快速上手使用。 TAO 5.0版本有很多令人惊叹的功能和变化:
NVIDIA与意法半导体的合作的关键是整合NIVIDIA TAO和STM32Cube.AI工具,让开发者有可能在资源有限的STM32微控制器上无缝地训练和实现神经网络模型,以达到适配的性能和精度! Luis WU 讲解在STM32H7上,结合TAO对代码的优化,实现人物识别的视频片段。 与英伟达的合作将拓展ST的边缘人工智能生态系统,也确立了ST成为基于MCU的边缘人工智能领导者的愿景。 STM32 AI解决方案灵感就在stm32ai.st.com 现已官网开放上线中文版,网站集成了大量应用案例,如预测性维护、物联网产品、智能楼宇、资产跟踪、人数统计等,供开发者参考。同时,还介绍了适用于边缘AI开发的STM32产品及开发工具,以及丰富的资源,帮助开发者轻松启动项目。 & s9 t/ Y% C0 N& ?3 Z3 B( h7 t: g2 ~ |
实战经验 | 基于STM32CubeIDE移植ClassB 4.0
STM32:如何利用四大战略支柱撑起中国市场
STM32全球在线峰会:揭示2024年嵌入式系统三大趋势
【文末彩蛋】有看点!2023STM32峰会资料回顾
“STM32不止于芯”: STM32峰会暨粉丝狂欢节重磅回归深圳
STM32峰会以平台型设计软件破题垂直应用
STM32峰会相连入云去
STM32探索嵌入式应用新边界竞逐创新巅峰
倒计时1天!立即预约STM32峰会直播!
关于2022年STM32 峰会延期通知