|
2025 STM32峰会线上Demo展示如何使用STM32N6-DK使用摄像头识别手势控制机械手的开发过程。 整个控制系统的硬件如下,STM32N6-DK通过RS485连接STM32MP257PLC开发板,由STM32MP257PLC控制机械手的运动。
STM32N6识别手势关键点并显示的在显示屏上数据流如下,从摄像头采集到手势图像信息,传输到AI模型的数据量化模块的同,传输到PSRAM中用于在LTDC显示器上显示手势信息。完成手势图像信息的量化后进行模型识别的后处理得到手势关键点信息,并传输到LTDC显示,结合摄像头的视频流在显示屏上显示模型的识别效果。
同时在STEdgeAI中的工作就如下,使用STEdgeAI Core对关键点数据文件用于模型训练,最后生成可以部署到STM32N6上network.c文件,用于手势关键点识别。
STM32N6的Flash启动过程如下,首先执行BootROM中的启动程序,完成后跳转到FSBL程序,对外部的Memory进行初始化,最后执行User App中的应用代码。
同时线上训练营在线模型后,展示模型的控制效果,显示方案的可行性。
通过学习STM32N6识别手势控制机械手的线上训练营,对方案的实现流程由全面的认识,体会到STM32N6强大的边缘AI性能。 |
微信公众号
手机版