STM32图像处理库介绍 STM32图像处理库(STM32IPL)是一个用C语言编写的开源软件库,它提供图像处理和计算机视觉功能,以便在STM32微控制器上更快地开发视觉分析应用程序。最近,STM32IPL作为STM32Cube的一个中间件组件, 在FP-AI-VISION1功能包的最新版本(v3.1.0)中一起发布。 众所周知,计算机视觉深度学习模型的输入通常与相机捕获的图像帧不同。深度学习模型的输入可能有不同的维度和不同的图像格式,因此通常需要对原始图像进行一些基本的预处理,例如:调整大小、图像格式转换、归一化等。STM32IPL通过提供一些功能强大且随时可用的软件组件,简化并加速此类图像预处理功能的开发。 主要特性 STM32IPL的关键特性:
STM32IPL在功能上被划分为各种模块,如下图所示: 这些模块可以虚拟分组在以下宏组中:
下图展示了STM32IPL中提供的图像处理功能示例: 原图 高斯滤波后 经过Canny边缘检测算法后 镜像翻转后 旋转180°后 一个典型的使用STM32IPL的STM32应用程序的软件架构如下所示: STM32IPL位于BSP和HAL之上的中间件内。基本上,几乎所有的STM32IPL函数都与平台无关,除了以下两种函数,它们利用了一些STM32 MCU提供的硬件功能,而这些硬件功能只在部分而不是全部STM32 MCU里提供: ✦ 对文件执行读写操作的I/O函数。特别是用于处理所支持的图像文件格式(如 BMP、PPM、PGM 和 JPEG)的两个读/写函数。这些函数依赖于以下作为STM32Cube中间件组件的第三方开源库:
✦ 通过利用STM32 DMA2D(用于图形操作的硬件加速器)在屏幕上快速绘制图像的函数。 本节将以两个高级功能为例来说明其工作原理以及其应用在图像上的效果:霍夫变换和目标检测。 霍夫变换是一种特征提取方法,用于检测图像中的线条和圆形等简单形状。这里的“简单”形状是指只需要几个参数就能表示的形状。例如,一条线可以用两个参数(斜率、截距)来表示,而一个圆有三个参数——圆心坐标和半径。霍夫变换在寻找图像中这种形状方面有出色的表现。 STM32IPL支持两种霍夫变换函数:
下面两张照片显示了使用霍夫变换进行线条检测的结果。 原图 通过霍夫变换进行线条检测后 请注意,检测到的线的质量很大程度上取决于边缘图的质量。因此,在现实世界中,霍夫变换通常在当您可以控制环境并因此获得一致的边缘图,或者当您可以针对您正在寻找的特定类型的边缘来训练边缘检测器时使用。 下面的另外两张照片显示了使用霍夫变换进行圆检测的结果。同样,结果的质量很大程度上取决于您可以找到的边缘的质量,以及您对要检测的圆的大小有多少先验知识。 原图 通过霍夫变换进行圆检测后 目标检测是一种计算机视觉技术,可以识别和定位图像或视频中的对象。常用于自动驾驶汽车、机器人、面部识别等许多应用场景。 STM32IPL提供三种函数用于目标检测:
以下照片显示了面部检测和眼部检测功能的结果: 原图 眼部及面部检测后 最后,要获得STM32IPL库,用户需下载最新的FP-AI-VISION1功能包,然后该库便可以在以下路径找到:
|
ST边缘AI传感器系列新增分析密集运动的惯性模块
突破边缘AI应用的次元壁:首届意法半导体边缘人工智能峰会举行
基于STM32Cube.AI 部署ONNX 模型风扇堵塞检测实操
AI技术更简便、更智能的X-CUBE-AI v7.1.0,让您轻松部署AI模型
基于NanoEdge AI风扇堵塞检测实践示例
基于NanoEdge AI的解决方案
基于AI技术ToF传感器的3D手势识别
基于STM32计算机视觉包FP-AI-VISION1经验分享
基于专为STM32 MCU优化的STM32Cube.AI库
AI技术在Deep Edge领域中的应用
可以的