|
计算机视觉作为AI技术的关键分支,核心任务是赋予计算机解读图像与视频内容的能力,可谓AI感知世界的“先头部队”。借助它,机器能像人一样“看”世界,识别物体、场景、动作,为后续分析决策提供基础数据。) _ d7 m' U- F! b STM32N6非常适合计算机视觉应用,因为芯片内置了实现计算机视觉应用的核心要素—相机ISP(图像信号处理单元)。它宛如相机的“智慧中枢”,负责处理图像传感器采集到的原始数据,让最终呈现用于分析的影像变得清晰、准确。' g1 {- U- i0 M, z* m9 G9 o/ q# q 6 P4 Q# h8 L5 `+ Y6 C1 j; C2 S- ] 01 ISP嵌入MCU的变革意义 过去,ISP被集成到相机中,要么在图像传感器内部,要么作为独立组件。例如,我们通常会用一个相机模块来将相机连接到STM32H7。
其次,ISP分担了CPU(或GPU)的工作负载,大大降低了功耗,并且在操作上更加灵活。+ w( M/ n7 p& D: X5 J7 r 再者,节约图像传感器成本,无需购买集成ISP的昂贵图像传感器。 最后,STM32N6支持市场主流的MIPI CSI–2图像传输接口,拥有更高带宽,实现高像质的影像数据传输。1 j' q1 O3 D" [2 a; _3 ?& t( L
02 STM32N6之ISP技术剖析
STM32N6的ISP面向计算机视觉应用,与智能手机中强大的ISP不同,其作用不是为了拍出高分辨率的精美照片,服务于人类视觉体验,而是要求场景清晰、目标对象突出,比如高对比度、物体形状清晰的图像就利于图像识别。所以,STM32N6的ISP性能要求低于专为手机相机类先进视觉处理设计的ISP,却能以合理成本,适配MCU处理大多数常见的计算机视觉任务。: Z) C# ]4 P2 k- ^
▲ 图示:STM32N6 ISP关键图像校正步骤 + T: E1 I& a% k' v) W" p g在功能方面,STM32N6的ISP涵盖了丰富的图像处理操作:裁剪功能可以根据实际需求截取图像的特定区域;去马赛克能够将原始的拜耳图像转换为色彩丰富的彩色图像;坏像素校正则有效去除图像中的瑕疵像素,提升图像质量;对比度调整、伽马校正等功能让图像的色彩和明暗效果更加出色。此外,它还具备自动曝光控制和自动白平衡等实用的中间件功能,并且拥有为Cortex-M55优化的图像处理库,进一步增强了其在图像处理方面的能力。) E- j$ w# {5 V) ^+ B! _) E 1 e) _$ J& i2 D$ e3 W. f 03 STM32N6之ISP IQTune调试工具解析 为了让用户更方便地对STM32N6的ISP进行编程和调整,ST推出了免费的STM32 ISP IQTune综合调试工具。这款工具的出现,将彻底改变传统的ISP调试模式。5 Y/ N4 j, L# J! U( f6 ` u- n2 s
▲ 图示:STM32 ISP IQTune工具启动页面 STM32 ISP IQTune工具则完美解决了这些问题。它操作简单,即使不是专业的图像质量专家也能轻松上手。ISP IQ Tune这款工具需要基于MCU或MPU的ISP来使用,用户只需要按照指引依次操作即可完成ISP调整,整个流程清晰明了。
▲ 图示:STM32 ISP IQTune工具操作模块页面 IQTune的操作模块主要有:3 ~+ Y# ^' p3 N, N7 |: ~- k. g
- w+ t. M! d/ c, }8 Z ( _5 F p; L1 |7 l, Q
▲ 图示:STM32 ISP IQTune工具图像分析页面 STM32 ISP IQTune软件还有一个十分强大的图像分析功能,该功能可以帮助用户创建自己的颜色校正矩阵,获得校正过的色度值。操作也非常简单,选择并导入一张用于颜色校正(Color Checker)的图片,进行图像分析,即可生成颜色校正矩阵和不同颜色的增益值。这些数值可以直接应用到白平衡profile的颜色校正数据中,实现精准的颜色校正,让图像色彩还原更加准确。 04 结语 STM32N6的ISP为计算机视觉领域应用中的性能提升带来显著优势,ISP IQTune相机调试工具操作便捷且功能完备,为开发者带来极大便利。STM32N6未来将催生更多创新的AI应用,深度赋能各领域边缘AI的落地。- v: k: b& o; {6 c# F% G* g ?* x3 R* U" a ! H5 R9 A9 U: N5 R0 U有奖互动# q( s! J8 l7 ]4 H3 I3 j# z% E 在留言区回复下方问题选项,回答正确的蝶粉有机会获奖。根据留言顺序回答正确的3位将获得STM32随机开发板一份。( \# H5 |1 k- k8 ^& E 1、集成ISP的优势有哪些?(多选) A:更灵活地更换或升级图像传感器 B:完全卸载CPU在多任务应用场景中的负担 C:节约图像传感器成本5 Q0 D4 r8 d" \ u- n- ] D:支持MIPI CSI-2图像传感器(更高带宽) 9 g) i1 j3 A2 U, U- ?# V2 R2 f7 a 2、ST为了让用户更方便地对STM32N6的ISP进行编程和调整,推出了免费的STM32 ISP IQTune综合调试工具。以下说法正确的有哪些?(多选) A:首个针对MCU/MPU的ISP调试工具& h q' g6 U' G7 { B:完全免费7 W7 w0 k* ]$ r" Y' p- ] C:只支持Linux操作系统' k, Q( s- a1 | r5 q& s % Q$ R- p* c( O4 O3 ]( d " N* }$ ^1 c7 C6 b 活动时间:即日起-5月19日12:009 ]3 G: r4 W5 @5 q: F4 A6 ~ 7 Q! ~: f% |: u" e0 A ) w+ i" V/ V. D5 e; s1 k 温馨提示:, d6 q* D( L( l7 D6 F( d- i8 s: ~ 1.本活动仅限电子及相关行业从业者、相关专业在校大学生参与;4 `7 U/ J4 z) R) I 2.如有任何作弊行为,将取消活动参与资格; 3.本活动最终解释权归意法半导体中国所有; 4.获奖名单将留言置顶公布 u" G& m* Q' J* P p/ k0 f2 D |
合作伙伴方案 | 基于STM32N6 NE302紧凑型AI视觉节点
如何测量STM32N6的功耗
请教下STM32N6570 怎么把分辨率改成320x240并可以全屏显示
STM32N6课程学习心得
【STM32N6570-DK评测】3.CubeMX关于DCMIPP和CSI的BUG整理及摄像头使用
线下培训(深圳) | 基于STM32N6的边缘人工智能应用开发实训
《STM32N6视频课程》学习笔记+STM32N6 系统资源隔离: RIF对外设的配置和管理
《STM32N6视频课程》学习笔记+STM32N6系统资源隔离— RIF访问规则与非法访问控制
《STM32N6视频课程》学习笔记+STM32N6 系统资源隔离 Cortex M55 TrustZone
《STM32N6视频课程》学习笔记+STM32N6 资源隔离RIF简介(一)
微信公众号
手机版
1、集成ISP的优势有哪些?(多选) 答案:A、B、C、D A:更灵活地更换或升级图像传感器 B:完全卸载CPU在多任务应用场景中的负担 C:节约图像传感器成本 D:支持MIPI CSI-2图像传感器(更高带宽)
2、ST为了让用户更方便地对STM32N6的ISP进行编程和调整,推出了免费的STM32 ISP IQTune综合调试工具。以下说法正确的有哪些?(多选) 答案:A、B A:首个针对MCU/MPU的ISP调试工具 B:完全免费
1、集成ISP的优势有哪些?(多选)
答:A、B、C、D
2、ST为了让用户更方便地对STM32N6的ISP进行编程和调整,推出了免费的STM32 ISP IQTune综合调试工具。以下说法正确的有哪些?(多选)
答:A、B
1.ABCD;2.AB
1:ABCD 2:AB
1:ABCD 2:AB
1、ABCD 2、AB
答案 1 ABCD 2 AB
1、集成ISP的优势有哪些?(多选)
A、B、C、D
2、ST为了让用户更方便地对STM32N6的ISP进行编程和调整,推出了免费的STM32 ISP IQTune综合调试工具。以下说法正确的有哪些?(多选) A、B
1.ABCD 2.AB
1.ABCD
2.AB
1.ABCD
2.AB
1.ABCD
2.AB
1:ABCD 2:AB