计算机视觉作为AI技术的关键分支，核心任务是赋予计算机解读图像与视频内容的能力，可谓AI感知世界的“先头部队”。借助它，机器能像人一样“看”世界，识别物体、场景、动作，为后续分析决策提供基础数据。
8 o4 X9 \; b/ `! X

( ?5 c4 Z& V. W9 F! SSTM32N6非常适合计算机视觉应用，因为芯片内置了实现计算机视觉应用的核心要素—相机ISP（图像信号处理单元）。它宛如相机的“智慧中枢”，负责处理图像传感器采集到的原始数据，让最终呈现用于分析的影像变得清晰、准确。

$ t, r/ X. a, j6 q% N7 r
+ F0 ^( ~1 s5 O& \2 m9 ]7 H

01

ISP嵌入MCU的变革意义

过去，ISP被集成到相机中，要么在图像传感器内部，要么作为独立组件。例如，我们通常会用一个相机模块来将相机连接到STM32H7。
% |3 i$ Y0 |5 f) R2 R. u

如今，将ISP嵌入MCU成为新趋势，以简化计算机视觉用例，STM32N6便是这一创新的典型代表。这一举措能带来什么优势呢？

首先是多功能性，用户可以更灵活狄更换或升级图像传感器，无需大费周章地重复画质调整流程。通过简单的ISP参数设置，可以实现一次性调优，无需大费周章地频繁且重复画质调整流程，轻松适应不同传感器，中间件和调整过程均可保持通用。
6 l6 Y5 b/ I$ z! o6 ?4 P其次，ISP分担了CPU（或GPU）的工作负载，大大降低了功耗，并且在操作上更加灵活。
再者，节约图像传感器成本，无需购买集成ISP的昂贵图像传感器。
/ Y# N+ o: _- D& x! A5 c, i最后，STM32N6支持市场主流的MIPI CSI–2图像传输接口，拥有更高带宽，实现高像质的影像数据传输。

02

STM32N6之ISP技术剖析

STM32N6的ISP在性能和功能上有着出色表现。它支持高达500万像素的图像传感器，能够以每秒30帧的速度处理图像。其内部设计了三个独立的管道，可以并行运行不同的处理任务，分别为NPU或CPU等功能块服务，极大地提高了图像处理的效率。
' y. G, i$ ^$ _  v/ ~STM32N6的ISP面向计算机视觉应用，与智能手机中强大的ISP不同，其作用不是为了拍出高分辨率的精美照片，服务于人类视觉体验，而是要求场景清晰、目标对象突出，比如高对比度、物体形状清晰的图像就利于图像识别。所以，STM32N6的ISP性能要求低于专为手机相机类先进视觉处理设计的ISP，却能以合理成本，适配MCU处理大多数常见的计算机视觉任务。
' h8 g1 \! G6 T

▲ 图示：STM32N6 ISP关键图像校正步骤

在功能方面，STM32N6的ISP涵盖了丰富的图像处理操作：裁剪功能可以根据实际需求截取图像的特定区域；去马赛克能够将原始的拜耳图像转换为色彩丰富的彩色图像；坏像素校正则有效去除图像中的瑕疵像素，提升图像质量；对比度调整、伽马校正等功能让图像的色彩和明暗效果更加出色。此外，它还具备自动曝光控制和自动白平衡等实用的中间件功能，并且拥有为Cortex-M55优化的图像处理库，进一步增强了其在图像处理方面的能力。
& G4 v4 d4 |* z8 I3 W
9 x( @1 u( x8 G8 P1 `4 m1 _! l5 r
. Z  z9 T3 E  \2 R# _' W

03

STM32N6之ISP IQTune调试工具解析

为了让用户更方便地对STM32N6的ISP进行编程和调整，ST推出了免费的STM32 ISP IQTune综合调试工具。这款工具的出现，将彻底改变传统的ISP调试模式。

过去，用户如果需要调整图像质量，通常有两个方案，但都面临诸多难题。一是遵循芯片供应商的设置说明，但往往只能支持有限的默认传感器，无法针对特定应用进行优化，也难以考虑镜头、照明条件等因素的变化。另一个方案是通过第三方服务商进行调整，不仅成本高昂，而且沟通周期长，可能需要数月才能得到满意结果。

▲ 图示：STM32 ISP IQTune工具启动页面

STM32 ISP IQTune工具则完美解决了这些问题。它操作简单，即使不是专业的图像质量专家也能轻松上手。ISP IQ Tune这款工具需要基于MCU或MPU的ISP来使用，用户只需要按照指引依次操作即可完成ISP调整，整个流程清晰明了。
2 P: x6 v  v7 Q) r! r6 Q' Q

▲ 图示：STM32 ISP IQTune工具操作模块页面

IQTune的操作模块主要有：
( C' Z, i* Z* S: }  b

• Statistic Removal：统计数据移除模块，去除并行接口的冗余数据；
• Bad Pixels：坏像素点去除模块，清理图像中的不良像素；
• Black Leve：黑电平校正，让黑色更纯正；
• Demosaicing：去马赛克模块，用来将原始（拜耳）图像转换为彩色图像；
• Exposure Control：曝光控制，用户既可以选择自动曝光模式，也能关闭自动功能进行手动控制，通过设置不同的曝光时长，实时观察图像效果的变化；
• White Balance：白平衡调整，可提供多种色温下的Profile，用户可以根据实际场景选择合适的色温及颜色增益（红、绿、蓝增益）；
• Contrast：对比度调整，以增强图像中颜色和外形的显示效果。这里有不同的配置（可以进行切换）。也可以自己调整参数，您可以在屏幕及板子上看到效果；
• Gamma Correction：伽玛校正，有启用和禁用两个模式。
  & `0 w- P/ U( @

5 j8 d4 w! m: g0 D" O5 E( ?
5 J, D; C7 S; l9 S5 ~

▲ 图示：STM32 ISP IQTune工具图像分析页面

+ L1 |6 o9 \0 Z7 C* K; }! v
& k- I; m* S9 e# |: e7 P; P4 B  mSTM32 ISP IQTune软件还有一个十分强大的图像分析功能，该功能可以帮助用户创建自己的颜色校正矩阵，获得校正过的色度值。操作也非常简单，选择并导入一张用于颜色校正（Color Checker）的图片，进行图像分析，即可生成颜色校正矩阵和不同颜色的增益值。这些数值可以直接应用到白平衡profile的颜色校正数据中，实现精准的颜色校正，让图像色彩还原更加准确。

/ s/ y$ e- n  \; Y  v1 R

04

结语

STM32N6的ISP为计算机视觉领域应用中的性能提升带来显著优势，ISP IQTune相机调试工具操作便捷且功能完备，为开发者带来极大便利。STM32N6未来将催生更多创新的AI应用，深度赋能各领域边缘AI的落地。
5 w; Q! m# u, D3 u8 j
. G3 g2 I( `& t+ G9 J/ B

# O6 X" l  X* v$ ]3 r0 u. n有奖互动


在留言区回复下方问题选项，回答正确的蝶粉有机会获奖。根据留言顺序回答正确的3位将获得STM32随机开发板一份。
4 C6 t) d$ Y6 u8 J3 U# C1、集成ISP的优势有哪些？（多选）
) u2 X1 V0 J5 ~& _1 TA：更灵活地更换或升级图像传感器
B：完全卸载CPU在多任务应用场景中的负担
C：节约图像传感器成本
, B6 J& Y  R0 zD：支持MIPI CSI-2图像传感器（更高带宽）

  T' d9 J" l3 V6 M9 Y
2、ST为了让用户更方便地对STM32N6的ISP进行编程和调整，推出了免费的STM32 ISP IQTune综合调试工具。以下说法正确的有哪些？（多选）
4 Y- Y" m7 R+ E* V$ m* xA：首个针对MCU/MPU的ISP调试工具
B：完全免费
  m; c! }# c- P6 _" G$ s7 kC：只支持Linux操作系统

( J' V, {' m. b- y8 ?3 A
: c; v0 Z$ k8 M) n2 n1 u2 z" m活动时间：即日起-5月19日12:00


2 {. s4 j" Y6 `5 _3 T! ^- H温馨提示：
1.本活动仅限电子及相关行业从业者、相关专业在校大学生参与；
2.如有任何作弊行为，将取消活动参与资格；
- j4 K2 ]4 R  V9 g% ]- X- j, ~3.本活动最终解释权归意法半导体中国所有；
0 z4 N$ u0 C! f8 m" \$ p9 F4.获奖名单将留言置顶公布

. H5 W* e/ ?1 M1 q4 R
+ {1 {+ ~! Y* M

1、集成ISP的优势有哪些？（多选） 答案：A、B、C、D A：更灵活地更换或升级图像传感器 B：完全卸载CPU在多任务应用场景中的负担 C：节约图像传感器成本 D：支持MIPI CSI-2图像传感器（更高带宽）

2、ST为了让用户更方便地对STM32N6的ISP进行编程和调整，推出了免费的STM32 ISP IQTune综合调试工具。以下说法正确的有哪些？（多选） 答案：A、B A：首个针对MCU/MPU的ISP调试工具 B：完全免费

1、集成ISP的优势有哪些？（多选）A、B、C、D2、ST为了让用户更方便地对STM32N6的ISP进行编程和调整，推出了免费的STM32 ISP IQTune综合调试工具。以下说法正确的有哪些？（多选） A、B

1、集成ISP的优势有哪些？（多选）

答：A、B、C、D

2、ST为了让用户更方便地对STM32N6的ISP进行编程和调整，推出了免费的STM32 ISP IQTune综合调试工具。以下说法正确的有哪些？（多选）

答：A、B

1.ABCD;2.AB

1：ABCD 2：AB

1：ABCD 2：AB

1、ABCD 2、AB

答案 1 ABCD 2 AB

1、集成ISP的优势有哪些？（多选）

A、B、C、D

2、ST为了让用户更方便地对STM32N6的ISP进行编程和调整，推出了免费的STM32 ISP IQTune综合调试工具。以下说法正确的有哪些？（多选） A、B

1.ABCD 2.AB

1：ABCD 2：AB
8 d2 I2 M+ L: J5 g- n: o5 z4 L

1. 第一题 ：A、C、D
2. 第二题 ：A、B

1.ABCD

2.AB

1.ABCD

2.AB

1.ABCD

2.AB

1：ABCD 2：AB