图像
已发布: 2022年5月12日
最近，大多数摄像机传感器输入已变为2Mpix（全高清）或8Mpix（4K）。 但是，在使用高分辨率传感器时，常见的问题是支持 ISP 功能的传感器模块选择很少。此外，带有ISP的模块比没有ISP的模块更昂贵。因此，支持ISP的MPU更适合处理图像数据并提高图像质量。
此用例不需要外部 ISP 芯片，因此您可以降低产品的 BOM 成本。 另一方面, ISP调优是一项耗时的任务，因为手动参数调优，并且有效地增加了计划延迟和额外的开发。
请考虑下面列出的一些挑战：
- 多功能实现挑战
通常ISP 会转换图像数据并同时添加图像改进：
例如WDR混合了两个或多个图像以增强图像，2D或3D降噪 - 复杂性挑战
寄存器的数量也随着ISP功能的增加而增加。
在某些情况下，ISP中有数千个寄存器。
您必须调整这些寄存器以获得所需的图像质量。 - 传感器特定性能和可用性挑战
最佳设置取决于传感器类型，因为这些设置需要考虑传感器的独特特性，例如颜色。
根据镜头的不同，设置也存在差异，例如阴影和失真校正。
即使对于熟悉ISP的用户，也需要克服许多挑战，并且需要迭代。因此，瑞萨电子提出了一个“调谐ISP”概念，以简化RZ/V2M的ISP功能，从而加快图像改进过程并缩短开发时间。 我们使用API在更高层次上抽象每个ISP函数，而不会影响ISP函数的图像质量。
“调优 ISP”具有以下功能：
- 作为 API 支持各种 ISP 功能。
自动曝光或自动白平衡等多种功能需要额外的软件处理。
API包含处理，因此您可以实现仅调用API的全函数。 - 默认情况下，图像质量从最佳基线开始。
在此设置中，您可以使用 API 的参数应用微调。 - 在现场安装产品时，您可以使用调整工具。
该工具还支持许多功能，例如曝光，失真校正。
此工具的设置由 API 引用，但您可以更改设置，而无需进行太多参数调整或编程。
您可以“轻松”和“立即”使用来自传感器的输入图像，并具有预设设置和API。
此图显示了 RZ/V2M ISP 的支持功能。
图像
瑞萨电子还提供与多媒体相关的API。 这些可以在ISP转换后的编码视频流上轻松实现。
首先，瑞萨电子提供的RZ/V2M和API上支持的传感器数量。我们继续扩展 RZ/V2M 的“调谐 ISP”支持的传感器列表。
请参阅 API 和相关软件的功能。
- RZ/V2M: 具有高性能ISP和高能效AI推理的产品
- RZ/V2M ISP Support Package: 支持 ISP 和多媒体 API
- Introduction for Image Quality Functions 列出了几个 API 结果。
- RZ/V2M Linux Package: RZ/V2M 基础软件
- RZ/V2M DRP-AI Support Package: 支持RZ/V2M上的AI推理功能。