AE （1）_软件、硬件、驱动控制

#灵感# AE是个值得推敲再推敲的模块，有意思。

ISP中的sensor AE 组成：

因为多数中低端项目（手机、车载、监控等）的光圈是固定的，所以想调整拍摄的画面亮度，只能依赖曝光时间和增益的配合。

sensor 的AE （auto exposure）调节分为两部分：

AEC(auto exposure control) 调节曝光时间；

AGC（auto gain control）调节增益值。

sensor本身没有 auto功能的，需要通过后端平台实现。在整个 AEC/AGC过程中，以图像过暗的情况为例，调整策略为曝光时间优先（此时增益关闭），曝光时间已经最长无法继续调整时，开启并调整增益。

需要明确指出的是，仅曝光时间加大，噪声并不会明显增加，有助于提升图像信噪比。而增益开启，将直接导致平均噪声呈倍数放大；

调整AGC时，一般情况下优先调节模拟gain值，模拟 gain调节到上限时，如果要继续增大图像亮度，可以调节数字 gain值。

以上段落文字参考：

自动曝光AEC和自动增益AGC控制 - 简书 (jianshu.com)

sensor AE的流程及控制：

AE分为算法模块和统计模块，统计模块是和硬件相关的，包含在 ISP pipeline 里，这部分通常需要强大的算力，吐出亮度直方图，亮度区域统计值，当前亮度，环境亮度。算法模块，即我们需要调试的模块，这部分的参数由isp调试传入，依据前面的AE统计值进行运算后决定AE行为。如果需要进行AE收敛，则设置sensor内部shutter 和gain 或者ISP gain。

AE 算法模块计算出合适的shutter和gain 通过驱动接口，下到sensor寄存器中。

驱动中AE的控制：

1>、首先配置曝光时间

根据 sensor datasheet 配置好最大最小积分时间（integration_time，以行为单位，通常也称为曝光行，minLineCnt、maxLineCnt, 或写作exposure_line等）。可以从sensor手册获得此值，以及生效的寄存器地址。

AE 算法模块计算出合适的shutter，在寄存器地址，写入index 对应的exposure time值。

范围：min_integration_time(有时候=1) <= integration_times <= VTS - frame_offset（frame_offset是指最小的dummy_line，或者写为VB_min.[dummy_line=用来填充V_Blank的行，这个也可以从sensor datesheet中获得]）我恨！为啥不统一命名。

VTS = frame_length = V_Size + V_Blank // 帧长;

fps = pclk/(VTS * HTS) = pclk/(frame_length*line_length) = 1 / (frame_length * line_time)

不占用曝光时间，即可以通过调节V_Blank，调节帧长，从而改变帧率，但不会改变画面的亮度（曝光）。一般情况下，帧率可以由sensor供应商的FAE 提供配置。

2>、配置sensor 模拟增益、数字增益

一般我们只需配置 sensor 模拟增益（maxAnalogGain、minAnalogGain可以查sensor datasheet 或者找FAE 获得此值），不用特别配置数字增益。（很多时候在暗环境为了达到合适的信噪比，sensor 的模拟增益并不会用到最大值，所以也用不上数字增益。）但有时候会用到isp 数字增益，它是 AE 算法控制的，不用在 sensor 驱动中去配置。

sensor 模拟增益的控制，一种是写入 sensor Again 寄存器的值。sensor datasheet 会有一个 Again_table，配置好平台与 Sensor 的匹配精度（几倍增益对应写入哪个寄存器）。

AE 算法模块计算出合适的gain后，驱动通过查 Again_table 写入寄存器regValTable 生效。