如何消除Camera API2相机预览中的卷帘快门效应以实现LED数据传输？

你尝试通过20Hz闪烁的LED向手机传输数据，使用Camera API2在Nexus 6、三星S7上以20fps采集320x240的YUV_420_888图像，已经关闭了自动曝光、自动白平衡等自动控制，设置的CaptureRequest参数如下：

CONTROL_AE_MODE = CONTROL_AE_MODE_OFF
CONTROL_AWB_MODE = CONTROL_AWB_MODE_OFF
EDGE_MODE = EDGE_MODE_OFF
CONTROL_MODE = CONTROL_MODE_OFF
SENSOR_EXPOSURE_TIME = 500000
SENSOR_FRAME_DURATION = 50000000

多数情况正常但部分帧出现卷帘快门效应（半帧旧数据半帧新数据），原生相机近距离拍摄也能观察到这个问题。

首先得明确：你遇到的卷帘快门效应是绝大多数手机CMOS传感器的固有特性——这类传感器采用逐行曝光而非全局曝光，当LED闪烁节奏和相机帧的曝光节奏没有完美同步时，就会出现半帧是旧状态、半帧是新状态的分割画面，直接导致数据解析出错。

关于Android相机VSYNC的疑问 #

Android系统本身的VSYNC主要用于屏幕绘制同步，但Camera API2并没有提供直接让相机曝光和LED闪烁对齐的VSYNC同步接口。虽然可以尝试通过SensorManager或Choreographer尝试对齐时序，但受限于不同设备相机硬件的封闭性，这种方法可靠性极低，很难在Nexus 6、三星S7这类不同机型上通用。

可行的解决思路 #

既然硬件层面的全局快门在手机上基本不可行，我们可以从软件层面入手：

• 时序同步优化：理论上LED闪烁频率（20Hz）和相机帧率（20fps）匹配，但实际硬件时钟的微小偏移会导致同步失效。你已经尝试过调整曝光时间和帧时长无效，说明这种方法在你的场景下不适用。
• 图像后处理修复：这也是你最终成功采用的方案，通过软件处理过滤掉被分割的无效帧区域，只使用完整的有效区域解析数据。

你的解决方案细节（亲测有效） #

你提到的OpenCV处理流程非常实用，具体步骤如下：

1. 对采集到的YUV_420_888格式图像转换为灰度图后，执行Canny边缘检测，捕捉卷帘快门产生的明显分割边缘；
2. 使用标准霍夫直线变换提取图像中的直线坐标；
3. 筛选出水平线（对应卷帘快门的帧分割线）；
4. 沿该水平线分割图像，仅保留面积较大的完整区域进行后续的数据计算。

这种方法完全绕开了硬件同步的限制，通过软件处理规避了卷帘快门带来的帧数据不完整问题，兼容性更强，在Nexus 6、三星S7这类设备上都能稳定生效。

内容的提问来源于stack exchange，提问作者kn0wn