如何为iPhone连接工业USB/GigE相机用于计算机视觉项目

一、USB工业相机（UVC兼容）接入方案 #

• 直接利用AVFoundation的AVCaptureDevice：iPhone的AVFoundation原生支持符合**UVC（USB Video Class）**标准的外接USB相机，可通过AVCaptureDevice.DiscoverySession枚举所有可用设备，通过deviceType或localizedName区分内置与外接设备，无需额外依赖第三方库，能直接和原有APP的AVFoundation逻辑整合。
• 注意事项：部分工业USB相机需厂商提供iOS适配驱动或固件，先确认相机是否标注支持iOS UVC；需使用Lightning转USB相机适配器（或USB-C转USB，针对iPhone 15系列），部分高功耗工业相机可能需要外接电源。
• 代码示例片段：

let discoverySession = AVCaptureDevice.DiscoverySession(deviceTypes: [.externalUnknown, .videoInput], mediaType: .video, position: .unspecified)
for device in discoverySession.devices {
    print("发现外接设备：\(device.localizedName)，ID：\(device.uniqueID)")
    // 将设备添加至APP的相机选择列表
}

二、GigE工业相机接入方案 #

AVFoundation本身不直接支持GigE协议，可通过以下两种方式实现：

• 厂商专属iOS SDK：主流工业相机厂商（如Basler、Keyence、FLIR）基本都有针对iOS的专用SDK，这些SDK会封装GigE相机的网络通信、图像采集逻辑，可在原有APP中集成该SDK，新增GigE相机采集模块，与原有AVFoundation采集逻辑并行，不影响原有功能。
• 自行封装GigE协议：若厂商无iOS SDK，可基于GigE Vision协议规范，使用iOS的Network.framework实现UDP/TCP通信，完成相机发现、参数配置、图像流接收和解码，但该方案开发量极大，需对GigE协议有深入了解，仅建议在无厂商SDK时考虑。

三、OpenCV的辅助整合 #

若原有APP用到OpenCV，可将外接相机采集的帧数据转换为OpenCV的Mat格式处理：

• 对于USB相机：将AVCaptureSession输出的CMSampleBuffer转换为UIImage，再转成Mat；
• 对于GigE相机：厂商SDK一般会提供原始图像数据（如RGBA、YUV格式），可直接转换为Mat。

四、功能保留的整合策略 #

• 新增相机选择界面，支持用户切换内置相机/外接USB相机/GigE相机；
• 针对不同相机类型封装统一的采集接口，原有APP的回放、UI逻辑直接调用该接口，无需修改核心代码；
• 监听相机连接/断开事件，确保切换时APP状态稳定。

内容的提问来源于stack exchange，提问作者Julian Zirbel