macOS下FFmpeg打开外接麦克风音频流遇Audio Toolbox警告问题

问题描述 #

在macOS系统中使用FFmpeg的libavformat打开外接麦克风音频流时，频繁触发来自Audio Toolbox的警告：

CMIO_Unit_Converter_Audio.cpp:590:RebuildAudioConverter AudioConverterSetProperty(dbca) failed (1886547824)

该警告会导致音频流的codec id无法被正确检测，默认 fallback 到AV_CODEC_ID_FIRST_AUDIO（对应AV_CODEC_ID_PCM_S16LE）。如果麦克风实际输出编码为AV_CODEC_ID_PCM_F32LE，会直接引发音频解码失真。

通过循环10次打开/关闭输入流的测试代码（基于avfoundation输入格式）可稳定复现问题：MacBook内置麦克风无异常，但多数外接麦克风成功检测编码的次数极少，部分仅首次调用成功。

测试代码 #

#include "libavdevice/avdevice.h"
#include "libavformat/avformat.h"
#include <stdio.h>

const char inputDevice[] = ":0";

int main(int argc, char *argv[]) {
  const AVInputFormat *inputFormat;
  AVStream *inputStream = NULL;
  AVFormatContext *inputFormatContext = NULL;
  int ret;
  int i, j;

  // Initialize the input
  avdevice_register_all();

  inputFormat = av_find_input_format("avfoundation");

  for (i = 0; i < 10; i++) {
    ret = avformat_open_input(&inputFormatContext, inputDevice, inputFormat,
                              NULL);
    if (ret != 0) {
      fprintf(stderr, "Couldn't open input audio device");
      break;
    }

    ret = avformat_find_stream_info(inputFormatContext, NULL);
    if (ret < 0) {
      fprintf(stderr, "Couldn't find stream information.");
      break;
    }

    for (j = 0; j < inputFormatContext->nb_streams; j++) {
      if (inputFormatContext->streams[j]->codecpar->codec_type ==
          AVMEDIA_TYPE_AUDIO) {
        inputStream = inputFormatContext->streams[j];
        break;
      }
    }
    if (!inputStream) {
      fprintf(stderr, "Couldn't find a audio stream.");
      break;
    }
    printf("codecID: %s\n",
           inputStream->codecpar->codec_id == AV_CODEC_ID_FIRST_AUDIO
               ? "Incorrect"
               : "Correct");
    avformat_close_input(&inputFormatContext);
  }
  return 0;
}

示例输出 #

codecID: Correct
codecID: Incorrect
codecID: Incorrect
codecID: Incorrect
codecID: Incorrect
codecID: Correct
codecID: Incorrect
codecID: Incorrect
codecID: Incorrect
codecID: Correct

排查与解决方法 #

1. 显式指定音频格式参数 #

avfoundation自动协商格式时，频繁重连可能出现上下文异常。通过AVDictionary显式指定麦克风支持的采样格式、采样率和通道数，强制跳过自动检测的模糊逻辑：

AVDictionary *options = NULL;
// 指定PCM_F32LE格式（对应flt）
av_dict_set(&options, "sample_fmt", "flt", 0);
// 设置麦克风支持的采样率，比如44100或48000
av_dict_set(&options, "sample_rate", "44100", 0);
// 设置通道数，单声道写1，立体声写2
av_dict_set(&options, "channels", "2", 0);

// 带参数打开设备
ret = avformat_open_input(&inputFormatContext, inputDevice, inputFormat, &options);
av_dict_free(&options); // 释放参数字典

2. 优化设备重连流程 #

频繁打开关闭设备可能导致Audio Toolbox资源未及时释放，在每次关闭后增加短暂延迟，给系统足够时间回收资源：

avformat_close_input(&inputFormatContext);
usleep(500000); // 延迟500毫秒再进行下一次打开操作

3. 升级FFmpeg版本或应用补丁 #

该警告是FFmpeg avfoundation封装层与macOS Audio Toolbox的交互bug，升级到最新稳定版FFmpeg（如6.x及以上），官方可能已修复相关的CMIO转换器重建失败问题。

4. 匹配系统音频设置 #

在macOS系统偏好设置的「声音」面板中，确认外接麦克风的默认采样格式和采样率，确保FFmpeg指定的参数与系统设置完全一致，避免格式协商冲突。

5. 手动修正Codec参数 #

如果自动检测仍失败，可在avformat_find_stream_info后手动覆盖错误的codec参数：

if (inputStream->codecpar->codec_id == AV_CODEC_ID_FIRST_AUDIO) {
    inputStream->codecpar->codec_id = AV_CODEC_ID_PCM_F32LE;
    inputStream->codecpar->format = AV_SAMPLE_FMT_FLT;
    // 同步设置采样率和通道数，确保与实际匹配
    inputStream->codecpar->sample_rate = 44100;
    inputStream->codecpar->channels = 2;
}

内容的提问来源于stack exchange，提问作者Xavi