Android平台WebRTC中如何将原始PCM音频数据作为自定义音频源使用？

嗨，我刚好之前做过类似的需求，完全可以实现的！咱们一步步来解决你的问题：

1. 能不能用原始PCM作为WebRTC的音频源？ #

当然可以！WebRTC的Android SDK专门预留了自定义音频源的扩展能力，完全支持注入你自己生成的原始PCM数据，不用局限于默认的麦克风输入。

2. 怎么把PCM帧注入到WebRTC的音频捕获管道？ #

核心思路是替换WebRTC默认的音频捕获器，用我们自己实现的捕获器来推送PCM数据，具体步骤如下：

• 实现WebRTC的AudioCapturer接口，在这个实现里处理PCM数据的生成与推送
• 将自定义捕获器关联到AudioSource实例
• 把这个自定义的音频源绑定到WebRTC的音频轨道，最终加入到PeerConnection中

给你一个具体的代码示例：

第一步：实现自定义PCM音频捕获器 #

import org.webrtc.audio.AudioCapturer;
import org.webrtc.audio.AudioFormat;

public class CustomPcmAudioCapturer implements AudioCapturer {
    private AudioFormat audioFormat;
    private OnAudioCapturedListener captureListener;
    private Thread pcmPushThread;
    private volatile boolean isCapturing;

    @Override
    public boolean startCapture(AudioFormat format, int expectedDelayMs) {
        this.audioFormat = format;
        isCapturing = true;

        // 启动线程持续推送PCM数据
        pcmPushThread = new Thread(() -> {
            while (isCapturing) {
                // 替换成你自己的PCM数据源，比如从内存、文件或其他模块获取
                short[] pcmData = getYourPcmData();
                if (captureListener != null) {
                    // 将PCM数据推送给WebRTC的音频处理管道
                    captureListener.onCaptureSamples(pcmData, System.nanoTime());
                }

                // 控制推送频率，要和采样率匹配，比如48kHz采样率下每10ms推送480个采样点
                try {
                    Thread.sleep(10);
                } catch (InterruptedException e) {
                    Thread.currentThread().interrupt();
                    break;
                }
            }
        });
        pcmPushThread.start();
        return true;
    }

    @Override
    public void stopCapture() {
        isCapturing = false;
        if (pcmPushThread != null) {
            pcmPushThread.interrupt();
            try {
                pcmPushThread.join();
            } catch (InterruptedException e) {
                Thread.currentThread().interrupt();
            }
        }
    }

    @Override
    public void setOnAudioCapturedListener(OnAudioCapturedListener listener) {
        this.captureListener = listener;
    }

    // 模拟PCM数据生成，实际开发中替换成你的真实数据源
    private short[] getYourPcmData() {
        // 根据当前AudioFormat计算每次需要推送的采样点数（以10ms为单位）
        int singleChannelSamples = (int) (audioFormat.sampleRate * 0.01);
        int totalSamples = singleChannelSamples * audioFormat.channelCount;
        short[] pcmData = new short[totalSamples];

        // 这里可以生成测试用的正弦波，或者读取你自己的PCM数据
        for (int i = 0; i < totalSamples; i++) {
            pcmData[i] = (short) (Math.sin(2 * Math.PI * 440 * i / audioFormat.sampleRate) * 32767);
        }
        return pcmData;
    }
}

第二步：关联自定义捕获器并使用 #

// 假设你已经初始化好了PeerConnectionFactory
PeerConnectionFactory peerConnectionFactory = ...;

// 创建自定义音频捕获器实例
CustomPcmAudioCapturer customCapturer = new CustomPcmAudioCapturer();

// 构建自定义AudioSource
AudioSource.Builder audioSourceBuilder = peerConnectionFactory.createAudioSource(new MediaConstraints());
audioSourceBuilder.setAudioCapturer(customCapturer);
AudioSource customAudioSource = audioSourceBuilder.createAudioSource();

// 创建音频轨道并添加到PeerConnection
AudioTrack customAudioTrack = peerConnectionFactory.createAudioTrack("custom-pcm-track", customAudioSource);
peerConnection.addTrack(customAudioTrack, Collections.singletonList("audio-stream"));

3. 需要用到WebRTC库中的哪些类或接口？ #

关键的几个类/接口如下：

• AudioCapturer：自定义音频源的核心接口，必须实现它来提供PCM数据的捕获逻辑
• AudioSource：音频源的抽象类，通过它的Builder可以替换默认的音频捕获器
• AudioFormat：定义音频参数（采样率、声道数、位深），你的PCM数据必须和这个格式完全匹配，否则会出现音频异常
• OnAudioCapturedListener：回调接口，用来将自定义的PCM数据推送给WebRTC内部的音频处理管道

额外注意事项 #

• 确保PCM数据格式和WebRTC要求一致：通常默认是48kHz采样率、16bit有符号整数（小端序），单声道或立体声
• 数据推送频率要稳定，避免音频卡顿；比如48kHz采样率下，每10ms推送480个单声道采样点
• 要正确管理线程，在调用stopCapture时必须终止推送线程，避免内存泄漏

备注：内容来源于stack exchange，提问作者artem