如何从AudioWorkletNode获取采样数据并传输到JS主线程
最小改动AudioWorklet替代ScriptProcessor实现采样采集方案
核心思路是对齐原有ScriptProcessor的逻辑,仅替换采样入口代码,原有业务逻辑完全复用,改动量极低。
1. 编写AudioWorklet处理器逻辑
你可以选择单独建recorder-processor.js文件,也可以用Blob内联方式避免新增静态文件。
代码逻辑和你原有onaudioprocess的采样提取逻辑完全一致:
class RecorderProcessor extends AudioWorkletProcessor { process(inputs, outputs, parameters) { // 取第一输入源的第一声道数据,和原API获取采样的格式完全相同 const inputChannelData = inputs[0]?.[0]; if (inputChannelData) { // 直接将采样数据发往主线程 this.port.postMessage(inputChannelData); } // 保留音频透传,不影响原有音频链路 return true; } } registerProcessor('recorder-processor', RecorderProcessor);
2. 主线程替换原有初始化逻辑
你原有创建ScriptProcessor的代码仅需做少量调整,原有采样处理、存储、编码等业务代码完全不用修改:
// 原有ScriptProcessor初始化逻辑参考 // const scriptProcessor = audioCtx.createScriptProcessor(4096, 1, 1); // scriptProcessor.onaudioprocess = (e) => { // const data = e.inputBuffer.getChannelData(0); // /* 你的原有采样处理业务逻辑 */ // } // micSource.connect(scriptProcessor); // 替换后的AudioWorklet初始化逻辑 async function initRecorder(audioCtx) { // 加载处理器,用内联Blob的话替换这里的路径为Blob URL即可 await audioCtx.audioWorklet.addModule('./recorder-processor.js'); const recorderNode = new AudioWorkletNode(audioCtx, 'recorder-processor', { channelCount: 1, // 和你原设置的输入声道数保持一致 numberOfInputs: 1, numberOfOutputs: 1 }); // 替换原有onaudioprocess回调,拿到的data格式和原API完全一致 recorderNode.port.onmessage = (e) => { const data = e.data; /* 你的原有采样处理业务逻辑直接粘贴到这里即可,无需任何修改 */ }; // 原有节点连接逻辑完全不变 // micSource.connect(recorderNode); // recorderNode.connect(audioCtx.destination); return recorderNode; }
3. 无静态文件版本实现
如果不想新增单独的处理器文件,不用修改项目打包配置,可以用Blob内联方式加载处理器:
// 直接把处理器代码写在主线程里,转成Blob URL加载 const processorCode = ` class RecorderProcessor extends AudioWorkletProcessor { process(inputs, outputs, parameters) { const inputChannelData = inputs[0]?.[0]; inputChannelData && this.port.postMessage(inputChannelData); return true; } } registerProcessor('recorder-processor', RecorderProcessor); `; const processorBlob = new Blob([processorCode], { type: 'application/javascript' }); const processorUrl = URL.createObjectURL(processorBlob); // 加载时直接传入processorUrl即可 await audioCtx.audioWorklet.addModule(processorUrl);
注意事项
- 普通场景直接传输
Float32Array即可满足需求,和你原ScriptProcessor拿到的采样格式完全一致 - 高并发传输场景下,可以改用
SharedArrayBuffer传递采样数据,避免序列化开销,业务逻辑仍无需修改 - 如果你不需要输出音频,也可以不用把recorderNode连到destination节点,仅连接麦克风源到recorderNode就可以正常采集
内容的提问来源于stack exchange,提问作者user15892735
相关产品推荐
相关产品推荐

