FFmpeg处理RTSP转WebSocket流时libx264编码及画质问题求助

一、解决「Unknown encoder libx264」错误 #

这个错误说明你的FFmpeg未编译或未安装libx264编码器支持，可通过以下方式解决：

1. 检查FFmpeg对libx264的支持
   执行终端命令：

   ffmpeg -encoders | grep libx264
   

   若输出包含libx264则支持，否则需补充安装或重新编译。

2. 快速解决：直接复制原流编码（推荐）
   既然设备流本身就是libx264编码，无需重新转码，直接复制编码即可避免编码器依赖问题，同时节省CPU资源：

   const ffmpeg = spawn('ffmpeg', [
     '-rtsp_transport', 'tcp', // 强制TCP拉流，提升稳定性
     '-i', 'rtsp://IP_ADDRESS:PORT_NUMBER/test',
     '-pix_fmt', 'yuv420p',
     '-c:v', 'copy', // 直接复制原视频编码
     '-f', 'flv',
     '-b:v', '1000k',
     '-'
   ]);
   

3. 安装libx264支持（如需转码）

   • 系统包安装：Ubuntu/Debian执行apt install libx264-dev ffmpeg；CentOS/RHEL执行yum install x264-devel ffmpeg
   • 自定义编译：编译FFmpeg时添加参数--enable-gpl --enable-libx264（需先安装libx264开发库）

二、解决mpeg1video转码后的解码错误、丢包及画质问题 #

针对你遇到的解码错误、RTP丢包、画质适配问题，可从拉流参数、编码配置、播放器设置三方面优化：

1. 优化RTSP拉流参数，解决丢包问题 #

const ffmpeg = spawn('ffmpeg', [
  '-rtsp_transport', 'tcp', // 替换UDP为TCP，彻底解决RTP丢包
  '-max_delay', '5000000', // 增大延迟阈值，避免触发"max delay reached"错误
  '-fflags', '+igndts+genpts', // 修复时间戳异常，解决解码不同步
  '-i', 'rtsp://IP_ADDRESS:PORT_NUMBER/test',
  // 后续编码参数...
]);

2. 调整mpeg1video编码参数，修复解码错误与画质 #

const ffmpeg = spawn('ffmpeg', [
  '-rtsp_transport', 'tcp',
  '-max_delay', '5000000',
  '-fflags', '+igndts+genpts',
  '-i', 'rtsp://IP_ADDRESS:PORT_NUMBER/test',
  '-pix_fmt', 'yuv420p',
  '-c:v', 'mpeg1video',
  '-s', '1280x720', // 匹配原流分辨率，避免画质拉伸
  '-qscale:v', '4', // 控制画质，数值越小画质越好（范围1-31）
  '-g', '60', // 设置关键帧间隔（每2秒1个），方便播放器快速恢复
  '-b:v', '800k', // 降低码率适配网络，避免卡顿
  '-r', '30', // 匹配原流帧率，不要强制设置不匹配的值
  '-f', 'mpegts',
  '-mpegts_flags', 'initial_discontinuity', // 修复起始帧解码错误
  '-'
]);

3. 优化JSMpeg播放器配置 #

var player = new JSMpeg.Player('ws://localhost:9004', {
    canvas: canvas,
    // disableGl: true, // 移除该配置，启用WebGL渲染提升画质与性能
    videoBufferSize: 1024*1024*16, // 增大缓存到16M，减少卡顿
    fps: 30, // 匹配流的帧率，提升播放流畅度
    autoplay: true
});

额外排查步骤 #

1. 单独在终端执行FFmpeg命令，验证流输出是否正常，排除代码调用问题
2. 测试JSMpeg播放本地生成的mpegts文件，确认编码参数是否正确
3. 检查WebSocket服务的缓冲区设置，避免流数据被截断

内容的提问来源于stack exchange，提问作者Garry Jassal