FFmpeg UDP屏幕流在ExoPlayer中播放异常（黑屏带噪点）

问题分析 #

ffplay能正常播放但ExoPlayer出现异常，核心原因通常是：

• MPEG-TS流缺少关键帧（SPS/PPS）或关键帧间隔不合理，导致ExoPlayer解码器无法初始化
• ExoPlayer默认缓冲配置不适应UDP低延迟流的丢包特性
• 未明确指定视频编码参数，导致输出流与ExoPlayer解码器兼容性差

解决方案 #

1. 修改ffmpeg推流命令，优化输出流参数 #

在原命令基础上补充关键参数，确保流包含必要的解码器初始化信息，同时适配ExoPlayer：

ffmpeg -re -f x11grab -i :0 -r 30 -s 1280x720 -c:v libx264 -preset ultrafast -tune zerolatency -profile:v baseline -level 3.0 -g 30 -mpegts_flags +resend_headers -f mpegts udp://192.168.1.107:40001?pkt_size=1316

参数说明：

• -r 30：明确设置帧率为30fps，避免自动检测的不确定性
• -s 1280x720：指定输出分辨率，降低解码压力（可根据设备调整）
• -profile:v baseline -level 3.0：使用兼容性更好的Baseline编码profile，适配多数移动设备解码器
• -g 30：设置关键帧间隔为30帧（每秒1个关键帧），确保ExoPlayer能快速获取初始化信息
• -mpegts_flags +resend_headers：强制重复发送TS流的PSI/SI头，避免ExoPlayer丢包后无法恢复
• ?pkt_size=1316：设置UDP数据包大小，匹配网络MTU，减少分片丢包

2. 调整ExoPlayer的缓冲与配置 #

修改ExoPlayer初始化代码，启用低延迟缓冲策略，适配UDP流特性：

Surface {
    val loadControl = DefaultLoadControl.Builder()
        .setBufferDurationsMs(
            500,    // 最小缓冲时长（ms）
            1000,   // 最大缓冲时长（ms）
            250,    // 缓冲播放阈值（ms）
            500     // 缓冲重启阈值（ms）
        )
        .build()

    val exoPlayer = ExoPlayer.Builder(this@MainActivity)
        .setLoadControl(loadControl)
        .setSeekBackIncrementMs(1000)
        .build().apply {
            setMediaItem(MediaItem.fromUri("udp://192.168.1.107:40001"))
            prepare()
            playWhenReady = true // 自动播放
        }

    AndroidView(
        factory = {
            PlayerView(it).apply {
                player = exoPlayer
                useController = false // 可选：隐藏控制栏减少延迟
            }
        }
    )
}

关键调整：

• 大幅降低缓冲时长，适配UDP低延迟流的实时性需求
• 设置playWhenReady = true确保自动触发播放
• 可选隐藏控制栏进一步减少延迟

3. 额外排查点 #

• 确认Android设备和推流电脑在同一局域网，UDP端口40001未被防火墙拦截
• 测试时暂时关闭Android设备的省电模式，避免解码器被限制性能
• 若仍有问题，可尝试将ffmpeg输出格式改为rtp，并在ExoPlayer中使用对应的RTP媒体源（需指定SDP）

内容的提问来源于stack exchange，提问作者Musa Kavak