使用rust-brotli完成压缩时触发段错误的问题求助

我基于rust-brotli库实现了自定义压缩器，相关代码如下：

压缩器实现代码 #

pub use brotli::CompressorWriter;
pub use brotli::DecompressorWriter;

impl<W: Write> Coder<W> for CompressorWriter<W> {
    fn get_mut(&mut self) -> &mut W {
        CompressorWriter::get_mut(self)
    }

    fn finish(mut self) -> std::io::Result<W> {
        self.flush()?;
        CompressorWriter::finish(self).map_err(|_| {
            io::Error::new(io::ErrorKind::Other, "brotli encoder failed to finalize stream")
        })
    }

    fn finish_boxed(self: Box<Self>) -> io::Result<W> {
        self.finish()
    }
} 

Coder trait定义（mod.rs） #

pub trait Coder<W>: io::Write {
    /// 获取底层writer的可变引用
    ///
    /// 注意：如果继续使用当前解码器，修改writer可能导致意外结果
    fn get_mut(&mut self) -> &mut W;

    fn finish(self) -> std::io::Result<W>;

    fn finish_boxed(self: Box<Self>) -> io::Result<W>;
}

编码器创建代码 #

pub fn encoder<'a, W>(
    encoder_options: &CoderOptions,
    output: W,
) -> io::Result<Box<dyn Coder<W> + 'a>>
where
    W: io::Write + 'a,
{
        return Ok(BoxCoderDirect::boxed(brotli::CompressorWriter::new(
            output, 4096, 5, 22
        )));
    }

在对文件夹执行编码操作时，以下代码行触发段错误：

CompressorWriter::finish(self).map_err(|_| {
            io::Error::new(io::ErrorKind::Other, "brotli encoder failed to finalize stream")
        })

我已用gdb定位到问题行，但不清楚具体原因。此前使用另一款已多年未更新的brotli相关库时可正常工作。

可能的原因及修复方案 #

1. 重复flush导致内部状态异常
   rust-brotli的CompressorWriter::finish方法内部已自动完成flush和资源清理流程，你手动提前调用self.flush()会干扰内部状态，进而引发内存错误。

   修复代码：移除手动flush调用

   fn finish(mut self) -> std::io::Result<W> {
       CompressorWriter::finish(self).map_err(|_| {
           io::Error::new(io::ErrorKind::Other, "brotli encoder failed to finalize stream")
       })
   }
   

2. Boxed对象的所有权传递问题
   finish_boxed中直接调用self.finish()时，Box的包装可能导致所有权传递异常。手动解Box后再调用finish可避免此问题：

   修复代码：

   fn finish_boxed(self: Box<Self>) -> io::Result<W> {
       (*self).finish()
   }
   

3. 压缩参数配置不合理
   创建CompressorWriter时传入的参数（缓冲区4096、质量5、窗口大小22）在批量处理文件夹文件时，可能引发内存分配过载。尝试调整参数：

   示例调整：

   brotli::CompressorWriter::new(output, 8192, 6, 20)
   

4. 底层Writer生命周期问题
   确认处理文件夹时使用的底层Writer未被提前释放或非法借用，确保所有权管理完全符合Rust的生命周期规则。

额外调试建议 #

• 运行程序时添加RUST_BACKTRACE=1环境变量，获取完整崩溃调用栈，定位错误的具体来源。
• 先用单个小文件测试，排除批量操作导致的资源累积问题。
• 升级rust-brotli到最新稳定版本，旧版本可能存在已知内存bug。

内容的提问来源于stack exchange，提问作者Vana