如何调试大型Polars pl.select查询：定位异常行与问题表达式

启用调试日志跟踪执行步骤 #

• 将Polars和Python日志级别设为DEBUG，执行pl.select时会逐条输出表达式的执行状态，Panic前最后执行的表达式即为问题源。
• 代码示例：

  import logging
  import polars as pl
  
  logging.basicConfig(level=logging.DEBUG)
  pl.set_streaming_mode(False)  # 非流式模式下日志更易追踪
  

  日志中会出现Executing expression: [表达式内容]的条目，跟进到Panic发生前的最后一条即可锁定目标。

用verbose参数输出执行细节 #

• 在select调用时添加verbose=True，Polars会实时打印每个表达式的执行进度，Panic发生时的输出会直接关联到出错的表达式。
• 修改后的示例代码：

  pl.select([
    expr1, expr2, expr3 .... 
  ], verbose=True)
  

  控制台输出会清晰展示每个表达式的执行阶段，出错时的上下文能直接定位问题表达式。

开启RUST_BACKTRACE获取详细回溯 #

• 设置环境变量RUST_BACKTRACE=1后运行脚本，Polars的Panic会输出完整的Rust调用栈，其中包含表达式的内部执行路径，结合代码中的表达式列表可匹配到问题项。
• 终端运行示例：

  RUST_BACKTRACE=1 python your_script.py
  

  回溯信息里的调用栈会指向引发Panic的表达式相关逻辑，对照代码即可定位。

内容的提问来源于stack exchange，提问作者user1441053