如何捕获xarray.open_dataset的控制台输出？解决异常输出无法捕获问题

为什么这类输出无法被捕获？ #

不是子进程导致的问题，根源在于xarray底层依赖的netCDF-C库（处理远程DODS数据集的核心库）是直接通过C语言的stderr文件描述符输出错误信息的。你之前只重定向了Python层面的sys.stderr，但C库的输出绕开了Python的IO重定向逻辑，直接写到了系统级别的标准错误流里，所以无法被Python的StringIO捕获。

解决方法 #

方法1：直接关闭底层库的日志输出 #

通过netCDF4库提供的接口，直接控制底层C库的日志级别，这是最简洁的屏蔽方式：

import xarray as xr
import netCDF4

# 设置日志级别为0，关闭netCDF-C库的所有输出
netCDF4.set_log_level(0)

url = "http://nomads.ncep.noaa.gov:80/dods/gefs/DOES_NOT_EXIST/gec00_00z_pgrb2a"

try:
    ds = xr.open_dataset(url)
    print(ds.dims)
except OSError as ose:
    print(f"捕获到错误: {ose}")

方法2：系统层面重定向stderr（适合需要捕获输出的场景） #

如果需要记录这些C库输出的内容而非直接屏蔽，可以通过os.dup2重定向系统级别的stderr文件描述符，覆盖C库的输出路径：

import sys
import os
from io import StringIO
import xarray as xr

url = "http://nomads.ncep.noaa.gov:80/dods/gefs/DOES_NOT_EXIST/gec00_00z_pgrb2a"

captured_stderr = StringIO()
# 保存系统原stderr的文件描述符
original_stderr_fd = os.dup(sys.stderr.fileno())

try:
    # 将系统stderr重定向到自定义的StringIO
    os.dup2(captured_stderr.fileno(), sys.stderr.fileno())
    ds = xr.open_dataset(url)
    print(ds.dims)
except OSError as ose:
    print(f"捕获到错误: {ose}")
finally:
    # 恢复系统原stderr
    os.dup2(original_stderr_fd, sys.stderr.fileno())
    os.close(original_stderr_fd)
    # 读取并处理捕获到的底层库输出
    captured_stderr.seek(0)
    c_lib_output = captured_stderr.read()
    if c_lib_output:
        print(f"底层库输出内容:\n{c_lib_output}")

方法3：通过环境变量全局抑制 #

在运行脚本前设置NC_VERBOSE=0环境变量，也能全局关闭netCDF-C库的所有输出：

# Linux/macOS终端
NC_VERBOSE=0 python your_script.py

# Windows PowerShell
$env:NC_VERBOSE=0; python your_script.py

内容的提问来源于stack exchange，提问作者FlorianK