Windows下Python处理NetCDF4文件：读取与转DataFrame问题求助

问题背景 #

在Windows系统中尝试用Python筛选NetCDF4文件的指定经纬度数据，遇到xarray无法打开数据集、转换DataFrame失败的问题，且无法使用nctoolkit。尝试代码及报错如下：

尝试代码 #

# imports
import requests
import netCDF4 as nc
import gzip
#
# Download the gzipped datafile from GISS and load it into a netCDF Dataset
GISTEMPfile = requests.get('https://data.giss.nasa.gov/pub/gistemp/gistemp250_GHCNv4.nc.gz')
ds = nc.Dataset("dummy_path", mode="r", memory=gzip.decompress(GISTEMPfile.content))
ds.variables
v = ds.variables['tempanomaly']
#
# from pandas import DataFrame
# df = DataFrame(ds)
#
import xarray as xr
temp = xr.open_dataset(ds)
df = temp.to_dataframe()

循环报错困境 #

• 指定engine='netcdf4'时：ValueError: can only read bytes or file-like objects with engine='scipy' or 'h5netcdf'
• 指定engine='h5netcdf'时：ValueError: unrecognized engine h5netcdf must be one of: ['netcdf4', 'scipy', 'store', 'zarr']
• 升级WinPython到3.11.3.1后不指定engine：ValueError: did not find a match in any of xarray's currently installed IO backends ['netcdf4', 'h5netcdf', 'scipy', 'zarr']

核心原因 #

xarray的NetCDF读写依赖netCDF4、h5netcdf等底层库，Windows环境下容易出现库版本不兼容、安装不完整导致的引擎识别异常。

解决步骤 #

1. 重新安装兼容版本的依赖库 #

先卸载现有冲突库，再安装经过验证的兼容版本：

pip uninstall -y netCDF4 h5netcdf xarray scipy
pip install netCDF4==1.6.4 h5netcdf==1.2.0 xarray==2023.9.0 scipy==1.11.3

（WinPython用户直接在自带的命令行工具中执行上述命令）

2. 修正代码逻辑 #

无需先通过netCDF4.Dataset打开数据，xarray可直接处理解压后的字节流，修改后代码如下：

import requests
import gzip
import xarray as xr
import pandas as pd

# 下载并解压NetCDF数据
GISTEMPfile = requests.get('https://data.giss.nasa.gov/pub/gistemp/gistemp250_GHCNv4.nc.gz')
decompressed_data = gzip.decompress(GISTEMPfile.content)

# 用xarray读取字节流，指定netcdf4引擎
temp_ds = xr.open_dataset(decompressed_data, engine='netcdf4')

# 转换为DataFrame并重置索引
df = temp_ds.to_dataframe().reset_index()

# 筛选指定经纬度范围（示例：纬度20°-50°，经度100°-130°）
filtered_df = df[(df['lat'].between(20, 50)) & (df['lon'].between(100, 130))]

3. 验证依赖状态 #

执行以下代码检查xarray的可用引擎，确认netcdf4和h5netcdf已被识别：

import xarray as xr
print(xr.backends.list_engines())

内容的提问来源于stack exchange，提问作者Jean-Victor Côté