使用HuggingFace load_dataset加载数据集时出现NotImplementedError与KeyError

问题重现 #

运行以下代码加载数据集时抛出错误：

from datasets import load_dataset

dataset = load_dataset("archanatikayatray/aeroBERT-NER")

报错核心信息：

KeyError: 'layout'
...
NotImplementedError: Cannot  

问题原因 #

报错并非数据集本身的问题，而是环境中ipywidgets或comm组件异常导致的：在创建Notebook进度条时，组件无法建立前端通信（常见于无GUI的远程服务器环境、或组件版本不兼容），进而触发连锁错误。

解决方案 #

方案1：强制使用标准tqdm进度条 #

替换Notebook版tqdm为终端版，避免前端通信问题：

from datasets import load_dataset
import tqdm

# 强制使用标准终端进度条
tqdm.tqdm = tqdm.std.tqdm
dataset = load_dataset("archanatikayatray/aeroBERT-NER")

方案2：直接禁用进度条 #

跳过进度条渲染，彻底规避组件问题：

from datasets import load_dataset

dataset = load_dataset("archanatikayatray/aeroBERT-NER", disable_tqdm=True)

方案3：修复组件环境（需保留进度条时用） #

卸载现有冲突组件，重新安装兼容版本：

pip uninstall -y comm ipywidgets
pip install ipywidgets comm

若在Jupyter Notebook中使用，需额外启用widgets扩展：

jupyter nbextension enable --py widgetsnbextension

内容的提问来源于stack exchange，提问作者ByUnal