如何在服务器上使用RgbdSensor渲染？能否使用虚拟显示？

问题原因 #

你碰到的RuntimeError是因为服务器没有可用的X显示环境，而RgbdSensor依赖的VTK渲染组件必须要有图形界面上下文才能工作。

解决方法：用虚拟X显示（Xvfb）绕过图形界面依赖 #

1. 安装Xvfb #

根据服务器的Linux发行版选择对应命令安装：

• Debian/Ubuntu系列：sudo apt-get install xvfb
• RHEL/CentOS系列：sudo yum install xorg-x11-server-Xvfb

2. 启动虚拟显示会话 #

运行以下命令创建一个虚拟的X显示实例（这里用显示编号:1，你可以根据需要自定义）：
Xvfb :1 -screen 0 1024x768x24 &

3. 指定程序使用虚拟显示 #

设置环境变量让RgbdSensor相关的渲染程序指向这个虚拟显示：
export DISPLAY=:1

4. 执行渲染代码 #

现在运行你的RgbdSensor渲染脚本，VTK会自动使用虚拟显示完成渲染，不会再出现X服务器连接错误。

更简便的方式：用xvfb-run一键处理 #

可以直接用xvfb-run命令包裹你的程序，它会自动创建虚拟显示、设置环境变量，程序结束后还会自动清理：
xvfb-run -a python your_rendering_script.py
-a参数会自动挑选可用的显示编号，避免手动指定时的冲突问题。

额外提示 #

• 如果你的代码里硬编码了显示设备编号，记得改成读取$DISPLAY环境变量的值。
• 要是仍有图形相关报错，可以尝试安装mesa-utils补充图形驱动依赖：sudo apt-get install mesa-utils

内容的提问来源于stack exchange，提问作者Nicholas Pfaff