如何恢复已持续12小时Unhealthy状态的Notebook Runtime？

第一步：排查Unhealthy根源 #

• 查看Runtime的健康检查日志与状态详情：使用对应平台的CLI命令获取具体失败原因，比如Docker环境下执行 docker inspect <runtime-container-id>，重点关注State.Health字段下的失败信息；若是Kubernetes Pod，执行 kubectl describe pod <pod-name> 查看事件与健康检查结果
• 检查宿主资源状态：确认宿主机是否存在磁盘空间耗尽、内存不足（OOM kill）、CPU占用过高的情况，这些是导致Runtime健康状态异常的常见原因

第二步：尝试直接恢复Runtime #

• 强制重启Runtime：如果Runtime进程未完全挂掉，执行对应重启命令，Docker用 docker restart <runtime-container-id>，K8s则删除异常Pod（kubectl delete pod <pod-name>），依赖Deployment/StatefulSet自动重建实例
• 手动修复健康检查逻辑：进入Runtime内部（Docker用 docker exec -it <runtime-container-id> /bin/bash），手动运行健康检查脚本/命令，定位并修复问题（比如依赖服务不可达、配置文件错误），修复后退出观察状态是否恢复

第三步：备选数据找回方案 #

• 挂载原数据卷到新实例：如果Runtime数据存储在独立持久化卷（如Docker Volume、K8s PVC），创建一个新的健康Runtime实例，将原数据卷挂载到新实例的对应路径，直接访问数据
• 导出数据到本地：若Runtime容器仍处于运行状态（非Exited），可直接复制数据到本地，Docker环境执行 docker cp <runtime-container-id>:/path/to/target/data /local/save/path

内容的提问来源于stack exchange，提问作者FreshLaptop