Docker咨询：家庭实验室多Python服务容器间共享Python包方案

核心思路 #

通过Docker的绑定挂载（Bind Mount），将宿主机上的一个目录挂载到所有Python相关容器的site-packages目录，实现依赖包的共享。这样在任意一个容器内通过pip安装的包，会直接同步到宿主机目录，其他容器的Python环境就能立即识别并使用这些包。

前提条件 #

所有服务必须使用相同版本的Python（比如统一用Python 3.10），不同版本的Python依赖包结构不兼容，会导致无法识别。

具体实现步骤 #

1. 创建宿主机共享目录 #

在宿主机上创建用于存放Python依赖的目录：

mkdir -p ~/python-shared-packages

2. 编写docker-compose.yml配置 #

将所有需要共享依赖的服务配置挂载该目录到容器内的Pythonsite-packages路径（以Python 3.10为例，路径为/usr/local/lib/python3.10/site-packages）：

version: '3.8'

services:
  jupyterlab:
    image: jupyter/minimal-notebook:python-3.10
    ports:
      - "8888:8888"
    volumes:
      # 共享依赖目录
      - ~/python-shared-packages:/usr/local/lib/python3.10/site-packages
      # 挂载笔记本目录（可选）
      - ./jupyter-notebooks:/home/jovyan/work
    environment:
      - JUPYTER_ENABLE_LAB=yes

  kestra:
    image: kestra/kestra:latest
    ports:
      - "8080:8080"
    volumes:
      - ~/python-shared-packages:/usr/local/lib/python3.10/site-packages
      # 挂载Kestra数据目录（可选）
      - ./kestra-data:/app/data
    command: server

  flask-app-1:
    build: ./flask-app-1
    ports:
      - "5000:5000"
    volumes:
      - ~/python-shared-packages:/usr/local/lib/python3.10/site-packages

  flask-app-2:
    build: ./flask-app-2
    ports:
      - "5001:5001"
    volumes:
      - ~/python-shared-packages:/usr/local/lib/python3.10/site-packages

3. 编写Flask应用的Dockerfile #

以基础Python镜像构建，无需在Dockerfile中安装依赖（依赖由共享目录提供）：

# 必须和其他服务使用相同版本的Python
FROM python:3.10-slim

WORKDIR /app
COPY . .

# 直接启动应用，依赖已在共享卷中
CMD ["python", "app.py"]

4. 启动并验证 #

1. 启动所有服务：

docker-compose up -d

2. 在JupyterLab中执行pip install pandas，安装完成后：
   • 进入Kestra容器验证：docker exec -it <kestra-container-name> python -c "import pandas; print(pandas.__version__)"
   • 进入Flask容器验证：docker exec -it <flask-container-name> python -c "import pandas; print(pandas.__version__)"

注意事项 #

• 不要在多个容器中同时执行pip install操作，可能会导致依赖文件损坏或版本冲突。
• 如果某个服务需要特殊依赖版本，建议在JupyterLab中统一安装对应版本，确保所有服务兼容。
• 若不确定容器内Pythonsite-packages路径，可通过以下命令查看：

docker exec -it <container-name> python -c "import sys; print([p for p in sys.path if 'site-packages' in p])"

内容的提问来源于stack exchange，提问作者Daniel Quantil