Apache Superset迁移至Google Cloud SQL MySQL时的初始化错误与卷配置问题

核心误区纠正 #

你当前的配置存在逻辑错误：使用Google Cloud SQL作为元数据库时，不需要在Docker Compose中定义本地db（MySQL容器）服务。你的错误日志来自本地MySQL容器的初始化问题，而这完全没必要——因为元数据库是托管在GCP的Cloud SQL，不是本地容器内的MySQL。

本地MySQL容器错误的临时修复（仅用于测试） #

如果只是想先测试本地MySQL再迁移，当前错误的原因是挂载路径错误：MySQL 5.7的默认数据目录是/var/lib/mysql，不是/var/lib/mysql/data。修改Docker Compose的卷配置：

db:
  env_file: docker/.env-non-dev
  image: mysql:5.7
  container_name: superset_db
  restart: unless-stopped
  volumes:
    - db_home:/var/lib/mysql

同时确保db_home卷是全新的（如果之前有残留数据，先执行docker volume rm db_home清理）。

连接Google Cloud SQL MySQL的正确配置步骤 #

1. 移除Docker Compose中的本地MySQL服务 #

删除db相关的所有配置，因为我们将直接连接托管的Cloud SQL实例。

2. 配置Cloud SQL访问（推荐使用Auth Proxy） #

为了安全连接Cloud SQL，使用Cloud SQL Auth Proxy作为中转，在Docker Compose中添加该服务：

cloud-sql-proxy:
  image: gcr.io/cloudsql-docker/gce-proxy:1.33.0
  container_name: cloud_sql_proxy
  command: /cloud_sql_proxy -instances=你的GCP项目ID:区域:实例名=tcp:0.0.0.0:3306
  restart: unless-stopped

• 替换你的GCP项目ID:区域:实例名为实际的Cloud SQL实例标识符。
• 该代理会监听容器的3306端口，Superset容器可通过cloud-sql-proxy:3306访问Cloud SQL。

3. 更新Superset配置文件 #

修改superset_config.py中的数据库连接串：

# 使用pymysql驱动（需要确保Superset容器安装了pymysql，可在requirements.txt添加）
SQLALCHEMY_DATABASE_URI = 'mysql+pymysql://你的CloudSQL用户名:密码@cloud-sql-proxy:3306/superset'

• 确保Cloud SQL中已经创建了名为superset的数据库。
• 如果未安装pymysql，在Superset的requirements.txt中添加pymysql，重新构建镜像。

4. 数据迁移 #

• 从原PostgreSQL元数据库导出数据：使用pg_dump导出Superset的schema和数据。
• 将数据导入Cloud SQL的MySQL数据库：注意处理PostgreSQL与MySQL的数据类型差异（比如数组类型、JSON类型的转换）。

5. 启动服务 #

执行docker-compose up -d启动Superset和Cloud SQL Proxy服务，验证元数据库连接是否正常。

内容的提问来源于stack exchange，提问作者Puranjay Kwatra