如何在Google Cloud Run Job中运行指定dbt bash命令？

我尝试在Google Cloud Console中将bash命令dbt run -s tag:client作为Google Cloud Run Job执行，通过传递容器参数并保留默认入口点。已将包含如下内容的Dockerfile推送至Artifact Registry：

FROM python:3.11

ENV PYTHONUNBUFFERED=True

WORKDIR /code

COPY ./requirements.txt /code/requirements.txt
RUN pip install --no-cache-dir -r requirements.txt

COPY . /code/

RUN dbt deps

ENTRYPOINT ["dbt"]

本地执行docker run命令正常：

docker run \
 data-warehouse-2 \
 run -s tag:client   

但在Cloud Run Job中传递如下参数时：

args:
    - run
    - -s
    - tag:client

出现错误：

terminated: Application failed to start: "/usr/local/bin/dbt": exec format error

我尝试了多种入口点及参数组合均无效，包括：

ENTRYPOINT ["sh", "-c", "dbt \"$@\"", "--"]
ENTRYPOINT ["/bin/bash"]
ENTRYPOINT ["/bin/bash", "dbt"]

1. 修复镜像架构不匹配问题 #

exec format error最常见的原因是本地构建的镜像架构与Cloud Run运行环境不兼容：

• 若使用M系列Mac（arm64架构），本地构建的镜像是arm64，但Cloud Run默认使用amd64架构的虚拟机，两者不兼容会触发该错误。
• 解决办法：构建镜像时指定目标架构为amd64，确保与Cloud Run环境一致。

构建兼容镜像的命令 #

使用Docker的--platform参数指定架构：

docker build --platform linux/amd64 -t data-warehouse-2 .

重新推送该镜像到Artifact Registry即可。

2. 调整Dockerfile与Cloud Run参数（可选优化） #

架构问题解决后，可根据需求选择以下配置：

方案1：保留原ENTRYPOINT，参数不变 #

原Dockerfile的ENTRYPOINT ["dbt"]搭配Cloud Run的如下args完全可行，逻辑与本地docker run命令一致：

args:
- run
- -s
- tag:client

方案2：改用shell入口点（备用） #

如果需要复杂shell逻辑，可修改Dockerfile的ENTRYPOINT：

ENTRYPOINT ["bash", "-c"]

然后在Cloud Run的args中传递完整命令：

args:
- "dbt run -s tag:client"

注意处理命令中的特殊字符转义。

3. 验证镜像可用性 #

推送镜像后，可在本地模拟amd64环境测试镜像是否正常运行：

docker run --platform linux/amd64 data-warehouse-2 run -s tag:client

内容的提问来源于stack exchange，提问作者Javier Lopez Tomas