如何获取minikube配置文件，支持Airflow从集群外操作Pod？

1. 导出Minikube的KubeConfig文件 #

Minikube默认会生成Kubernetes配置文件，你可以直接导出到指定路径，方便Airflow调用：

• 导出配置到自定义文件：

  minikube config view --output=yaml > ~/minikube-kubeconfig.yaml
  

• 验证配置有效性：

  kubectl --kubeconfig=~/minikube-kubeconfig.yaml get nodes
  

  能正常返回minikube节点信息，说明配置文件可用。

2. 配置Airflow使用该KubeConfig #

有两种方式让Airflow读取这个配置文件：

• 环境变量方式：在Airflow运行环境中设置环境变量，Kubernetes执行器会自动识别：

  export KUBECONFIG=~/minikube-kubeconfig.yaml
  

  如果是用docker-compose部署Airflow，在.env文件中添加KUBECONFIG=/opt/airflow/minikube-kubeconfig.yaml，同时将配置文件挂载到容器内。
• 修改Airflow配置文件：编辑airflow.cfg，找到[kubernetes]段落，添加或修改：

  kube_config_path = /绝对路径/to/minikube-kubeconfig.yaml
  

  注意必须使用绝对路径，避免Airflow进程因路径问题无法读取配置。

3. 确保Airflow能访问Minikube集群 #

• 获取Minikube集群的API Server地址：

  minikube ip
  

  验证Airflow所在机器能连通该地址的8443端口：

  curl https://<minikube-ip>:8443 --insecure
  

• 若Airflow运行在容器内，需将本地的kubeconfig文件挂载到容器中。以docker-compose为例，在docker-compose.yaml的Airflow服务下添加：

  volumes:
    - ~/minikube-kubeconfig.yaml:/opt/airflow/minikube-kubeconfig.yaml
  

4. 验证配置效果 #

创建一个测试DAG，使用KubernetesPodOperator执行简单任务，比如：

from airflow import DAG
from airflow.providers.cncf.kubernetes.operators.kubernetes_pod import KubernetesPodOperator
from datetime import datetime

with DAG(
    'test_kubernetes_executor',
    start_date=datetime(2024, 1, 1),
    schedule_interval=None,
) as dag:
    task = KubernetesPodOperator(
        task_id='test_pod',
        name='test-pod',
        image='ubuntu:latest',
        cmds=['echo'],
        arguments=['Airflow Kubernetes Executor Test'],
        is_delete_operator_pod=True,
    )

启动Airflow后触发该DAG，若能成功创建并执行Pod，说明配置生效。

内容的提问来源于stack exchange，提问作者rafaelleru