如何使用Prometheus监控Kubernetes集群中的CronJob任务

直接将告警查询写入CronJob的job.yaml不会生效，因为Prometheus的告警规则是独立于业务工作负载的配置项，需要部署到Prometheus可识别的规则存储位置，具体部署方式分两种常见场景：

场景1：原生Prometheus部署 #

• 编写独立的告警规则YAML文件，符合Prometheus规则规范，示例结构如下：

groups:
- name: cronjob-alerts
  rules:
  - alert: CronJobExecutionFailed
    expr: kube_cronjob_status_last_successful_time < time() - 2 * kube_cronjob_spec_schedule * 60 and kube_cronjob_spec_schedule != ""
    for: 2m
    labels:
      severity: warning
    annotations:
      summary: "CronJob {{ $labels.cronjob }} 执行异常"
      description: "命名空间{{ $labels.namespace }}下的CronJob已连续超过2个调度周期未成功执行"

• 找到Prometheus启动配置文件中的rule_files字段，将上述规则文件的本地路径添加到该字段的取值列表中
• 重启Prometheus实例，或调用/-/reload接口触发规则热加载即可完成部署

场景2：Prometheus Operator（kube-prometheus-stack）部署 #

这是Kubernetes生态中最常用的Prometheus部署方案，需要通过官方提供的PrometheusRule自定义资源配置告警：

• 编写独立的prometheus-cronjob-rules.yaml文件，示例结构如下：

apiVersion: monitoring.coreos.com/v1
kind: PrometheusRule
metadata:
  name: cronjob-alert-rules
  namespace: monitoring # 需与Prometheus Operator部署的命名空间保持一致
  labels:
    release: kube-prometheus-stack # 需匹配Prometheus配置的ruleSelector标签，否则规则不会被自动识别
spec:
  groups:
  - name: cronjob-alerts
    rules:
    - alert: CronJobExecutionFailed
      expr: kube_cronjob_status_last_successful_time < time() - 2 * kube_cronjob_spec_schedule * 60 and kube_cronjob_spec_schedule != ""
      for: 2m
      labels:
        severity: warning
      annotations:
        summary: "CronJob {{ $labels.cronjob }} 执行异常"
        description: "命名空间{{ $labels.namespace }}下的CronJob已连续超过2个调度周期未成功执行"

• 执行命令kubectl apply -f prometheus-cronjob-rules.yaml部署资源即可，Prometheus Operator会自动同步规则到关联的Prometheus实例，无需手动重启

生效验证 #

访问Prometheus UI的/alerts路径，即可看到已加载的CronJob告警规则，规则状态为ACTIVE则代表部署成功。

内容的提问来源于stack exchange，提问作者Developer_12