Vega调用仪表盘时间范围时出现EsError日期解析报错求助

错误原因 #

你遇到的EsError是因为Elasticsearch尝试用strict_date_optional_time格式解析毫秒级时间戳数字（1738832413539），但这个格式仅支持解析人类可读的日期字符串（比如2025-03-07T12:20:13），完全不匹配数字型时间戳，因此解析失败。

针对性修复方案 #

1. 修正Elasticsearch字段映射（优先方案） #

如果message.timestamp字段存储的是毫秒级时间戳，需要确保它的ES字段类型为date，同时配置兼容数字时间戳的格式：

"message.timestamp": {
  "type": "date",
  "format": "strict_date_optional_time||epoch_millis"
}

这样ES既能解析常规字符串日期，也能识别数字格式的时间戳。

2. 调整Vega-Lite查询的时间参数格式 #

如果无法修改字段映射，可通过脚本将%timefilter%传入的时间戳转换成ES能识别的日期字符串：

{
  "range": {
    "message.timestamp": {
      "gte": {
        "script": {
          "source": "Instant.ofEpochMilli(params.min).toString()",
          "params": { "min": {"%timefilter%": "min"} }
        }
      },
      "lte": {
        "script": {
          "source": "Instant.ofEpochMilli(params.max).toString()",
          "params": { "max": {"%timefilter%": "max"} }
        }
      }
    }
  }
}

3. 修复配置中的逻辑错误 #

你的配置里还有一个明显问题：

• 聚合部分未定义time_buckets聚合，但data.format却指向aggregations.time_buckets.buckets，这会导致无法获取有效数据。如果不需要按时间分桶，直接把data.format改成aggregations，同时移除依赖key字段的窗口排序逻辑；如果需要按时间分桶，要添加日期直方图聚合：

"aggs": {
  "time_buckets": {
    "date_histogram": {
      "field": "message.timestamp",
      "fixed_interval": "1h" // 根据需求调整时间间隔
    },
    "aggs": {
      "false_count": { "filter": { "term": { "message.hasException": false } } },
      "true_count": { "filter": { "term": { "message.hasException": true } } },
      "total_count": { "value_count": { "field": "message.hasException" } }
    }
  }
}

完整修正后的配置示例（全局统计版本） #

{
  "$schema": "https://vega.github.io/schema/vega-lite/v5.json",
  "data": {
    "url": {
      "index": "any-event*",
      "body": {
        "size": 0,
        "query": {
          "bool": {
            "filter": [
              { 
                "range": { 
                  "message.timestamp": {
                    "gte": {"%timefilter%": "min"},
                    "lte": {"%timefilter%": "max"}
                  }
                }
              },
              { "term": { "environment.keyword": "prod" } },
              { "term": { "message.affiliateName.keyword": "xyz" } }
            ]
          }
        },
        "aggs": {
          "false_count": {
            "filter": { "term": { "message.hasException": false } }
          },
          "true_count": {
            "filter": { "term": { "message.hasException": true } }
          },
          "total_count": {
            "value_count": { "field": "message.hasException" }
          }
        }
      }
    },
    "format": { "property": "aggregations" }
  },
  "transform": [
    {
      "calculate": "datum.total_count.value > 0 ? datum.false_count.doc_count / datum.total_count.value * 100 : 0",
      "as": "false_percentage"
    },
    {
      "calculate": "datum.false_percentage >= 80 ? '#3ca951' : datum.false_percentage >= 70 ? '#efb118' : '#d62728'",
      "as": "color"
    }
  ],
  "mark": {
    "type": "text",
    "fontSize": 100,
    "fontWeight": "bold",
    "background": { "field": "color", "type": "nominal" }
  },
  "encoding": {
    "text": { "field": "false_percentage", "type": "quantitative", "format": ".1f" },
    "color": { "field": "color", "type": "nominal", "scale": null }
  }
}

内容的提问来源于stack exchange，提问作者Matti