Elasticsearch为何将非日期字符串"24.."映射为date类型？

问题原因 #

Elasticsearch默认开启date_detection（日期自动检测），动态映射时会尝试用多种格式解析字符串，其中包括epoch毫秒/纳秒格式。当遇到"24.."这类字符串时，解析器会忽略非数字字符，提取出数字24并将其视为epoch毫秒值（对应时间1970-01-01T00:00:00.024Z），因此判定该字段符合date类型规则，自动映射为date。此行为在7.x和8.x版本中均存在。

解决方案 #

要实现「仅有效ISO格式字符串映射为date，其他字符串保留为text」，可通过以下方式配置：

1. 限制动态日期检测的格式 #

创建索引时指定仅识别严格的ISO-8601格式，关闭对epoch等非标准格式的解析：

PUT /test-dates
{
  "mappings": {
    "date_detection": true,
    "dynamic_date_formats": ["strict_date_optional_time"]
  }
}

strict_date_optional_time仅匹配符合ISO-8601标准的日期字符串，不会解析"24.."这类非标准值。

2. 自定义动态模板精确控制 #

通过动态模板实现规则匹配：先检查字符串是否符合ISO-8601格式，是则映射为date，否则映射为带keyword子字段的text：

PUT /test-dates
{
  "mappings": {
    "dynamic_templates": [
      {
        "match_iso_dates": {
          "match_mapping_type": "string",
          "match_pattern": "regex",
          "match": "^\\d{4}-\\d{2}-\\d{2}T\\d{2}:\\d{2}:\\d{2}(\\.\\d+)?Z?$",
          "mapping": {
            "type": "date"
          }
        }
      },
      {
        "default_to_text": {
          "match_mapping_type": "string",
          "mapping": {
            "type": "text",
            "fields": {
              "keyword": {
                "type": "keyword",
                "ignore_above": 256
              }
            }
          }
        }
      }
    ]
  }
}

3. 完全关闭日期自动检测 #

如果不需要自动映射date类型，所有字符串都默认映射为text，可直接关闭date_detection：

PUT /test-dates
{
  "mappings": {
    "date_detection": false
  }
}

内容的提问来源于stack exchange，提问作者Igor