如何在OpenSearch同名字段中存储多类型值（关键词、日期等）

核心思路 #

通过Ingest Pipeline在数据写入OpenSearch前判断字段类型，将不同类型的值分别存入Multi-field的对应子字段，同时保留原始值——既避免映射冲突，又能按不同类型灵活查询数据。

步骤1：创建带Multi-field的索引映射 #

先定义索引映射，给目标字段（如age）设置多个子字段，分别存储字符串、数字类型的值，以及原始值：

PUT container_logs
{
  "settings": {
    "default_pipeline": "handle_mixed_type_fields" // 关联后续创建的处理管道
  },
  "mappings": {
    "properties": {
      "name": {
        "type": "keyword"
      },
      "age": {
        "type": "text", // 主字段兼容所有类型，自动转字符串
        "fields": {
          "as_number": {
            "type": "long" // 存储数字类型的值
          },
          "as_string": {
            "type": "keyword" // 存储字符串类型的值
          },
          "original": {
            "type": "wildcard" // 保留原始值（支持任意类型）
          }
        }
      }
    }
  }
}

步骤2：创建Ingest Pipeline处理字段类型 #

创建处理管道，自动判断age字段的类型，将值存入对应子字段：

PUT _ingest/pipeline/handle_mixed_type_fields
{
  "processors": [
    // 先保留原始值到age.original
    {
      "set": {
        "field": "age.original",
        "value": "{{age}}"
      }
    },
    // 按类型处理字段值
    {
      "script": {
        "source": """
          if (ctx.age instanceof String) {
            ctx.age.as_string = ctx.age;
            try {
              ctx.age.as_number = Integer.parseInt(ctx.age);
            } catch (Exception e) {
              // 字符串无法转数字时跳过，避免报错丢数据
            }
          } else if (ctx.age instanceof Number) {
            ctx.age.as_string = ctx.age.toString();
            ctx.age.as_number = ctx.age;
          }
        """
      }
    }
  ]
}

验证效果 #

写入示例文档1（age为字符串）：

POST container_logs/_doc
{
"name": "david",
"age": "20"
}

写入后age字段结构：

• age: "20"（text类型）
• age.as_string: "20"（keyword类型）
• age.as_number: 20（long类型）
• age.original: "20"（原始字符串值）

写入示例文档2（age为数字）：

POST container_logs/_doc
{
"name": "david",
"age": 20
}

写入后age字段结构：

• age: "20"（text类型，自动转字符串）
• age.as_string: "20"（keyword类型）
• age.as_number: 20（long类型）
• age.original: 20（原始数字值）

注意事项 #

• 如果字段值是无法转成数字的字符串（如"abc"），as_number字段会被跳过，不会导致数据写入失败
• wildcard类型适合存储原始值，支持任意数据类型的查询
• 若不需要主字段的text类型，可将主字段改为wildcard进一步简化映射

内容的提问来源于stack exchange，提问作者Mati Yunhyuk Lee