OpenSearch脚本查询报错：如何筛选total_experiences非零的文档？

问题原因 #

• 部分文档可能缺失total_experiences字段或字段值为null，直接访问会触发空指针异常
• 查询阶段无法通过params._source访问文档源数据，该方式仅在更新/删除等操作的脚本中可用

方案1：使用正确的Painless脚本过滤（兼容null场景） #

修改filter中的脚本，先判断字段是否存在且不为null，再比较是否不等于0：

GET enriched_scraped_profiles/_search
{
  "_source": true,
  "size": 2000, 
  "query": {
    "bool": {
      "must": [
        {
          "match": {
            "experiences.industry": "Banking"
          }
        }
      ],
      "filter": {
        "script": {
          "script": {
            "lang": "painless",
            "source": """
              return doc.containsKey('total_experiences') && doc['total_experiences'].value != 0;
            """
          }
        }
      }
    }
  }
}

方案2：使用范围查询替代脚本（性能更优） #

脚本查询性能较低，推荐用Elasticsearch原生的范围查询直接过滤，同时处理字段不存在的情况：

GET enriched_scraped_profiles/_search
{
  "_source": true,
  "size": 2000, 
  "query": {
    "bool": {
      "must": [
        {
          "match": {
            "experiences.industry": "Banking"
          }
        }
      ],
      "filter": [
        {
          "bool": {
            "should": [
              {
                "range": {
                  "total_experiences": {
                    "gt": 0
                  }
                }
              },
              {
                "range": {
                  "total_experiences": {
                    "lt": 0
                  }
                }
              }
            ],
            "minimum_should_match": 1
          }
        }
      ]
    }
  }
}

如果只需要大于0的情况，可简化为：

"filter": {
  "range": {
    "total_experiences": {
      "gt": 0
    }
  }
}

关键说明 #

• 优先使用原生查询而非脚本，原生查询利用索引结构，性能远高于脚本
• 必须处理字段缺失或null的场景，避免空指针异常

内容的提问来源于stack exchange，提问作者Saunak Surani