多语言字段联合使用searchMode=all时含停用词查询丢失结果问题咨询

业务背景 #

我们持有多语言文档，为支持跨语言检索，搭建了每个语言对应专属字段的索引，仅填充文档对应语言的字段，其余字段留空。因无法提前知晓用户查询所用语言，检索时会遍历所有语言字段以保证覆盖适配范围。

问题现象 #

当用户搜索查询包含噪声词/停用词时，同时使用searchMode=all与语言分析器的情况下，会从结果集中遗漏完全匹配的有效检索结果。

测试复现情况 #

• 测试基准：索引中存在文档内容「A document title with the and it in the name」，使用查询语句search=document title name&QueryType=full&searchMode=all&$count=true可正常返回预期结果
• 英文分析器异常表现：使用en.microsoft分析器时，若查询中加入with、the、in这类停用词，就无法返回对应结果；切换为其他语言分析器（使用不同停用词表）时结果返回正常
• 荷兰语分析器异常表现：荷兰语索引搭配nl.microsoft分析器时，查询包含荷兰语停用词如「bij」「in」「en」时也会出现相同问题

进一步验证结论 #

我们原本认为认知搜索会在执行检索前，自动过滤掉查询语句中的停用词，与索引预处理逻辑保持一致。经测试确认该问题仅在多语言多字段联合检索时触发：

• 仅检索英文单字段：search=document title name&QueryType=full&searchMode=all&searchFields=Title_enus&$count=true可正常返回结果
• 同时检索英文、荷兰语两个字段：search=document title name&QueryType=full&searchMode=all&searchFields=Title_enus,Title_nlnl&$count=true时，英文结果会丢失
  我们实际业务中使用多字段OR检索，后续将补充更多测试用例与结果。

待解答疑问 #

• 该问题是否为语言分析器的已知bug？
• 是否有可行的解决方案？

内容的提问来源于stack exchange，提问作者Robert Wielink