You need to enable JavaScript to run this app. Elasticsearch插入与更新操作的性能近似量化差异咨询
优惠活动
大模型
产品
解决方案
定价
更多

Elasticsearch插入与更新操作的性能近似量化差异咨询

Elasticsearch 批量部分更新与全量写入性能对比经验参考

基于ES 7.x、8.x版本的生产环境实测经验,首先给出核心参考数值:

针对单文档50%字段执行批量partial update操作,其吞吐量通常为同数据量全字段批量index操作的10%~30%,中位数约为20%。

背后的核心原因和性能波动影响因素如下:

  • ES的update并非磁盘级别的原地字段修改,本质是完整的「读取旧文档→合并更新字段→标记旧文档为已删除→写入全新完整文档」流程,更新50%字段和更新1个字段的核心开销差异极小,大部分性能损耗都来源于读旧文档、写新文档的两次IO操作,以及删除旧文档产生的后续段合并开销。
  • 常规场景下如果全量批量index的吞吐量为每秒10000条,同配置下同数据量的批量update吞吐量通常只能达到1000~3000条每秒。
  • 如果你的索引采用自定义主键写入(而非ES自动生成主键),全量index本身也需要执行主键存在性校验逻辑,二者性能差距会缩小到20%~40%区间。
  • 如果单文档体积超过1MB,读取旧文档的IO开销会进一步提升,update性能可能会跌到10%以下。
  • 如果你开启了所有字段的store配置或者doc_values,旧文档字段读取效率更高,update性能可以摸到30%的上限。

如果你的业务场景为了统一多源数据查询逻辑、降低查询复杂度、保证索引生命周期管理、字段规约等特性的一致性,接受写入侧的性能损耗,这个取舍在生产实践中是非常常见的方案。

内容的提问来源于stack exchange,提问作者user1573546

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.10.17 19:27:04