节点关机后Elasticsearch分片分配异常问题咨询
Elasticsearch 6.8.6 分片未分配问题排查及根因说明
先执行以下API获取分片未分配的明确原因,优先排查返回结果的提示:GET /_cluster/allocation/explain?pretty
高频根因1:分片分配规则限制
- 检查索引级分配过滤配置:执行
GET /<异常索引名>/_settings,查看是否存在index.routing.allocation.require.*/index.routing.allocation.exclude.*类配置,若创建索引时指定了仅分配到已关闭节点的节点名/标签,其余节点将无法接收该分片。 - 检查磁盘水位限制:执行
GET _cat/nodes?v&h=name,disk.used_percent,若剩余可用节点磁盘使用率超过85%(低水位)将禁止新分片分配,超过90%(高水位)将禁止所有分片迁入。 - 检查单节点分片数限制:执行
GET /_cluster/settings查看是否配置了cluster.max_shards_per_node,或索引配置了index.total_shards_per_node,若剩余节点可承载分片数已达上限,分片将无法分配。
高频根因2:跨网络机架感知配置异常
你提到集群跨两个网络部署,若配置了机架感知规则:
- 执行
GET /_cluster/settings查看是否开启cluster.routing.allocation.awareness.attributes强制机架感知,若配置了cluster.routing.allocation.awareness.force.*规则要求主副分片必须分散在两个网络,当其中一个网络的节点离线后,剩余单网络节点无法满足分片分散规则,将导致分片永久未分配。 - 额外验证跨节点传输端口连通性:虽然已确认网络连通,需排查是否存在9300端口限流、MTU不一致导致分片复制时数据包截断、超时的问题,可查看各节点的transport层日志确认是否有连接异常报错。
高频根因3:分片副本配置或元数据异常
- 验证索引副本配置:执行
GET <异常索引名>/_settings?filter_path=*.settings.index.number_of_replicas,若副本数配置为0,主分片所在节点离线后无有效副本可用,分片自然处于未分配状态。 - 检查集群 pending 任务:执行
GET /_cluster/pending_tasks,若存在卡住的集群元数据更新任务,会导致分片分配指令无法被集群执行。 - 强制重试分配失败的分片:ES 6.8.6存在已知的延迟分配触发失效BUG,可执行
POST /_cluster/reroute?retry_failed=true强制重试所有分配失败的分片,执行后查看返回结果的报错信息可明确具体限制原因。
内容的提问来源于stack exchange,提问作者Blustrike
相关产品推荐
相关产品推荐

