Elasticsearch7.4单节点集群分片超限导致每日索引未创建问题咨询

问题1：单节点集群场景下，能否安全删除未分配分片释放分片配额？ #

可以安全删除。你当前的未分配分片全部为副本分片，单节点集群默认不允许副本分片和对应主分片落在同一个节点，因此这些未分配副本分片本身无任何实际业务价值，也不会影响主分片的数据读写，清理后不会出现数据丢失问题，可直接释放分片配额。 #

问题2：能否在线调整所有索引的分片配置，从1主1副本共2分片改为仅1个主分片？ #

可以在线调整，无需重启节点或重建索引。仅需要将索引的number_of_replicas参数修改为0即可，批量调整所有索引的命令如下：

PUT /*/_settings
{
  "number_of_replicas": 0
}

调整操作实时生效，不会影响现有业务的读写请求，调整完成后所有未分配的副本分片会自动被清理，集群总占用分片数会降至当前主分片的总数量。 #

问题3：若需留存1年的索引，按日均15个索引、每个索引1个主分片计算，总需15*365=5475个分片（取整按6000核算），该计算是否正确？ #

计算逻辑完全正确。在所有索引副本数设为0的前提下，每个索引仅占用1个主分片的配额，年留存总分片数即为日均索引数乘以留存天数，算出的5475为准确值，预留冗余到6000的核算方式合理。 #

问题4：能否将节点的分片上限设置为6000，避免后续再出现分片超限问题？ #

可以调整。ES 7.x版本默认单节点分片上限为1000，对应参数为cluster.max_shards_per_node，可通过集群设置接口在线调整为6000，命令如下：

PUT _cluster/settings
{
  "persistent": {
    "cluster.max_shards_per_node": 6000
  }
}

需要注意的是你的服务器只有8G内存，JVM堆仅分配了1955m，分片数过高会额外增加堆内存压力，建议后续搭配索引生命周期管理能力定期归档、清理过期索引，减少不必要的分片资源占用。 #

内容的提问来源于stack exchange，提问作者prat