1. 关闭某一Broker后，该Broker上的副本是否会自动迁移至新Broker？ #

Short answer: 默认不会自动迁移，但可以通过配置开启自动迁移能力。

• 默认行为：当你正常关闭一个Broker时，Kafka会将该节点上的副本标记为offline。如果这些副本是分区的leader，Kafka会从ISR（In-Sync Replicas）列表中选举新的leader来保证服务可用；如果是follower副本，它们会被从ISR中移除。但Kafka不会主动把这些离线副本的分配转移到其他在线Broker（包括新加入的节点）——因为默认情况下，自动副本重分配功能是关闭的。
• 开启自动迁移：如果你希望副本自动迁移到新Broker，需要在集群的server.properties中设置auto.reassign.replicas.enable=true。开启后，Kafka会检测到下线的Broker，并自动将该节点上的副本重新分配到集群中可用的在线Broker上。不过要注意，这个功能会带来额外的集群负载，建议在业务低峰期开启，或者根据实际场景评估是否需要。

2. 替换全集群旧Broker的相关问题 #

逐个关闭旧Broker，副本是否会自动迁移至新节点？ #

和第一个问题的逻辑一致：默认不会自动迁移。

当你逐个关闭旧Broker时，每个旧节点上的副本会进入离线状态，Kafka会处理leader切换保证服务可用，但副本的分配依然绑定在旧Broker上。如果旧Broker彻底从集群中移除（比如删除节点配置），这些副本就会永久丢失——不过因为你的副本因子是2或3，每个分区至少有1-2个其他在线副本，所以数据不会丢失，但集群的副本冗余度会下降（比如原本副本因子3，变成2）。

如果想让副本自动迁移到新节点，同样需要开启auto.reassign.replicas.enable=true，并且确保新节点已经成功加入集群（状态为online）。

手动使用重分配工具时，是否需要迁移__consumer_offsets Topic？ #

是的，必须手动处理__consumer_offsets的副本迁移，否则当旧Broker全部下线后，这个内置Topic可能会出现不可用的情况。

• __consumer_offsets是Kafka用来存储消费者偏移量的核心内置Topic，默认有50个分区（可通过offsets.topic.num.partitions配置），它的副本默认分配在集群的初始Broker上。
• 当你使用kafka-reassign-partitions.sh工具进行手动副本重分配时，工具不会自动包含__consumer_offsets，所以你需要特意生成包含这个Topic的重分配计划。具体步骤大概是：
  1. 生成包含所有Topic（包括__consumer_offsets）的重分配计划：可以先导出当前所有Topic的分区分配，然后修改计划将副本分配到新Broker上；或者使用工具的--generate参数指定新Broker列表来生成计划。
  2. 执行重分配计划，等待所有分区的副本同步完成后，再逐个下线旧Broker。

另外要注意，迁移__consumer_offsets时要确保集群状态稳定，避免在迁移过程中出现消费者偏移量写入失败的情况。

内容的提问来源于stack exchange，提问作者Ashutosh Bharti