如何在Kubernetes中修改Kafka Topic的KAFKA_CFG_NUM_PARTITIONS值

你当前是通过Helm依赖的方式部署Bitnami Kafka，所有自定义配置不需要手动修改StatefulSet，直接在项目的values.yaml中配置即可，具体操作如下：

配置位置 #

直接编辑项目根目录下的values.yaml文件，在现有kafka配置块下追加参数即可。Chart.yaml仅用于声明Helm依赖信息，不承载应用配置；如果statefulset.yaml是Helm自动渲染生成的模板，不要手动修改，否则后续版本升级时配置会被覆盖。

配置方法 #

两种方式效果一致，推荐使用第一种，是Bitnami Kafka Chart的标准用法：

• 通过服务端配置块定义分区数
  修改后你的values.yaml内容参考如下：

  kafka:
    url: infra-kafka-0.infra-headless:9092
    # 追加自定义Kafka服务端配置
    configuration: |
      num.partitions=3
  

  这种方式配置后，Bitnami镜像启动时会自动将配置映射为你在Minikube Dashboard中看到的KAFKA_CFG_NUM_PARTITIONS环境变量，不需要手动声明环境变量参数。

• 直接传入环境变量（和Dashboard看到的配置项完全对应）
  如果习惯直接配置环境变量，也可以通过extraEnvVars字段传递：

  kafka:
    url: infra-kafka-0.infra-headless:9092
    extraEnvVars:
      - name: KAFKA_CFG_NUM_PARTITIONS
        value: "3"
  

生效操作 #

配置保存后，在Helm Chart根目录执行升级命令即可：

helm upgrade <你的部署release名称> . -n <Kafka所在的命名空间>

命令执行后Kafka集群会滚动重启Pod，重启完成后配置生效。

注意事项 #

• 该配置仅对配置生效后新创建的Topic生效，已经存在的Topic不会自动调整分区数，存量Topic需要手动执行分区扩容命令修改。
• 不要直接修改运行中StatefulSet的配置，也不要手动改Helm渲染生成的StatefulSet模板文件，否则下次执行Helm升级/回滚操作时配置会被重置。

内容的提问来源于stack exchange，提问作者user3462941