Apache Flink能否通过CLI动态配置JobManager与TaskManager内存？

针对jobmanager.memory.process.size和taskmanager.memory.process.size这类无法通过-D参数动态设置的内存配置，有两种直接的CLI动态配置方式：

方式一：使用环境变量覆盖（推荐） #

Flink的启动脚本支持通过特定环境变量直接覆盖这两个内存参数，这些变量会在Flink初始化内存配置前生效，优先级高于flink-conf.yaml：

• 启动JobManager时动态设置进程内存：

  JOB_MANAGER_MEMORY_PROCESS_SIZE=16g ./bin/jobmanager.sh start-foreground
  

• 启动TaskManager时动态设置进程内存：

  TASK_MANAGER_MEMORY_PROCESS_SIZE=32g ./bin/taskmanager.sh start-foreground
  

方式二：使用临时配置文件 #

如果需要同时调整多个参数，可以创建一个临时配置文件（仅包含需要修改的参数），启动时通过--config指定该文件：

1. 创建临时配置文件（比如temp-memory-conf.yaml）：

   jobmanager.memory.process.size: 16g
   taskmanager.memory.process.size: 32g
   

2. 启动JobManager时加载临时配置：

   ./bin/jobmanager.sh start-foreground --config ./temp-memory-conf.yaml
   

3. 启动TaskManager时加载临时配置：

   ./bin/taskmanager.sh start-foreground --config ./temp-memory-conf.yaml
   

补充说明 #

这类内存参数无法通过-D生效的原因是：它们属于Flink的启动前配置项，需要在JVM进程启动前确定堆内存、堆外内存等资源分配，而-D参数是传递给JVM的系统属性，此时Flink的内存初始化逻辑已经完成，因此无法覆盖原有配置。

内容的提问来源于stack exchange，提问作者Shan