HBase major compaction非高峰时段配置不生效该如何调整

配置未生效的核心原因 #

现有配置缺少非高峰合并专属开关及适配的合并策略，仅配置时段和合并周期无法限制非高峰外的合并调度。

完整配置清单 #

需要在hbase-site.xml中添加以下所有配置：

• 首先指定支持非高峰判断的合并策略（通用场景推荐）：

  <property>
    <name>hbase.hstore.compaction.policy</name>
    <value>org.apache.hadoop.hbase.regionserver.compactions.ExploringCompactionPolicy</value>
  </property>
  

  如果是TTL类短生命周期表场景，可以替换为FIFOCompactionPolicy，性能更优。
• 开启「仅允许非高峰时段执行Major Compaction」的总开关：

  <property>
    <name>hbase.major.compaction.offpeak.only</name>
    <value>true</value>
  </property>
  

• 保留你已配置的非高峰时段和合并周期：

  <!-- 非高峰开始时间，18点 -->
  <property>
    <name>hbase.offpeak.start.hour</name>
    <value>18</value>
  </property>
  <!-- 非高峰结束时间，22点 -->
  <property>
    <name>hbase.offpeak.end.hour</name>
    <value>22</value>
  </property>
  <!-- Major Compaction基础周期，单位毫秒，这里是1天 -->
  <property>
    <name>hbase.hregion.majorcompaction</name>
    <value>86400000</value>
  </property>
  

• （可选）调整合并周期波动系数，避免超出窗口：
  默认hbase.hregion.majorcompaction.jitter值为0.5，即合并周期会在1天±0.5天的范围内浮动，容易跳出非高峰窗口。如果需要严格每天在指定时段执行，可以将该值调小到0.1以内：

  <property>
    <name>hbase.hregion.majorcompaction.jitter</name>
    <value>0.05</value>
  </property>
  

生效及验证方法 #

1. 所有节点更新hbase-site.xml后，滚动重启HBase集群（先重启Master，再重启RegionServer）
2. 可通过RegionServer日志搜索major compaction关键字，确认触发时间是否都在18:00~22:00区间内
3. 注意：手动执行的Major Compaction、因文件过期触发的强制合并不受该配置限制

内容的提问来源于stack exchange，提问作者haiwangch