Hive合并不会自动触发 - HDP_2.6.5

在HDP 2.6.5版本中，Hive合并操作不会自动触发。如果你想要自动触发合并操作，可以通过以下方法进行设置：

1. 打开Hive的配置文件hive-site.xml。

2. 添加以下配置参数：

<property>
  <name>hive.merge.mapredfiles</name>
  <value>true</value>
  <description>Enable automatic merging of small ORC files in Hive</description>
</property>

<property>
  <name>hive.merge.mapfiles</name>
  <value>true</value>
  <description>Enable automatic merging of small RCfile files in Hive</description>
</property>

<property>
  <name>hive.merge.orcfile.stripe.level</name>
  <value>67108864</value>
  <description>The maximum size of the stripe for ORC files during merge operation, in bytes</description>
</property>

3. 保存并关闭配置文件。

这样，当有小文件需要合并时，Hive将自动触发合并操作。

请注意，上述配置参数对应的值可以根据你的需求进行调整。这些参数控制了合并操作的触发条件和行为。例如，hive.merge.orcfile.stripe.level参数控制了ORC文件合并操作的最大条带大小，以字节为单位。