HQL聚合查询报错：Minio存储下无法加载服务端点凭证问题咨询

问题根源 #

普通查询仅读取Minio上的存储数据，客户端已配置凭证所以能正常执行；但聚合查询（如max(age)）会触发MapReduce任务，需要写入Hive临时工作目录（scratch dir），如果该目录指向Minio的S3A路径，而MapReduce任务执行进程（NodeManager/TaskTracker）未加载到Minio的访问凭证，就会抛出权限错误。

必须添加的配置项 #

需要在Hadoop的core-site.xml和Hive的hive-site.xml中补充以下配置，且所有集群节点的配置需保持一致：

1. Hadoop core-site.xml 配置Minio S3A参数

<property>
  <name>fs.s3a.access.key</name>
  <value>你的Minio Access Key</value>
</property>
<property>
  <name>fs.s3a.secret.key</name>
  <value>你的Minio Secret Key</value>
</property>
<property>
  <name>fs.s3a.endpoint</name>
  <value>http://你的Minio地址:9000</value>
</property>
<property>
  <name>fs.s3a.path.style.access</name>
  <value>true</value>
</property>
<property>
  <name>fs.s3a.connection.ssl.enabled</name>
  <value>false</value> <!-- 如果Minio开启SSL则设为true -->
</property>

2. Hive hive-site.xml 确认临时目录配置

确保临时目录指向有权限的Minio路径，且配置正确：

<property>
  <name>hive.exec.scratchdir</name>
  <value>s3a://你的MinioBucket/hive-scratch</value>
</property>
<property>
  <name>hive.scratch.dir.permission</name>
  <value>777</value>
</property>

后续验证步骤 #

1. 重启Hadoop（YARN、HDFS）和Hive服务，让配置生效
2. 先测试Minio路径的读写权限：

   hadoop fs -put /etc/hosts s3a://你的MinioBucket/hive-scratch/test-file
   hadoop fs -cat s3a://你的MinioBucket/hive-scratch/test-file
   

3. 重新执行聚合查询select max(age) from student

内容的提问来源于stack exchange，提问作者Dodge_X