Pentaho 9.3搭建Hadoop集群时的权限问题及HDFS用户创建疑问

问题背景 #

在Pentaho 9.3配置新Hadoop集群时，进入集群配置界面、HDFS连接设置界面后，触发HDFS权限验证弹窗，最终提示连接失败，核心需求是创建可用于Pentaho认证的HDFS访问用户。

一、HDFS用户创建操作 #

HDFS默认依赖Linux系统用户做权限管控，无需单独创建HDFS专属账号，操作如下：

• 在Hadoop集群的NameNode节点（或任意集群节点），以root身份执行命令创建系统用户：

  useradd pentaho_hdfs  # 替换为自定义用户名
  passwd pentaho_hdfs   # 设置该用户的Linux登录密码
  

• 为该用户分配HDFS工作目录权限：

  hdfs dfs -mkdir /user/pentaho_hdfs
  hdfs dfs -chown pentaho_hdfs:pentaho_hdfs /user/pentaho_hdfs
  hdfs dfs -chmod 755 /user/pentaho_hdfs
  

若集群启用Kerberos认证，需创建Kerberos主体与密钥表：

• 创建Kerberos主体：

  kadmin.local -q "addprinc -randkey pentaho_hdfs@YOUR_KERBEROS_REALM"  # 替换为你的Kerberos域
  

• 生成密钥表文件：

  kadmin.local -q "ktadd -k /etc/hadoop/conf/pentaho_hdfs.keytab pentaho_hdfs@YOUR_KERBEROS_REALM"
  

• 将密钥表复制到Pentaho服务器，设置权限：

  chown pentaho:pentaho /opt/pentaho/data-integration/pentaho_hdfs.keytab
  chmod 600 /opt/pentaho/data-integration/pentaho_hdfs.keytab
  

二、Pentaho侧认证配置 #

1. 回到Pentaho的Hadoop集群配置界面：
   • 普通无Kerberos模式：填入刚创建的Linux用户名（如pentaho_hdfs）和对应的Linux密码
   • Kerberos模式：选择Kerberos认证，填入Kerberos主体名称，指定密钥表文件在Pentaho服务器的路径
2. 点击测试连接，验证权限问题是否解决

内容的提问来源于stack exchange，提问作者Yoona Lim