使用hadoop-client连接远程HDFS如何抑制checkHadoopHome检测

该报错是org.apache.hadoop:hadoop-client依赖中Shell类初始化时的默认自检逻辑触发，仅为DEBUG级别的日志，只要你没有调用依赖本地Hadoop环境的操作（比如Windows环境下的winutils依赖、本地文件与HDFS交互时的本地权限校验等），不会影响远程HDFS连接的核心功能运行。

方案1：屏蔽对应日志（无侵入，最简便） #

直接调整日志配置，将org.apache.hadoop.util.Shell包的日志级别调整为INFO及以上即可过滤该DEBUG日志，以logback为例，配置如下：

<logger name="org.apache.hadoop.util.Shell" level="INFO" additivity="false"/>

方案2：配置hadoop.home.dir属性通过自检 #

不需要修改HDFS核心配置文件，两种设置方式任选其一即可：

• 代码中初始化FileSystem之前手动设置系统属性：

System.setProperty("hadoop.home.dir", "/");

此处只需填写任意存在的本地目录路径即可，不需要目录下有真实的Hadoop安装文件。

• JVM启动时添加参数：-Dhadoop.home.dir=/

方案3：完全禁用本地Shell调用（彻底关闭检测逻辑，适合纯远程操作场景） #

如果你的hadoop-client版本 >= 2.8，可以在core-site.xml中添加如下配置，直接禁用本地Shell执行逻辑，从根源避免触发HADOOP_HOME检测：

<property>
  <name>hadoop.util.shell.disabled</name>
  <value>true</value>
</property>

内容的提问来源于stack exchange，提问作者Jin Kwon