Windows无管理员权限部署docker-hive端口被封容器通信失败如何解决

Docker Compose会为同一编排内的所有容器创建专属内部虚拟网络，容器之间相互通信直接走该内部网络，不需要通过宿主机的端口映射访问。你之前误将SERVICE_PRECONDITION里的端口修改为宿主机映射的40070/40075，相当于让容器访问其他容器内部并未监听的端口，自然会出现连接失败的问题。

1. 修正端口映射配置 #

所有服务的ports字段仅修改冒号前的宿主机端口为50000以下的可用端口，冒号后的容器内部服务端口保持原始值不变，示例修改如下：

version: "3"

services:
  namenode:
    image: bde2020/hadoop-namenode:2.0.0-hadoop2.7.4-java8
    volumes:
      - namenode:/hadoop/dfs/name
    environment:
      - CLUSTER_NAME=test
    env_file:
      - ./hadoop-hive.env
    ports:
      - "40070:50070" # 仅修改宿主机端口为40070，容器端口保持50070
  datanode:
    image: bde2020/hadoop-datanode:2.0.0-hadoop2.7.4-java8
    volumes:
      - datanode:/hadoop/dfs/data
    env_file:
      - ./hadoop-hive.env
    environment:
      SERVICE_PRECONDITION: "namenode:50070"
    ports:
      - "40075:50075" # 仅修改宿主机端口为40075，容器端口保持50075
  hive-server:
    image: bde2020/hive:2.3.2-postgresql-metastore
    env_file:
      - ./hadoop-hive.env
    environment:
      HIVE_CORE_CONF_javax_jdo_option_ConnectionURL: "jdbc:postgresql://hive-metastore/metastore"
      SERVICE_PRECONDITION: "hive-metastore:9083"
    ports:
      - "40000:10000" # 10000端口如果被封禁可以修改宿主机端口为40000
  hive-metastore:
    image: bde2020/hive:2.3.2-postgresql-metastore
    env_file:
      - ./hadoop-hive.env
    command: /opt/hive/bin/hive --service metastore
    environment:
      SERVICE_PRECONDITION: "namenode:50070 datanode:50075 hive-metastore-postgresql:5432"
    ports:
      - "49083:9083" # 9083端口如果被封禁可以修改宿主机端口为49083
  hive-metastore-postgresql:
    image: bde2020/hive-metastore-postgresql:2.3.0
  presto-coordinator:
    image: shawnzhu/prestodb:0.181
    ports:
      - "48080:8080" # 8080端口如果被占用可以修改宿主机端口为48080

volumes:
  namenode:
  datanode:

2. 重启服务生效 #

先执行以下命令清理旧的容器和数据卷：
docker-compose down -v
再执行命令启动服务：
docker-compose up -d

启动完成后，你在Windows本地访问相关服务时，使用修改后的宿主机端口即可：

• 访问namenode WebUI：localhost:40070
• 访问datanode WebUI：localhost:40075
• 连接Hive服务：localhost:40000

如果后续需要修改容器内部服务的监听端口规避硬编码限制，可以通过挂载自定义配置文件实现：

• 本地编写自定义的hdfs-site.xml、core-site.xml，修改namenode、datanode的绑定端口为目标值
• 在docker-compose的namenode、datanode服务下添加volume配置，将本地配置文件挂载到容器内的/opt/hadoop/etc/hadoop/目录覆盖默认配置，之后再调整端口映射为对应端口即可。

内容的提问来源于stack exchange，提问作者Data Mastery