在Debian虚拟机上部署Apache NiFi集群技术咨询

Hey there! I’ve got you covered with a clear, Debian-focused breakdown for setting up a NiFi cluster—no need to hunt through scattered resources anymore.

一、基于官方文档的Debian适配步骤 #

Apache NiFi的官方 docs 没有专门的Debian章节，但完全可以适配操作，核心步骤如下：

• 安装NiFi依赖的Java环境（推荐Java 11，适配绝大多数NiFi版本）：

  sudo apt update && sudo apt install openjdk-11-jdk
  

  验证安装：java -version，确认输出Java 11相关版本信息
• 下载并部署NiFi包：
  选择合适的NiFi版本（比如1.24.0），下载后解压到系统目录：

  wget https://archive.apache.org/dist/nifi/nifi-1.24.0/nifi-1.24.0-bin.tar.gz
  sudo tar xzf nifi-1.24.0-bin.tar.gz -C /opt/
  sudo ln -s /opt/nifi-1.24.0 /opt/nifi
  

• 集群核心配置：
  编辑/opt/nifi/conf/nifi.properties，重点修改以下参数：

  nifi.cluster.is.node=true # 标记当前虚拟机为集群节点
  nifi.cluster.node.address=你的虚拟机内网IP # 比如192.168.1.101
  nifi.cluster.node.protocol.port=8082 # 节点间通信端口
  nifi.zookeeper.connect.string=zk-node1:2181,zk-node2:2181,zk-node3:2181 # 先部署ZooKeeper集群，填其地址
  

  如果是主节点，额外配置nifi.cluster.manager.address=主节点IP；从节点无需修改该参数，会自动连接主节点

二、Debian专属的实战注意事项 #

• 创建专用运行用户：NiFi不建议用root运行，创建专属用户并授权：

  sudo useradd -m nifi
  sudo chown -R nifi:nifi /opt/nifi
  

• 防火墙端口开放：Debian默认用ufw，开放NiFi所需端口：

  sudo ufw allow 8080/tcp # Web UI端口
  sudo ufw allow 8082/tcp # 集群节点通信端口
  sudo ufw allow 2181/tcp # ZooKeeper连接端口
  

• 设置开机自启：创建systemd服务文件/etc/systemd/system/nifi.service，内容如下：

  [Unit]
  Description=Apache NiFi Cluster Node
  After=network.target

  [Service]
  User=nifi
  ExecStart=/opt/nifi/bin/nifi.sh start
  ExecStop=/opt/nifi/bin/nifi.sh stop
  ExecReload=/opt/nifi/bin/nifi.sh reload
  Restart=on-failure

  [Install]
  WantedBy=multi-user.target
  然后执行生效：

  sudo systemctl daemon-reload && sudo systemctl enable nifi
  

三、集群验证方法 #

• 启动所有节点后，访问主节点的Web UI：http://主节点IP:8080/nifi
• 点击右上角的「Cluster」图标，查看所有节点是否显示为「Connected」状态
• 部署一个简单处理器（比如GenerateFlowFile），验证任务是否能在集群节点间正常分发运行

内容的提问来源于stack exchange，提问作者Hugo Vaillaud