CentOS 7下HA GlusterFS 7.7集群CTDB配置故障求助

我之前在CentOS 7上部署GlusterFS 7.7 HA集群时也碰到过一模一样的CTDB连接问题，给你几个实操性的排查和解决方向，应该能帮你突破卡点：

1. 先确认CTDB服务本身的状态与基础配置 #

• 第一步先检查所有集群节点上的CTDB服务是否正常运行：systemctl status ctdbd，如果服务未启动，立刻查看实时日志定位问题：journalctl -u ctdbd -f，日志里通常会有比SMB报错更具体的信息，比如节点通信失败、配置文件语法错误。
• 确保所有节点之间已经配置好SSH免密登录，CTDB依赖节点间无密码通信来同步集群状态，这是很容易被忽略的基础项。
• 打开/etc/ctdb/ctdb.conf，检查nodes配置段里的所有节点IP是否准确，每个IP单独占一行，不能有拼写错误或多余空格。

2. 验证CTDB依赖的GlusterFS共享存储 #

CTDB需要一个GlusterFS卷作为共享存储来保存集群元数据，这部分出错会直接导致连接失败：

• 确认所有节点都已将这个共享卷挂载到同一个路径（比如/mnt/ctdb_shared），用mount | grep glusterfs检查挂载状态。
• 测试卷的可用性：在任意节点创建一个测试文件，到其他节点查看是否能同步读取，确保卷的复制/分布式功能正常。
• 检查/etc/sysconfig/ctdb里的CTDB_RECOVERY_LOCK配置，必须指向共享存储的挂载点路径，比如CTDB_RECOVERY_LOCK="/mnt/ctdb_shared/ctdb.lock"，所有节点的这个配置要完全一致。

3. 排查防火墙与SELinux的拦截 #

CentOS 7的默认安全策略很容易阻断CTDB和SMB的通信：

• 开放CTDB和SMB所需的端口：

  firewall-cmd --add-port=4379/tcp --permanent
  firewall-cmd --add-port=1022/tcp --permanent
  firewall-cmd --add-service=smb --permanent
  firewall-cmd --reload
  

• 临时关闭SELinux测试是否是它的问题：setenforce 0，如果关闭后SMB能正常启动，再修改/etc/selinux/config将SELINUX设为permissive，或者配置SELinux规则允许相关操作。

4. 测试CTDB节点间的连通性 #

• 在任意节点用ctdb ping <目标节点IP>测试节点间的CTDB通信，如果不通，检查网络路由、节点防火墙是否有拦截，或者是否存在DNS解析问题。
• 查看/var/log/ctdb/下的日志文件，里面会记录节点连接失败的详细原因，比如端口被占用、权限不足等。

5. 重新初始化CTDB集群（最后尝试） #

如果以上检查都没问题，可以尝试重置CTDB集群状态：

1. 在所有节点停止CTDB和SMB服务：systemctl stop ctdbd smb
2. 在其中一个节点执行初始化命令：ctdb init
3. 依次启动所有节点的CTDB服务：systemctl start ctdbd，等待3-5分钟让集群完成同步
4. 最后启动SMB服务：systemctl start smb

内容的提问来源于stack exchange，提问作者Rachid