如何在Cassandra集群之间配置跨集群复制

两个独立部署在不同DC的Cassandra集群完全可以实现跨集群复制，具体操作可根据你的集群实际业务状态选择以下两种方案：

前置要求 #

• 两个集群Cassandra大版本保持一致，小版本差异不超过3个迭代，避免内部通信协议不兼容
• 两个集群网络互通，开放9042（CQL服务端口）、7000（节点内部通信端口，开启SSL加密时用7001）的访问权限
• 需要复制的keyspace、表结构必须完全一致，包括主键定义、列类型、压缩策略、TTL配置等

方案1：合并为同逻辑集群下的多DC部署（性能最优，优先推荐） #

如果两个集群暂未承载生产业务，可调整为同一个逻辑集群的两个DC，使用Cassandra原生的网络拓扑策略实现自动复制：

1. 修改其中一个集群所有节点的cassandra.yaml配置，将cluster_name参数调整为和另一个集群完全一致
2. 逐个重启修改完配置的节点，确认单集群运行正常
3. 在第二个集群所有节点的cassandra-rackdc.properties配置文件中，指定DC和机架标识，避免和第一个集群的DC名称冲突
4. 将第二个集群的节点逐个加入第一个集群的种子节点列表，完成逻辑集群合并
5. 修改需要复制的keyspace的复制策略，指定两个DC的副本数量：

ALTER KEYSPACE 你的keyspace名称 WITH REPLICATION = {
  'class' : 'NetworkTopologyStrategy',
  'DC1的名称' : 3,
  'DC2的名称' : 3
};

6. 在第二个集群的所有节点执行nodetool rebuild -- DC1的名称，同步第一个集群的历史数据，同步完成后即可实现双DC自动数据复制。

注：如果两个集群已有同keyspace的业务数据，合并前需先完成数据冲突校验，避免合并后数据被意外覆盖。

方案2：独立集群间跨集群复制 #

如果两个集群已经承载生产业务，无法合并为同一个逻辑集群，可使用Cassandra官方跨集群复制工具实现：

1. 部署和集群版本匹配的Cassandra Replicator工具，部署节点需要同时能访问两个集群的所有节点
2. 编写复制任务配置文件，指定源集群、目标集群的连接信息，以及需要复制的keyspace、表范围，同时配置复制方向（单向/双向）、冲突解决规则（默认最后写入 wins，也可指定源集群优先）
3. 启动复制任务，工具会先执行全量历史数据同步，全量同步完成后自动切换为增量实时同步
4. 同步过程中可通过工具自带的校验命令，定期校验两个集群的数据一致性，监控复制延迟。

注意事项 #

• 双向复制场景必须提前明确冲突解决规则，避免同一条数据在两个集群同时修改导致数据不一致
• 跨公网复制时建议开启节点间加密配置，避免数据传输过程中泄露
• 定期执行nodetool repair任务，消除副本数据不一致的情况

内容的提问来源于stack exchange，提问作者Rajib Deb