如何在ScyllaDB中获取10亿行级大表的准确行数？

针对10亿行规模的TRANSACTIONS表，直接执行SELECT COUNT(*)在QUORUM一致性级别下超时的问题，可通过以下几种高效方式获取准确行数：

• 使用nodetool tablestats快速统计
  ScyllaDB的每个SSTable会维护精确的行数元数据，nodetool tablestats命令会汇总所有节点上SSTable和memtable的行数，无需全表扫描，速度极快且结果准确。
  执行命令：

  nodetool tablestats your_keyspace.TRANSACTIONS
  

  在输出结果中查看Live rows字段，即为表的准确总行数。注意避免在大规模写入/压缩操作期间执行，此时memtable数据可能尚未完全flush，但通常误差可忽略，若需绝对准确可等待操作完成后再执行。

• 分段查询汇总计数
  按分区键将表拆分为多个小范围，对每个范围单独执行COUNT查询（保持QUORUM一致性），最后累加结果。这种方式将大查询拆分为多个小查询，避免超时。
  示例（假设分区键为user_id）：

  CONSISTENCY QUORUM;
  -- 拆分多个区间查询
  SELECT COUNT(*) FROM TRANSACTIONS WHERE user_id >= 0 AND user_id < 100000000 USING TIMEOUT 120s;
  SELECT COUNT(*) FROM TRANSACTIONS WHERE user_id >= 100000000 AND user_id < 200000000 USING TIMEOUT 120s;
  -- 依次执行并累加所有结果
  

  需根据分区键的实际分布合理拆分区间，确保每个子查询的行数足够少，不会触发超时。

• 预计算计数表（适合频繁统计场景）
  维护一张单独的计数表，在数据写入/删除时同步更新计数，后续查询直接读取该表即可瞬间获取准确值。

  1. 创建计数表：

     CREATE TABLE transaction_count (
         id int PRIMARY KEY,
         total_rows bigint
     );
     -- 初始化计数（可先用nodetool结果填充）
     INSERT INTO transaction_count (id, total_rows) VALUES (1, 1000000000);
     

  2. 在应用层或通过Scylla触发器，每次向TRANSACTIONS插入数据时执行UPDATE transaction_count SET total_rows = total_rows + 1 WHERE id = 1;，删除时执行减1操作。需注意处理幂等性和重试逻辑，避免计数偏差。

• 调整超时参数（最后尝试）
  若坚持使用SELECT COUNT(*)，需调整更多相关超时参数：

  • 修改scylla.yml中的range_request_timeout_in_ms（范围查询超时，可设为300000即5分钟），修改后重启Scylla节点。
  • 在cqlsh中设置客户端级别的超时：cqlsh --request-timeout 300（单位秒，对应5分钟），同时查询时保留USING TIMEOUT 300s。
    此方法仅在集群资源充足（CPU、磁盘IO无瓶颈）时可行，否则仍可能超时。

内容的提问来源于stack exchange，提问作者Milind