ClickHouse 21.3版本materialize index时抛出缺失列异常求助

异常原因 #

这是ClickHouse 21.3版本的一个已知bug：执行ALTER TABLE ... MATERIALIZE INDEX操作时，系统会错误地检查所有已存在的跳数索引的表达式依赖列，而非仅针对你指定的目标索引。你的索引b依赖i32列，尽管要物化的是不依赖i32的索引a，但旧版本的逻辑会扫描所有索引的表达式，触发列存在性校验，最终抛出异常。另外，Wide分区格式在老版本中对跳数索引的物化逻辑存在兼容性问题，也可能加剧了该bug的触发。

跳数索引使用正确性验证 #

你的索引定义本身符合语法规范：

• 索引a：基于u64和s的minmax索引，适合用于范围查询过滤，语法正确。
• 索引b：基于i32*length(s)的set索引，语法合法，但set索引更适合低基数场景，这个表达式生成的数值基数可能很高，实际加速效果有限，可根据业务查询场景调整。

解决方案 #

1. 临时移除冲突索引再物化
   先删除索引b，完成索引a的物化后重新创建b：

-- 删除索引b
ALTER TABLE test_idx DROP INDEX b;
-- 物化索引a
ALTER TABLE test_idx MATERIALIZE INDEX a;
-- 重新创建索引b
ALTER TABLE test_idx ADD INDEX b (i32 * length(s)) TYPE set(1000) GRANULARITY 8192;

2. 升级ClickHouse版本
   该bug在ClickHouse 21.8及以后的版本中已被修复，升级到更高稳定版本可以从根源解决这类问题，同时还能获得更多功能和性能优化。

内容的提问来源于stack exchange，提问作者zzzzzz