SQL统计行已填充列数 无需手动指定列名的实现方法
行级非空列总数统计实现
核心逻辑
逐列校验值是否为NULL,将校验结果转换为1/0后累加,即可得到每一行的非空列总数。
小表手动枚举实现(适合列数较少的场景)
对于列数不多的表,可以直接逐列编写判断逻辑,以题中给出的示例表为例(假设表名为user_base_info),对应SQL为:
SELECT id, FirstName, LastName, Age, ( CASE WHEN id IS NOT NULL THEN 1 ELSE 0 END + CASE WHEN FirstName IS NOT NULL THEN 1 ELSE 0 END + CASE WHEN LastName IS NOT NULL THEN 1 ELSE 0 END + CASE WHEN Age IS NOT NULL THEN 1 ELSE 0 END ) AS PopulatedColumns FROM user_base_info;
这个写法的局限性很明显:如果表有几十上百个业务列,逐列编写判断语句会产生极高的维护成本,还容易出现漏写、错写列名的问题,完全不适合大宽表场景。
无需指定具体列名的通用实现(适合大宽表场景)
实现思路
从数据库的系统元数据中自动读取目标表的所有列信息,动态拼接非空判断的累加逻辑,整个过程不需要手动枚举任何业务列名,列结构调整后脚本也可以直接复用。
不同数据库的参考实现
MySQL 8.0+ 实现
直接查询information_schema.COLUMNS元表获取列信息,动态拼接执行SQL:
-- 替换为实际要统计的表名 SET @target_table = 'user_base_info'; SET @sql = NULL; -- 自动拼接所有列的非空判断逻辑 SELECT GROUP_CONCAT( CONCAT('CASE WHEN `', COLUMN_NAME, '` IS NOT NULL THEN 1 ELSE 0 END') SEPARATOR ' + ' ) INTO @count_expr FROM information_schema.COLUMNS WHERE TABLE_NAME = @target_table -- 可选:在这里加过滤规则,排除不需要纳入统计的列 -- AND COLUMN_NAME NOT IN ('log_column', 'extra_blob') -- 多库环境下必须指定所属库名,避免跨库匹配到同名表 -- AND TABLE_SCHEMA = 'your_database_name' ; -- 拼接最终执行的SQL SET @final_sql = CONCAT( 'SELECT *, (', @count_expr, ') AS PopulatedColumns FROM `', @target_table, '`' ); -- 执行统计 PREPARE stmt FROM @final_sql; EXECUTE stmt; DEALLOCATE PREPARE stmt;
PostgreSQL 实现
查询系统元表动态生成统计逻辑:
-- 替换为实际表名 DO $$ DECLARE v_count_expr text; v_final_sql text; BEGIN -- 自动拼接列判断逻辑 SELECT string_agg( format('CASE WHEN %I IS NOT NULL THEN 1 ELSE 0 END', column_name), ' + ' ) INTO v_count_expr FROM information_schema.columns WHERE table_name = 'user_base_info' -- 可选:排除不需要统计的列 -- AND column_name NOT IN ('log_column') -- 自定义Schema环境下必须指定Schema -- AND table_schema = 'your_schema' ; -- 生成最终查询语句 v_final_sql := format( 'SELECT *, (%s) AS PopulatedColumns FROM %I', v_count_expr, 'user_base_info' ); -- 执行查询 EXECUTE v_final_sql; END $$;
适配注意事项
- 默认逻辑会将目标表的所有列纳入统计范围,如果有不需要计入的字段(比如自增主键、日志埋点列、大存储字段),可以直接在元表查询的WHERE条件中加过滤规则,不需要改动核心统计逻辑。
- 如果需要把空字符串
''也判定为“未填充”,只需要把拼接时的判断条件从IS NOT NULL调整为TRIM(COLUMN_NAME) <> ''即可,同样不需要逐列修改。 - 元数据匹配时建议明确指定库/Schema、排除不需要的列,避免因为跨库同名表、列结构变更导致统计结果偏差。
内容的提问来源于stack exchange,提问作者anonymous6
相关产品推荐
相关产品推荐

