DB2使用LOAD工具批量导入CSV后RUNSTATS执行时机及报错咨询
批量LOAD场景的RUNSTATS执行时机选择
- 两种执行逻辑的实际差异:
- 逐文件加载后执行RUNSTATS:100次重复的统计信息收集会产生大量不必要的IO开销,整体批处理耗时会比单次统一执行高出40%以上;且逐次收集的是LOAD中间状态的表统计值,无法匹配最终全量数据的分布情况,统计准确性不足。
- 全量文件加载完成后统一执行RUNSTATS:仅需执行1次统计收集流程,整体锁开销、IO开销都会大幅降低,收集到的统计值对应表的最终数据规模,能给查询优化器提供准确的执行计划参考,是生产环境批量数据加载的标准操作。
- 结论:优先选择100个CSV文件全部LOAD完成后,再统一针对目标表和关联索引执行一次RUNSTATS,无需逐文件触发。
现有RUNSTATS偶发报错的原因与修复方案
报错对应DB2底层逻辑:SQLCODE -911 代表当前事务遭遇锁等待超时或死锁,被数据库强制回滚;SQLCODE -2310 代表RUNSTATS工具在获取表锁的过程中被阻塞,最终触发回滚。
- 触发根因:当前脚本在每次LOAD完成后立刻触发RUNSTATS,没有等待上一次LOAD操作释放表级锁,一旦出现短暂的锁竞争,就会导致RUNSTATS拿不到所需的锁,最终触发超时回滚;如果存在其他业务会话同时访问这张目标表,锁竞争会更频繁,进一步提升报错概率。
- 对应修复动作:
- 调整脚本逻辑,移除循环内逐文件调用RUNSTATS的代码,将RUNSTATS挪到全量文件加载完成的代码段中执行,从根源上减少锁竞争的发生频次
- 如果存在中途校验统计值的需求,需要在每次RUNSTATS调用前显式执行
COMMIT,主动释放上一次LOAD操作持有的表锁 - 执行RUNSTATS前可临时设置合理的锁等待超时阈值,比如通过
SET CURRENT LOCK TIMEOUT 30参数,避免短时间的锁阻塞直接触发回滚
内容的提问来源于stack exchange,提问作者Qa Nico
相关产品推荐
相关产品推荐

