Snowflake数据库Merge语句主键匹配报错加载维度表出现空值问题

现有Merge语句的问题修正 #

你编写的语句存在两处明显错误：

1. 匹配后更新的语法错误，且冗余更新主键：WHEN MATCHED后的更新子句不需要重写表别名，且匹配条件已经是productID相等，不需要再更新主键字段，仅需更新产品名称这类非主键属性即可
2. 语句末尾多了1个多余的右括号，属于语法问题

修正后的标准语法（通用主流数据库，部分数据库如Oracle语法细节可根据官方文档微调）：

merge into dim_product as a using (select productID, product from jsontable) as b
on b.productID = a.productID
when matched then update set product = b.product
when not matched then insert (productID, product) values (b.productID, b.product);

匹配逻辑说明 #

• 维度表的Merge匹配键必须使用产品的唯一业务主键productID，绝对不能用cityname这类和产品实体无关的字段匹配，否则会出现维度行错配的严重数据质量问题
• 出现NULL值的常见排查方向：
  • 检查上游jsontable的JSON解析逻辑是否正确，比如JSON键名拼写错误、大小写不匹配、遗漏嵌套路径都会导致解析出NULL值
  • 确认dim_product表是否有其他非空字段没有在INSERT子句中赋值，导致插入时该字段被填充为NULL
  • 检查jsontable中是否本身就存在productID或product为NULL的脏数据

事实表加载问题说明 #

事实表常规场景下不需要使用Merge做加载，正确流程为：先完成所有维度表的增量更新，再用事实数据源的业务主键关联各维度表拿到维度代理键，直接插入事实表即可。如果事实表加载也出现NULL，优先排查关联时的键值匹配问题，比如事实行的productID在dim_product中不存在，关联后就会返回NULL的维度代理键。

内容的提问来源于stack exchange，提问作者SMR