SQL连接两个临时表并避免重复行问题咨询
嘿,我太懂你遇到的这种LEFT JOIN导致重复行的糟心事了——这种情况在处理临时表时简直是家常便饭,尤其是当连接键不唯一或者其中一个临时表本身就藏着重复数据的时候。咱们一步步拆解问题,找到解决办法:
先搞清楚重复的根源
首先你得先排查两个临时表的问题:
检查连接字段的唯一性:你代码里用的连接键应该是
CUSIP吧?先看看其中一个表(比如你的CMO临时表)里有没有重复的CUSIP:SELECT CUSIP, COUNT(*) FROM #CMO -- 换成你的CMO临时表名 GROUP BY CUSIP HAVING COUNT(*) > 1;同样的语句也跑一遍你要连接的另一个临时表,如果结果返回了行,说明这个连接键在表中对应多行数据,LEFT JOIN自然会把每一组匹配都列出来,导致重复。
确认临时表本身是否带重复:有时候创建临时表时,源数据或者创建逻辑(比如没去重的UNION、多表连接)就已经引入了重复行,这也会直接影响后续的JOIN结果。
针对性解决办法
情况1:重复行是冗余数据,直接去重就行
如果临时表里的重复行完全是多余的,你可以在JOIN前先清理数据:
- 要么重新生成一个去重后的临时表:
SELECT DISTINCT CUSIP, LEVEL1, COUPON, TRANCHE_GROUP, TRANCHE_TYPE, price, PREV_PRICE INTO #CMO_CLEANED FROM #CMO; - 要么在JOIN时直接用子查询去重:
SELECT c.CUSIP, c.LEVEL1, c.COUPON, c.TRANCHE_GROUP as 'Tranche Group', c.TRANCHE_TYPE as 'Tranche Type', c.price as 'Current Price', c.PREV_PRICE as 'Previous Price', -- 这里加上你要从另一个表取的字段 o.other_column FROM ( SELECT DISTINCT CUSIP, LEVEL1, COUPON, TRANCHE_GROUP, TRANCHE_TYPE, price, PREV_PRICE FROM #CMO ) c LEFT JOIN #YourOtherTempTable o ON c.CUSIP = o.CUSIP;
情况2:连接键本来就对应多行,但你只需要每组一行
如果同一个CUSIP确实有多行数据,但你只需要保留其中一行(比如最新价格、最高优先级的记录),用窗口函数来筛选是最稳妥的:
WITH CMO_Ranked AS ( SELECT CUSIP, LEVEL1, COUPON, TRANCHE_GROUP, TRANCHE_TYPE, price, PREV_PRICE, -- 按你需要的逻辑排序,比如按price降序取最高价格,或者按更新时间取最新 ROW_NUMBER() OVER (PARTITION BY CUSIP ORDER BY price DESC) AS rn FROM #CMO ) SELECT cr.CUSIP, cr.LEVEL1, cr.COUPON, cr.TRANCHE_GROUP as 'Tranche Group', cr.TRANCHE_TYPE as 'Tranche Type', cr.price as 'Current Price', cr.PREV_PRICE as 'Previous Price', o.other_column FROM CMO_Ranked cr LEFT JOIN #YourOtherTempTable o ON cr.CUSIP = o.CUSIP WHERE cr.rn = 1; -- 只保留每个CUSIP的第一行
情况3:连接条件太宽泛
有时候你可能只用了一个非唯一的字段做连接,试试加上更多匹配条件缩小范围,比如把LEVEL1也加入连接逻辑,确保每一行的匹配是唯一的:
SELECT CMO.CUSIP, CMO.LEVEL1, CMO.COUPON, CMO.TRANCHE_GROUP as 'Tranche Group', CMO.TRANCHE_TYPE as 'Tranche Type', CMO.price as 'Current Price', CMO.PREV_PRICE as 'Previous Price' FROM #CMO LEFT JOIN #YourOtherTempTable ON #CMO.CUSIP = #YourOtherTempTable.CUSIP AND #CMO.LEVEL1 = #YourOtherTempTable.LEVEL1;
内容的提问来源于stack exchange,提问作者frisbeee
相关产品推荐
相关产品推荐

