在Presto中如何判断数组元素是否存在于子查询返回的列表中
Presto SQL 数组与子查询结果匹配判断方案
方法1:使用arrays_overlap函数(小数据量场景优先)
Presto 内置的arrays_overlap函数可以直接判断两个数组是否存在共同元素,返回布尔值:存在返回TRUE,不存在返回FALSE。我们可以先通过array_agg将子查询的结果聚合为数组,再和mitigations字段做匹配即可:
SELECT t.*, arrays_overlap(t.mitigations, o.id_arr) AS has_matched_element FROM Test t CROSS JOIN ( -- 把子查询返回的ID列表聚合为数组 SELECT array_agg(DISTINCT ID) AS id_arr FROM other_table ) o
注意:该方案适合other_table的ID基数较低的场景,如果ID数量过大会导致聚合后的数组占用内存过高,影响执行性能。
方法2:使用UNNEST+EXISTS(大数据量场景优先)
如果other_table的数据量较大,可以先将mitigations数组炸开为单行元素,再通过关联判断是否存在匹配项,该方案内存开销更稳定:
SELECT t.*, EXISTS ( SELECT 1 -- 炸开mitigations数组为单个元素行 FROM UNNEST(t.mitigations) AS m(item) INNER JOIN other_table o ON m.item = o.ID ) AS has_matched_element FROM Test t
这个写法不需要提前聚合所有ID为数组,执行引擎可以下推过滤条件,性能更优。
内容的提问来源于stack exchange,提问作者Mark Ginsburg
相关产品推荐
相关产品推荐

