Oracle切分绑定值的TOKEN_GENERATOR在SQLite的等价实现咨询

原Oracle的CTE逻辑核心是通过单个绑定变量传入整段逗号分隔字符串，在SQL层拆分为独立值集用于IN过滤，解决大数量传参时动态拼接占位符的瓶颈问题。在SQLite中可通过递归CTE实现完全对等的能力，不需要重构原有SQL的整体结构。

等价TOKEN_GENERATOR CTE实现 #

和原Oracle逻辑行为完全一致的切分CTE代码如下：

WITH RECURSIVE TOKEN_GENERATOR AS (
    -- 分支1：输入无逗号，直接返回单值
    SELECT TRIM(:token_0) AS token
    WHERE instr(:token_0, ',') = 0
      AND length(:token_0) > 0

    UNION ALL

    -- 分支2：输入含逗号，切出第一个token
    SELECT 
        TRIM(substr(:token_0, 1, instr(:token_0, ',') - 1)) AS token,
        TRIM(substr(:token_0, instr(:token_0, ',') + 1)) AS remaining_str
    WHERE instr(:token_0, ',') > 0

    UNION ALL

    -- 递归切分：逐次拆分剩余字符串中的下一个值
    SELECT 
        TRIM(substr(remaining_str, 1, instr(remaining_str, ',') - 1)) AS token,
        TRIM(substr(remaining_str, instr(remaining_str, ',') + 1)) AS next_remaining_str
    FROM TOKEN_GENERATOR
    WHERE remaining_str IS NOT NULL
      AND instr(remaining_str, ',') > 0

    UNION ALL

    -- 终止分支：取最后一段无逗号的剩余内容作为收尾token
    SELECT TRIM(remaining_str) AS token
    FROM TOKEN_GENERATOR
    WHERE remaining_str IS NOT NULL
      AND instr(remaining_str, ',') = 0
)

业务查询适配用法 #

CTE实现完成后，和原Oracle的查询写法完全对齐，不需要调整主表的过滤逻辑：

WITH RECURSIVE TOKEN_GENERATOR AS (
    -- 上述字符串切分逻辑
)
SELECT 自定义查询字段
FROM 业务主表 T
WHERE T.COL IN (SELECT TOKEN FROM TOKEN_GENERATOR)

方案核心特性 #

• 完全对齐原有传参模式：全程仅需传递1个绑定变量（拼接好的逗号分隔长字符串），即便字符串内包含数千个待匹配值，也不会触发多占位符方案的SQLite绑定参数上限问题；
• 切分零额外开销：递归CTE的字符串处理全在SQLite内存计算层完成，无磁盘IO消耗；
• 行为和Oracle原生逻辑完全对齐：自动跳过空token、兼容值前后的多余空格，正则切分的返回结果和原实现无差异；
• 边界兼容：传入空字符串时CTE返回空集，IN查询自然匹配不到对应结果，和原逻辑的空值处理一致。

内容的提问来源于stack exchange，提问作者Valentin