You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

如何使用ANTLR4遍历所有合法输入空间并控制递归深度生成AST

ANTLR4 可控递归深度的合法输入生成与AST构建方案

核心实现逻辑是遍历ANTLR4语法编译后的ATN(增强转移网络)结构,通过递归深度阈值限制规则的展开层级,无需预设输入即可生成指定范围内的所有合法输入,同步构建对应AST。

实现步骤

  • 第一步:获取语法ATN结构
    编译你的Expr语法生成对应的Lexer和Parser类后,实例化Parser对象,通过parser.getATN()即可拿到完整的语法状态转移网络,所有规则的分支、递归逻辑都存储在该结构中。
  • 第二步:配置递归深度限制逻辑
    针对你的示例左递归expression规则,维护全局递归深度计数器即可控制展开层级:
    • 每次进入expression规则时计数器加1
    • 计数器达到设置的阈值时,强制选择非递归的NUMBER分支,避免无限递归
    • 退出expression规则时计数器减1
  • 第三步:生成内容与AST
    遍历ATN状态遇到终端节点时,生成符合词法规则的内容(比如NUMBER节点生成随机整数,+/-节点直接输出运算符),同时按照规则的嵌套结构直接构建AST节点,完全不需要走解析流程。

参考实现代码(Java版ANTLR4运行时)

import org.antlr.v4.runtime.atn.ATN;
import java.util.Random;

public class ExprGenerator {
    private final int maxDepth;
    private int currentDepth = 0;
    private final Random random = new Random();

    public ExprGenerator(int maxDepth) {
        this.maxDepth = maxDepth;
    }

    public String generate() {
        currentDepth++;
        String result;
        // 达到深度阈值强制走数字分支
        if (currentDepth >= maxDepth) {
            result = String.valueOf(random.nextInt(100));
            // 此处可同步生成AST的数字叶子节点
        } else {
            // 随机选择分支,要穷举全量合法空间可改为遍历所有分支组合
            boolean chooseOpBranch = random.nextBoolean();
            if (chooseOpBranch) {
                String left = generate();
                String op = random.nextBoolean() ? "+" : "-";
                String right = generate();
                result = left + " " + op + " " + right;
                // 此处可同步生成AST的二元运算节点
            } else {
                result = String.valueOf(random.nextInt(100));
                // 此处可同步生成AST的数字叶子节点
            }
        }
        currentDepth--;
        return result;
    }

    public static void main(String[] args) {
        // 测试深度为3的生成效果
        ExprGenerator generator = new ExprGenerator(3);
        for (int i = 0; i < 5; i++) {
            System.out.println(generator.generate());
        }
    }
}

效果验证

和你给出的深度示例完全匹配:

  • 深度=1:输出均为8、42这类单个数字
  • 深度=2:输出均为12 + 3、57 - 9这类单次运算表达式
  • 深度=3:输出均为1 + 15 - 8、33 - 2 + 76这类两次运算表达式

如果需要覆盖指定深度下的全部合法输入空间,把代码中的分支随机选择逻辑改为全量遍历所有分支的排列组合即可。


内容的提问来源于stack exchange,提问作者Eadren King

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.10.06 21:36:01