如何用ANTLR 4词法规则跳过反斜杠与换行符的组合？

问题根源 #

ANTLR 4的词法规则遵循最长匹配和先定义优先的原则。你之前的写法里，NEWLINE规则定义在ESC_NEWLINE之后，当遇到反斜杠加换行的组合时，ANTLR会优先匹配单独的NEWLINE，而非完整的ESC_NEWLINE；同时ESC_NEWLINE依赖NEWLINE的写法也容易触发匹配顺序冲突，导致这个组合根本没被识别。

修正方案 #

方案1：拆分规则并调整顺序

把反斜杠换行的规则放在普通换行前面，确保优先匹配，同时单独设置跳过动作：

// 先定义反斜杠换行，确保ANTLR优先识别这个组合
ESC_NEWLINE : '\\' ('\r'? '\n') -> skip;
// 普通换行规则（如果需要用换行区分语句结束则保留，否则也可以设为skip）
NEWLINE : '\r'? '\n';
// 原空白规则不变
WS : [ \t]+ -> skip;

方案2：整合到同一规则

直接把所有需要跳过的空白类型（包括空格、制表符、反斜杠换行）整合到WS规则里，彻底避免顺序问题：

WS : 
    [ \t]+               // 匹配空格、制表符
    | '\\' '\r'? '\n'    // 匹配反斜杠加换行的组合
    -> skip;
// 若不需要单独处理普通换行，可删除下面这条规则
NEWLINE : '\r'? '\n';

补充说明 #

调整后，当代码中出现\+换行的组合时，ANTLR会将其视为空白直接跳过，实现语句跨行的需求；普通换行如果不需要作为语法元素（比如语句结束标记），也可以直接加入WS规则一起跳过。

内容的提问来源于stack exchange，提问作者David Maffitt