是否可以在 Antlr4 的词法分析器中区分转义序列？

Question

我想匹配像 \' 和 \" 这样的序列作为词法分析器元素

ESCAPESEQUECE :
  '\\\"' |
  '\\\'' 
  ;

同时也区分不转义的单个引号

SINGLEQUOTE:
   '\''
   ;

DOUBLEQUOTE:
   '\"'
   ;

最终目标是用解析器识别 MySQL 之类的字符串。

这是可能/正确的方式吗？

Answer 1

回答

是的，完全可以通过使用单独的令牌来实现。

示例

grammar escp;

SINGLE: '\'';
DOUBLE: '\"';
ESCAPED : '\\"' | '\\\'';

char: SINGLE | DOUBLE;
escaped : ESCAPED;

program: (char | escaped)+;

输入字符串 '\"'"\"""'\'\"\' 的 AST 将是：