用 antlr 解析评论

Question

我正在使用 ANTLR 来解析自定义数据定义语言。我使用 C 作为语言，我正在输出一个抽象语法树。到目前为止一切顺利，但现在我需要添加文档并且我需要允许表单块：

DOC
Free text here
ENDDOC

我尝试添加规则：

docstm  :   'DOC' ContentDoc=(.*) 'ENDDOC' -> ^(T_DOCCLASS $ContentDoc); 

其中T_DOCCLASS 是tokens {...} 部分中定义的虚构标记。不幸的是，虽然 DOC ... ENDDOC 块的解析没有失败，但树只有 T_DOCCLASS 没有任何子节点。

其他附加信息：我正在使用 ANTLR 3.2 和以下前奏：

options {   
output   = AST;
language = C;
ASTLabelType = pANTLR3_BASE_TREE;
}

我还有另一个跳过空格的规则：

WS  :   ( ' '
    | '\t'
    | '\r'
    | '\n'
    ) {$channel=HIDDEN;}
;

提前感谢您能给我的任何建议。

Answer 1

与.*（零个或多个标记，在解析器规则中！）相比，使用(~ENDDOC)*（除ENDDOC之外的零个或多个标记）更安全：

docstm      : DOC innerDocstm ENDDOC -> ^(T_DOCCLASS innerDocstm); 
innerDocstm : (~ENDDOC)*;
DOC         : 'DOC';
ENDDOC      : 'ENDDOC';
ID          : ('a'..'z' | 'A'..'Z')+;
WS          : (' ' | '\t' | '\r' | '\n') {$channel=HIDDEN;};

导致：

如您所见，T_DOCCLASS AST 内没有空格。如果要保留空格，则需要将规则放入词法分析器中：

DOCSTM : 'DOC' .* 'ENDDOC'; 

（你现在必须使用.*）