[英]ANTLR java test file can't create object of tree grammar
我正在使用针对Java的ANTLR 3.x创建解析器。 我已经写了解析器语法(用于创建抽象语法树,AST)和树语法(用于对AST执行操作)。 最后,为了测试两个语法文件,我用Java编写了一个测试文件。
看下面的代码,
协议语法
grammar protocol;
options {
language = Java;
output = AST;
}
tokens{ //imaginary tokens
PROT;
INITIALP;
PROC;
TRANSITIONS;
}
@header {
import twoprocess.Configuration;
package com.javadude.antlr3.x.tutorial;
}
@lexer::header {
package com.javadude.antlr3.x.tutorial;
}
/*
parser rules, in lowercase letters
*/
program
: declaration+
;
declaration
:protocol
|initialprocess
|process
|transitions
;
protocol
:'protocol' ID ';' -> ^(PROT ID)
;
initialprocess
:'pin' '=' INT ';' -> ^(INITIALP INT)
;
process
:'p' '=' INT ';' -> ^(PROC INT)
;
transitions
:'transitions' '=' INT ('(' INT ',' INT ')') + ';' -> ^(TRANSITIONS INT INT INT*)
;
/*
lexer rules (tokens), in upper case letters
*/
ID
: (('a'..'z' | 'A'..'Z'|'_')('a'..'z' | 'A'..'Z'|'0'..'9'|'_'))*;
INT
: ('0'..'9')+;
WHITESPACE
: ('\t' | ' ' | '\r' | '\n' | '\u000C')+ {$channel = HIDDEN;};
协议行者
grammar protocolWalker;
options {
language = Java;
//Error, eclipse can't access tokenVocab named protocol
tokenVocab = protocol; //import tokens from protocol.g i.e, from protocol.tokens file
ASTLabelType = CommonTree;
}
@header {
import twoprocess.Configuration;
package com.javadude.antlr3.x.tutorial;
}
program
: declaration+
;
declaration
:protocol
|initialprocess
|process
|transitions
;
protocol
:^(PROT ID)
{System.out.println("create protocol " +$ID.text);}
;
initialprocess
:^(INITIALP INT)
{System.out.println("");}
;
process
:^(PROC INT)
{System.out.println("");}
;
transitions
:^(TRANSITIONS INT INT INT*)
{System.out.println("");}
;
协议测试
package com.javadude.antlr3.x.tutorial;
import org.antlr.runtime.*;
import org.antlr.runtime.tree.*;
import org.antlr.runtime.tree.CommonTree;
import org.antlr.runtime.tree.CommonTreeNodeStream;
public class Protocoltest {
/**
* @param args
*/
public static void main(String[] args) throws Exception {
//create input stream from standard input
ANTLRInputStream input = new ANTLRInputStream(System.in);
//create a lexer attached to that input stream
protocolLexer lexer = new protocolLexer(input);
//create a stream of tokens pulled from the lexer
CommonTokenStream tokens = new CommonTokenStream(lexer);
//create a pareser attached to teh token stream
protocolParser parser = new protocolParser(tokens);
//invoke the program rule in get return value
protocolParser.program_return r =parser.program();
CommonTree t = (CommonTree)r.getTree();
//output the extracted tree to the console
System.out.println(t.toStringTree());
//walk resulting tree; create treenode stream first
CommonTreeNodeStream nodes = new CommonTreeNodeStream(t);
//AST nodes have payloads that point into token stream
nodes.setTokenStream(tokens);
//create a tree walker attached to the nodes stream
//Error, can't create TreeGrammar object called walker
protocolWalker walker = new protocolWalker(nodes);
//invoke the start symbol, rule program
walker.program();
}
}
问题:
在protocolWalker中,我无法访问令牌(protocol.tokens)
//Error, eclipse can't access tokenVocab named protocol tokenVocab = protocol; //import tokens from protocol.g ie, from protocol.tokens file
在ProtocolWalker中,可以在操作列表中创建名为Configuration的java类的对象吗?
protocol :^(PROT ID) {System.out.println("create protocol " +$ID.text); Configuration conf = new Configuration(); } ;
在Protocoltest.java中
//create a tree walker attached to the nodes stream //Error, can't create TreeGrammar object called walker protocolWalker walker = new protocolWalker(nodes);
无法创建protocolWalker的对象。 在示例和教程中,我已经看到创建了这样的对象。
在protocolWalker中,我无法访问令牌(protocol.tokens)...
似乎正在访问protocol.tokens
:将tokenVocab
更改为其他内容会产生一个错误,该错误现在不会发生。 protocolWalker.g的问题在于它被定义为令牌解析器( grammar protocolWalker
),但它的使用像树解析器一样。 将语法定义为tree grammar protocolWalker
Walker消除了我所看到的有关未定义标记的错误。
在protocolWalker中,可以在操作列表中创建名为Configuration的java类的对象吗?
是的你可以。 常规的Java编程警告适用于导入类等问题,但是您可以像System.out.println
这样的代码使用它。
在Protocoltest.java中...无法创建protocolWalker的对象。
protocolWalker.g(现在)生成一个名为protocolWalkerParser
的令牌解析器。 当您将其更改为树语法时,它将生成一个名为protocolWalker
的树解析器。
非常感谢您发布整个语法。 这使得回答问题变得容易得多。
感谢您的答复,这是一个愚蠢的错误。 令牌问题和protocolWalker的创建对象现在已解决,但是无论何时更改语法,无论protocol.g还是protocolWalker.g,我都必须(每次)再次在protocolParser.java和protocolWalker.java中写程序包名称。 以前我对lexer文件有同样的问题,但是下面的声明解决了这个问题。
@header {
package com.javadude.antlr3.x.tutorial;
}
但是我不知道如何克服这个问题?
另外,我使用SWING在Java中开发了一个GUI,其中有一个文本区域。 在该文本区域,用户将编写输入内容,就像我的语法用户将编写的内容一样,
protocol test;
pin = 5;
p = 3;
transitions = 2(5,0) (5,1);
如何在Java Swing GUI中处理此输入并在那里产生输出?
此外,如果我将protocolWalker.g的以下部分
protocol
:^(PROT ID)
{
System.out.println("create protocol " +$ID.text);
Configuration conf = new Configuration();
conf.showConfiguration();
}
;
initialprocess
:^(INITIALP INT)
{System.out.println("create initial process (with state) ");}
;
process
:^(PROC INT)
{System.out.println("create processes ");}
;
并使用以下输入来运行测试文件:
protocol test;
pin = 5;
p = 3;
transitions = 2(5,0) (5,1);
我得到以下输出
(PROT test) (INITIALP 5) (PROC 3) (TRANSITIONS 2 5 0 5 1)
create protocol test
为什么在输出中未显示protocolWalker.g中的第二和第三个println?
有什么想法/帮助吗?
再一次感谢你。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.