Antlr4忽略令牌

Question

在ANTLR 4中，我尝试解析一个文本文件，但是我定义的某些标记经常被忽略，而其他标记则被忽略了。 我制作了一个小例子来说明我的意思：

解析文件：

hello world
hello world

语法：

grammar TestLexer;

file : line line;
line : 'hello' ' ' 'world' '\n';

LINE : ~[\n]+? '\n';

ANTLR的书解释说，“ hello”将成为一个隐式令牌，该令牌位于LINE令牌之前，并且令牌顺序很重要。 因此，我希望解析器与LINE令牌不匹配，但是会匹配，如结果树所示：

如何解决此问题，以便获得实际的隐式令牌？

顺便说一句。 我还尝试在LINE之前编写显式标记，但这并没有改变任何内容。

Answer 1

自己发现：

似乎ANTLR 首先选择最长的令牌 。 因此，由于LINE始终会匹配整行，因此始终是首选。

为了在语法中仍包含一些“小丑”标记，它应该是一个符号。 就我而言

grammar TestLexer;

file : line line;
line : 'hello' ' ' 'world' '\n';

LINE : ~[\n];

会工作。