ANTLR 匹配输入末尾

发布于 2024-09-26 18:29:20 字数 818 浏览 5 评论 0原文

我试图将我的语法与整个字符串相匹配，如果它无法消耗整个输入，则会出错。基本上，这个伪正则表达式：

\whitespace*  [a-zA-Z]+  [-]?  [a-zA-Z]+ \whitespace* $

根据 this，EOF 应该可以工作。因此，请考虑以下语法：

start : CHARS EOF
      ;

CHARS : ('a'..'z')+
      ;

如果我在此代码中将输入设置为 "hello"：

        var ss = new Antlr.Runtime.ANTLRStringStream(input);
        var lex = new autocompleteLexer(ss);
        var tokens = new CommonTokenStream(lex);
        var parser = new autocompleteParser(tokens);
        return (BaseTree)(parser.start().Tree);

我会得到一个带有两个子项的 AST，HELLO 和 EOF ，正如预期的那样。但是，如果我将输入设置为“hello#”，它会返回相同的树，并且根本不会抱怨哈希值。我不确定我做错了什么。

原文

I'm trying to match my grammar to an entire string, and have it error out if it cannot consume the entire input. Basically, this pseudo regex:

\whitespace*  [a-zA-Z]+  [-]?  [a-zA-Z]+ \whitespace* $

According to this, EOF should work. So, consider this grammar:

start : CHARS EOF
      ;

CHARS : ('a'..'z')+
      ;

If I set input to "hello" in this code:

        var ss = new Antlr.Runtime.ANTLRStringStream(input);
        var lex = new autocompleteLexer(ss);
        var tokens = new CommonTokenStream(lex);
        var parser = new autocompleteParser(tokens);
        return (BaseTree)(parser.start().Tree);

I get an AST with two children, HELLO and EOF, as expected. But if I set the input to say "hello#", it gives back the same tree, and doesn't complain about the hash at all. I'm not sure what I'm doing wrong.

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

盗心人 2024-10-03 18:29:20

我发现了问题，那就是异常被词法分析器捕获，而不是传播到我的代码中。因此，通过添加以下内容：

class ThrowAllLexer: queryLexer
{
    public ThrowAllLexer(ICharStream input): base(input) { }
    public override void  ReportError(RecognitionException e) {
        throw e;
}

我现在得到了适当的例外，而不是让它们被吞掉。

I found the problem, it was that exceptions were getting trapped by the Lexer instead of propagating into my code. So, by adding this:

class ThrowAllLexer: queryLexer
{
    public ThrowAllLexer(ICharStream input): base(input) { }
    public override void  ReportError(RecognitionException e) {
        throw e;
}

I now get the proper exceptions, instead of having them be swallowed.

回复收藏 0 原文

~没有更多了~