微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

使用Irony进行解析时,请包含空格

如何解决使用Irony进行解析时,请包含空格

我正在使用以下库编写解析器: https://www.nuget.org/packages/Irony

我当前的目标是解析一个包含纯文本行的文件。每行以空格或制表符开头。

这是我的语法课的样子:

NonTerminal program = new NonTerminal("program");
NonTerminal textStatement = new NonTerminal("textStatement");
NonTerminal textStatements = new NonTerminal("textStatements");

FreeTextLiteral text = new FreeTextLiteral("text","\r\n");

KeyTerm whitespace = ToTerm(" ","whitespace");
KeyTerm tab = ToTerm("  ","tab");
KeyTerm newline = ToTerm("\n","newline");

textStatement.Rule = ((whitespace | tab) + text + newline);
textStatements.Rule = MakePlusRule(textStatements,textStatement);

program.Rule = textStatements;
this.Root = program;

这是目标文件内容(不包括行):

----------------------
 test

----------------------

令人惊讶的是,这件事对我失败,并显示以下消息:

Column 1,Line 0:
Syntax error,expected: whitespace,tab

该语法似乎认配置为跳过空格和制表符。因此,它开始以“ t”字母进行解析,而跳过了第一个“”符号。 在大多数情况下,这很好,但不适用于此情况。我正在尝试编写类似python的语言,因此对空格的跟踪非常重要。

我不希望您为我写整个语法,只是建议一种通用方法。感谢您的任何帮助,谢谢!

UPD:我最终重写了2个这样的功能

    public override bool IsWhitespaceOrDelimiter(char ch)
    {
        if (ch == ' ' || ch == '\t')
            return false;
        return base.IsWhitespaceOrDelimiter(ch);
    }

    public override void Skipwhitespace(ISourceStream source)
    {
        while (!source.EOF())
        {
            switch (source.PreviewChar)
            {
                //case ' ':
                //case '\t':
                //    break;
                case '\r':
                case '\n':
                case '\v':
                    if (UsesNewLine) return;
                    break;
                default:
                    return;
            }
            source.PreviewPosition++;
        }
    }

解决方法

如果要在语法中将“空格”作为显式字符处理,则需要重写IsWhitespaceOrDelimiter方法,对于空格,返回false。和tab和其他字符相同

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。