使用 ANTLR 解析 python 个文件

Question

使用这些步骤，我尝试为 Antlr4 Python3.g4 语法文件生成解析树，以解析 python3 代码，我使用 ANTLR 生成了我的 python 解析器。 但是我不确定如何传入 python 文件，因为 InputStream 不接受这个。

我目前设法将其作为文本文件传递：

def main():
    with open('testingText.txt') as file:
        data = file.read()


    input_stream = InputStream(data)
    lexer = Python3Lexer(input_stream)
    stream = CommonTokenStream(lexer)
    parser = Python3Parser(stream)
    tree = parser.single_input()
    print(tree.toStringTree(recog=parser))

但是我遇到了与“输入不匹配 <EOF>”有关的错误，有时还有“没有可行的替代方案作为输入 <EOF>”

我想传入一个 .py 文件，但我不确定如何处理 <EOF> 问题

Answer 1

可以肯定的是，我需要知道testingText.txt包含什么，但我很确定解析器期望在文件末尾有一个换行符，而testingText.txt不包含尾随换行符。

你可以试试这个：

with open('testingText.txt') as file:
    data = f'{file.read()}\n'