Python：行缓存文件大小限制？

Question

我有一个很大的.txt 文件。 每个条目都在一个新行上。 我正在尝试访问该文件并遍历每一行以获取条目。 但是，当我使用linecache.getline('file_path', 1)时，我得到一个空字符串。 Python 文档中的哪一个是linecache返回错误的方式。 有文件大小限制吗？ 我正在尝试读取一个 1.2GB 的文件。 我也相当确定linecache在获得行号之前仍在尝试将整个文件读入 memory 。 RAM 使用率上升大约文件的大小，然后恢复正常。 我对linecache做错了什么？ 除了linecache之外还有什么建议吗？

Answer 1

如果您只是想逐行读取文件，而不是将其加载到 memory 中，则 python open带有自己的生成器。

with open("filename", "r") as file:
    for line in file:
        # Do stuff

只要你在for循环中做你必须做的事情，你就不必担心memory。

有关官方文档的更多信息

Answer 2

您需要做的就是使用文件 object 作为迭代器。

for line in open("log.txt"):
    do_something_with(line)

更好的是在 Python 版本中使用上下文管理器。

with open("log.txt") as fileobject:
    for line in fileobject:
        do_something_with(line)

这也会自动关闭文件。