使用pickle在python多進程讀寫文件
[英]Using pickle to write and read files in python with multiple processes
問題描述
我正在使用 mpi4py 並希望在此過程中寫入和讀取泡菜文件。 我不斷收到錯誤，例如
return pickle.load(open(filename, "rb"))
EOFError: Ran out of input
我很確定這是因為一個線程正在嘗試讀取當前打開以由另一個線程寫入的文件。 如何使泡菜 MPI 安全？
1 個解決方案
解決方案1
1 2021-02-27 23:04:18
使用with open(my_file, 'rb') as xxx打開文件和/或使用 Lock
有沒有辦法使用 Python 讀取和寫入文件夾中的多個文本文件？
[英]Is there a way to read and write on multiple text files in a folder using Python?
多個進程是否可以同時僅從 Python 中的文件讀取（不寫入）？
[英]Is it possible for multiple processes to simultaneously only read (not write to) from a file in Python?
並行使用多個線程/進程從 Excel 讀取/寫入數據
[英]Read/Write data from/to Excel using multiple threads/processes in parallel
使用 for 循環“read_pickle”和“to_pickle”很多數據文件
[英]using for loop to "read_pickle" and "to_pickle" a lot of data files
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.