Python-多處理守護進程

Question

我正在創建一個多進程，它創建一個 csv 文件。 當我使用d.daemon = False運行代碼時，它工作正常，即它在同一文件夾中創建了一個文件。 但是當使用d.daemon = True編譯和運行時，它不會，即不會創建文件。 為什么會這樣？

我的代碼

我有一個 URL 種子列表，我需要從中抓取數據。

for url in config.SEED_LIST:
    # starting a new process for each category.
    d = multiprocessing.Process(target=workers.scrape, args=())
    d.daemon = True
    d.start()


def scrape():
    import time
    time.sleep(5)
    # The above part of code takes some time to scrape a webpage, applying
    # some logic, which takes some time to execute, hence I've added a time
    # sleep of 5 secs. But when run with daemon = True, the file is not
    # created. Else it works fine.

    data = [[1, 2, 3, 4], [2224, 34, 34, 34, 34]]
    with open('1.csv', "wb") as f:
        writer = csv.writer(f)
        writer.writerows(data)

Answer 1

根據多進程守護進程文檔，通過在腳本結束時設置d.daemon=True其工作將終止所有子進程。 這發生在他們開始寫入之前，因此不會產生任何輸出。

Answer 2

d.daemon = True表示子進程在父進程結束后自動終止，防止出現孤兒進程。 join()通過在d.join()之后簡單地添加d.join() d.start() ，這樣父進程就不會在子進程之前結束； 相反，父進程將等到子進程結束。