使用 grequests 時如何避免 429 錯誤？

Question

我想使用“grequests”制作解析器，但正如預期的那樣，由於許多請求，我收到錯誤 429。

import grequests


sites = [f"https://fantlab.ru/work{i}" for i in range(1, 10)]

response = (grequests.get(url, timeout=5)  for url in sites)
resp = grequests.map(response)

print(resp)

[<Response [200]>, <Response [200]>, <Response [200]>, <Response [404]>, <Response [429]>...]

Answer 1

當您發送的請求過多時，會返回 429（請求過多）狀態代碼。 您可以嘗試顯示請求（使用time模塊中的time.sleep(n) ，或者查看服務器所有者是否可以增加您的配額。