請求模塊 405 客戶端錯誤，其中 urllib3 工作正常

Question

無法使用請求模塊獲取數據。

import requests
resp = requests.get("https://www.embassy-worldwide.com")
resp.status_code

下面的代碼工作正常。

import urllib3
http = urllib3.PoolManager()
r = http.request('GET', 'https://www.embassy-worldwide.com/')
r.status

在 requests.get 命令中是否需要設置任何參數以使其工作？

Answer 1

如果您正在抓取或發送請求，則網站需要知道它來自瀏覽器，因此添加相關標頭。

In [57]: headers = {'User-Agent': 'Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:78.0) Gecko/20100101 Firefox/78.0'}

In [58]: import requests
    ...: resp = requests.get("https://www.embassy-worldwide.com", headers=headers)
    ...: resp.status_code
Out[58]: 200