为每个 HTTP 请求添加带有自定义用户代理的标头

Question

使用 urllib 时，是否可以让 python 为每个 HTTP 连接使用带有特定 User-Agent 字符串的自定义标头？ 为了使以下内容在整个程序中持续存在并添加到每个 Request()、urllib.request.urlretrieve() 和每个其他建立 HTTP 连接的函数中：

.add_header('User-Agent', 'Mozilla/5.0')

或者是否可以在其配置文件中的某处将 python 的默认用户代理字符串从Python-urllib/3.5更改为Mozilla/5.0 ？

Answer 1

您可以使用requests.Session更新标头

import requests
session = requests.Session()
session.headers['User-Agent'] = 'my user agent'
response = session.get('http://google.com')