[英]Python requests. 403 Forbidden
我需要解析一個站點,但我收到錯誤 403 Forbidden。 這是一個代碼:
url = 'http://worldagnetwork.com/'
result = requests.get(url)
print(result.content.decode())
它的輸出:
<html>
<head><title>403 Forbidden</title></head>
<body bgcolor="white">
<center><h1>403 Forbidden</h1></center>
<hr><center>nginx</center>
</body>
</html>
請說是什么問題。
該頁面似乎拒絕了不識別User-Agent
的GET
請求。 我使用瀏覽器 (Chrome) 訪問了該頁面並復制了GET
請求的User-Agent
標頭(查看開發人員工具的“網絡”選項卡):
import requests
url = 'http://worldagnetwork.com/'
headers = {'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36'}
result = requests.get(url, headers=headers)
print(result.content.decode())
# <!doctype html>
# <!--[if lt IE 7 ]><html class="no-js ie ie6" lang="en"> <![endif]-->
# <!--[if IE 7 ]><html class="no-js ie ie7" lang="en"> <![endif]-->
# <!--[if IE 8 ]><html class="no-js ie ie8" lang="en"> <![endif]-->
# <!--[if (gte IE 9)|!(IE)]><!--><html class="no-js" lang="en"> <!--<![endif]-->
# ...
只需添加到阿爾貝托的答案:
如果添加user-agent
后仍然出現403 Forbidden
,則可能需要添加更多 headers,例如referer
:
headers = {
'User-Agent': '...',
'referer': 'https://...'
}
這些標頭可以在開發者工具的Network > Headers > Request Headers
中找到。 (按F12
切換它。)
如果您是服務器的所有者/管理員,並且接受的解決方案對您不起作用,請嘗試禁用 CSRF 保護(鏈接到 SO 答案) 。
我使用的是 Spring (Java),因此設置需要您制作一個SecurityConfig.java
文件,其中包含:
@Configuration
@EnableWebSecurity
public class SecurityConfig extends WebSecurityConfigurerAdapter {
@Override
protected void configure (HttpSecurity http) throws Exception {
http.csrf().disable();
}
// ...
}
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.