繁体   English   中英

如何使用 python 提取网站的全部数据?

[英]How to extract whole data of a website using python?

我正在尝试从以下网站读取表格数据: https://cdn.ime.co.ir ,使用以下代码:

import requests
import urllib.request
import time
from bs4 import BeautifulSoup

url = 'https://cdn.ime.co.ir'
response = requests.get(url)

soup = BeautifulSoup(response.text, "html.parser")

但是当我检查soup的内容时,我需要阅读的表格数据不在那里!

这是我喜欢阅读其数据的表格之一,单击它上方的栏将显示该数据。

在此处输入图像描述

我建议您获取网站数据,从GET请求而不是POST开始。

response = request.GET(<url>)

GET 和 POST 之间的区别

之后,您应该使用 beautifulsoup4 来分析响应中的数据:

BS4 文件

问候!

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM