[英]API calls - How to extract data in a yearly format
同样,这让我更深入地了解 web 抓取:)。 抱歉,我没有要分享的代码。 (我什至不知道我要问的是否可能是诚实的)。 看看下面的网站。
在上面,它说您可以提取(a)当时发布的数据或(b)当天发布的数据。
如果我想更雄心勃勃,即自动提取当年的所有数据怎么办? 你可以使用请求来做到这一点吗? 还是需要不同的方法?
算法将采用什么形式? 有专门的图书馆吗? 否则,这是否是一种蛮力方法,需要手动更改 url (当然是python)。
我担心的另一个问题是数据量。 您可以自动抽取它并以更大的抽取量(例如每小时平均值)对其进行解析吗?
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.