繁体   English   中英

API 调用 - 如何以年度格式提取数据

[英]API calls - How to extract data in a yearly format

同样,这让我更深入地了解 web 抓取:)。 抱歉,我没有要分享的代码。 (我什至不知道我要问的是否可能是诚实的)。 看看下面的网站。

https://data.gov.sg/dataset/ultraviolet-index-uvi?view_id=a50a4589-5726-4ff0-9565-9b8ca69a270c&resource_id=6246c980-21d4-441f-a51d0-b3212e

在上面,它说您可以提取(a)当时发布的数据或(b)当天发布的数据。

如果我想更雄心勃勃,即自动提取当年的所有数据怎么办? 你可以使用请求来做到这一点吗? 还是需要不同的方法?

算法将采用什么形式? 有专门的图书馆吗? 否则,这是否是一种蛮力方法,需要手动更改 url (当然是python)。

我担心的另一个问题是数据量。 您可以自动抽取它并以更大的抽取量(例如每小时平均值)对其进行解析吗?

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM