繁体   English   中英

如何通过Web API调用提取增量数据

How to pull the delta data through Web api call

提示:本站收集StackOverFlow近2千万问答,支持中英文搜索,鼠标放在语句上弹窗显示对应的参考中文或英文, 本站还提供   中文繁体   英文版本   中英对照 版本,有任何建议请联系yoyou2525@163.com。

我已经构建了一个Azure函数应用程序,可以通过API调用提取数据。 api调用的限制为300,并且每次我提取历史记录数据时api的数量都超过了。 有什么方法可以在每次函数触发时调用增量记录。

例:

我想从论坛中获取类别名称categoryid (增量编号)。 最初,我加载500个类别,然后增加到750个。是否可以仅提取接下来的250个类别?

有什么方法可以处理api调用超出异常?

谢谢。

1 个回复

我认为您需要重新设计API以支持采用跳过机制。

您可以通过在现有操作(方法)中使用可选参数或通过创建专用操作(方法)并使用URL结构路由到适当的操作来做到这一点。

1 从 API 调用中提取数据

尝试从使用request的 API 调用返回的对象中提取数据。 当我尝试info.featrues[0]我得到一个TypeError 当我使用info.features我得到未定义但是res.body工作得很好。 有人能指出我做错了什么吗 ...

2 如何从 API 调用中提取数据

地理ipify API 我附上了来自浏览器的 API 结果的屏幕截图。 我正在使用这个 ReactJS 函数来获取 API 当我 console.log(data.ip) 其显示结果未定义。 这里需要帮助!。 如何从此 API 调用中提取数据? ...

3 从Elasticsearch提取增量数据

我是Elasticsearch的新手,因此请考虑一下这个问题可能看起来不太幼稚。 我们有一个要求,一方面将数据从Kafka(Kafka-1)推送到Elasticsearch。 我们还有另一个无法访问Kafka-1的团队,他们需要从elasticsearch获取增量数据,并希望针对不同的管道需求推送 ...

4 完整 api 调用的增量加载

我有一个 API,我需要从中获取注册数据到我的数据库中并每天对其进行汇总。 每次我调用 API 时,我都会获得数据的完整副本。 有时旧帐户会被删除,因此历史数据会发生变化。 这是来自 API 的数据的样子: 我想像这样汇总它,以查看每日帐户创建和激活: 现在,我可以做的是每天导入完整数 ...

5 Api 调用中的增量偏移

调用api时需要获取所有结果。 我只得到 100。我知道我必须每 100 抵消一次才能获得全部。 不知道总共有多少结果。 我想我应该使用“while”,直到 api 说没有更多结果..实施它。 我正在使用 Google App Scripts 在 Google 表格中插入结果。 我尝试使用“whil ...

7 如何通过API调用从influxdb中提取数据?

我使用数据库“ dbvishnutest”中的以下api调用推送了数据 现在,我尝试使用下面的api调用拉回数据。 我收到以下错误: 我是influx数据库的新手,我尝试修复,但无法解决此问题。 有人可以纠正我的错误吗? 提前致谢 :) ...

8 提取api调用数据未定义

嘿,我有一个React应用发出提取API的请求。 当我在控制台将响应转换为json后记录响应时,它可以正常工作,但是当我尝试使用数据设置状态时,它说未定义。 我想念什么? componentDidMount() { fetch('/api/logs') .then(res ...

2018-12-10 00:56:10 1 347   reactjs
9 API调用-如何以年度格式提取数据

再次,这使我更深入地研究了网络抓取:)。 抱歉,我没有共享的代码。 (我什至不知道我要问的内容是否可能是诚实的)。 看看下面的网站。 https://data.gov.sg/dataset/ultraviolet-index-uvi?view_id=a50a4589-5726-4ff0-956 ...

10 通过 API 调用可视化 Web 数据

我正在使用 Web 服务器服务,我可以在其中使用 RestAPI 调用获取实时数据。 现在我希望能够收集数据 - 以某种方式存储它们,然后以一种很好的方式将它们可视化(基本上生成图形)。 我的方法是将它们存储在数据库中,然后使用 PowerBI 的内部功能“从“SQL Server 数据库”获取数据 ...

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2022 STACKOOM.COM