刮下XHR请求

Question

我要抓取该用户评论的第二页。

但是，下一个按钮将执行XHR请求，尽管我可以使用Chrome开发者工具看到该请求，但无法复制它。

Answer 1

这不是一件容易的事。 首先，您应该安装此扩展 。 它可以帮助您根据捕获的数据测试自己的请求，即使用捕获的数据捕获和模拟请求。

如我所见，他们在此XHR请求中发送了令牌，因此您需要从html页面正文（源代码中存储的js变量“ taSecureToken”）中获取令牌。

接下来，您需要执行四个步骤：

1. 使用插件捕获POST请求
2. 将令牌更改为保存之前
3. 在POST请求数据中设置limit和offset变量
4. 生成带有结果正文的请求

注意：在此请求服务器上，返回json数据（而不是带有下一页的html），其中包含有关下一页上已加载对象的信息。