我想知道是否可以在大约10k的Battlelog URL:s中搜索关键字? 这些页面不是.html页面,URL看起来像这样: http : //battlelog.battlefield.com/bf3/battlereport/show/9693602/1/369698400/

如果页面是.html,那么我只能使用Orbit Downloader之类的软件,或者GNU的wget。 但是,据我所知,现在没有实际文件可以下载。

我想从http://battlelog.battlefield.com/bf3/battlereport/show/9698003/1/369698400/搜索到http://battlelog.battlefield.com/bf3/battlereport/show/9708877/1/369698400/ ,当然,我不希望它像ddos攻击之类的东西,我也不想被禁止。

仅返回具有匹配项的URL:s就足够了,我不需要处理更多的信息。

===============>>#1 票数:1 已采纳

该页面处理JSON数据。 此处使用的JSON数据URL为:

http://battlelog.battlefield.com/bf3/battlereport/loadplayerreport/9693602/1/369698400/

http://battlelog.battlefield.com/bf3/battlereport/loadgeneralreport/9693602/1/

  ask by Rickard translate from so

未解决问题?本站智能推荐:

1回复

你能用Wget创建干净的URL吗?

我正在尝试使用干净的URL创建一个WordPress站点的镜像(即http://example.org/foo 而不是 http://example.org/foo.php )。 当Wget镜像网站时,它会为所有页面和链接提供“.html”扩展名(即http://example.org/foo
1回复

从必应搜索下载图像

我试图用bash编写爬虫程序以从bing下载图像。 一切正常,除了bing在开始时仅加载30张图像(使用无限滚动),因此我无法使用wget下载超过30张图像。 有任何解决方法可一次从bing图像下载30多个图像。 - 谢谢你的帮助。 :)
1回复

如何下载网址html中的链接? [关闭]

例如,当我在浏览器中打开https://stackoverflow.com/时 ,浏览器不仅会下载主页,还会下载图像,js,css。 但是当我curl https://stackoverflow.com/ ,只会下载主页html。 curl或wget是否有任何选项可以下载images /
2回复

在PHP中使用WGET进行url_encode?

这个问题是在我先前提出的另一个主题之后,没有人能够提供帮助: 通过PHP与通过网站检索M3U8提供了不同的会话变量 所以现在我正在尝试通过PHP WGET同一网站,但是我相信我需要对URL进行编码。 当我尝试以下命令时,没有下载任何内容: 我得到一个下载的空文件:'ajax
1回复

查询后获取网页结果的源代码?

当我在网站上进行大量测试数据输入时,我正在尝试计算搜索框错误的次数。 因此,我试图获取查询结果,并查看html结果页面中是否有单词“ Error”。 我向网站提交查询后尝试下载生成的html网页。 我建立查询并使用wget下载生成的网页。 但是,仅显示html的主要内容,而不显示结果
1回复

用wget下载pdf文件。 (文件扩展名后的字符?)

我正在尝试从网页上递归下载所有.pdf文件。 文件URL具有以下格式: 我正在使用以下参数: 保存时,wget拒绝所有文件。 使用--debug时出现此错误: 我认为是因为扩展名后出现此“?id = ****”而发生的。
1回复

第N个Google搜索结果的网址

我建立了一个网站,并且有一个文本字段,用户可以在其中输入文本以在Google上进行搜索。 当用户选择“搜索”时,我想用Google搜索的前5个结果打开新标签页。 Google提供了某种URL参数来执行此操作吗? 例如,特定搜索词组的第二个结果?
2回复

Alfresco使用直接URL参数进行搜索

我们有一个现有的Web应用程序,它具有可配置的URL和参数,可以轻松集成其他系统。 例如:我可以轻松生成可点击的网址,例如https:// external-system /&query = Invoice_123456 。 我们还运行Alfresco用于文档存储和PDF存档。 如果我
1回复

免费的网络搜索API或网络搜索日志[关闭]

对于大学研究,我需要很多网络查询示例以及一些搜索引擎返回的相关资源,为此,我有两种可能性:从搜索引擎收集它们或搜索一些可用数据集。 我知道Google提供了API,但我知道每天只允许100次免费查询。 有人可以给我其他建议吗?
3回复

JS搜索功能

当用户在搜索框中键入内容并单击从我网站上的任何页面发送时,我试图将用户重定向到专用的搜索页面。 是否可以用JS完成此操作: 使用ajax请求根据搜索输入提取数据 将用户重定向到专用搜索页面 根据来自ajax请求的数据构建新的搜索页面 我遇到的问题是JS需要在同