如何使用WWW :: Mechanize访问按下拉列表拆分的页面

Question

我有从以下链接下载的基因列表。 在下拉列表下将其分成60页的问题。

http://diana.cslab.ece.ntua.gr/micro-CDS/index.php?r=search/results_mature&mir=hsa-miR-3131&kwd=MIMAT0014996

如何使WWW :: Mechanize从所有页面访问所有基因？

这是我目前的代码：

use WWW::Mechanize;
use strict;
use warnings;

my $url = "http://diana.cslab.ece.ntua.gr/micro-CDS/index.php?r=search/results_mature&mir=hsa-miR-3131&kwd=MIMAT0014996";

my $mech = WWW::Mechanize->new();
$mech->agent_alias("Windows IE 6");

$mech->get($url);
#only access the first page.

Answer 1

使用Javascript实现页面下拉菜单。 您无法使用Mechanize执行此操作，因为它没有实现Javascript。 请参阅常见问题

Answer 2

这很容易-页码位于URL内（这是第11页）：

my $page_number = 11;
$mech->get( "http://diana.cslab.ece.ntua.gr/micro-CDS/index.php?r=search%2Finitializesearch&keywords=MIMAT0014996&thr=0.41&kegg=&page=" . $page_number );

Answer 3

$pages = 60;
for($i=1;$pages<=60;$i++){
    $url = "http://diana.cslab.ece.ntua.gr/micro-CDS/index.php?r=search%2Finitializesearch&keywords=MIMAT0014996&thr=0.41&kegg=&page=$i"
    $mech->get($url);
}

这应该做。 您只需要遍历60个页面，每次都修改URL。