使用Python从“ javascript：__ doPostBack”链接下载文件

Question

我有一个使用urllib2编写的Python脚本，可以从http：//链接下载：

import urllib2
import os.path
import os
from os import chdir, getcwd, listdir, path

print "downloading with urllib2"

f = urllib2.urlopen('http://www.dcregs.dc.gov/Notice/DownLoad.aspx?VersionID=4613531')
data = f.read()

with open( "11-B300.doc", "wb" ) as code :
code.write( data )

print "All done downloads!"

源网页已重新格式化为使用“ javascript：__ doPostBack”地址：

javascript:__doPostBack('ctl00$MainContent$rpt_ruleList$ctl02$Label1','')

我的推测是，有某种形式的软件包，类似于urllib2，它将允许我通过“ javascript：__ doPostBack”格式的地址下载相同的信息，或者调用该信息所在的http url，从中可以然后下载信息。

现有脚本可以很好地实现我的目的，因此，如果可能的话，我想限制其他编码。

是否有urllib2的替代产品，可以让我以类似的方式下载信息？

还是我的解决方案必须变得更加复杂（例如，使用Selenium抓取信息）？ （我是否想变得更加复杂，以便不必管理各个URL的更新？）

感谢您的帮助。

Answer 1

这与您正在使用的网站正在使用.NET WebForms有关，该网站管理页面的状态以及隐藏的表单变量中的交互。

简而言之，您需要通过Selenium之类的链接单击链接