如何单击使用javascript的单选按钮并使用Python（urllib2）获取下一页？ [WebScrape，硒]

Question

我为此感到挣扎。 我有一个经过全面测试的python脚本。 我必须做一个小的更改，其中我必须首先单击一个单选按钮，该单选按钮又自动执行将页面转发到搜索表单的javascript函数。

我的工作平台：Linux

语言：Python

单选按钮代码：

<input type="radio" language="javascript" onclick="javascript:setTimeout('__doPostBack(\'_ctl0$Main$SearchRadio\',\'\')', 0)" value="SearchRadio" name="_ctl0:Main:SearchRadio" id="_ctl0_Main_SearchRadio">

页面上的JavaScript代码：

<script type="text/javascript">
<!--
var theForm = document.forms['aspnetForm'];
  if (!theForm) {
    theForm = document.aspnetForm;
}
  function __doPostBack(eventTarget, eventArgument) {
    if (!theForm.onsubmit || (theForm.onsubmit() != false)) {
        theForm.__EVENTTARGET.value = eventTarget;
        theForm.__EVENTARGUMENT.value = eventArgument;
        theForm.submit();
    }
}
  // -->
</script>

这就是硒的作用。 不确定是否有帮助。

 def test_untitled(self):
        sel = self.selenium
        sel.open("/Search/results.aspx")
        sel.click("_ctl0_Main_SearchRadio")
        sel.wait_for_page_to_load("30000")
        sel.type("-InputTextField", "ThinkCode")
        sel.click("_SearchMainUser")
        sel.wait_for_page_to_load("30000")
        try: self.failUnless(sel.is_text_present("ThinkCode"))
        except AssertionError, e: self.verificationErrors.append(str(e))

我要做的就是转到单击单选按钮后重定向到的结果页面。 我了解了使用urllib2在python网络抓取中的javascript恐怖。 希望一个好心的pythonista会尽快帮助我:)

Answer 1

而不是尝试自动单击JavaScript按钮（这在Python中是很难的），而是尝试监视发送了什么请求，然后复制该请求。 有各种各样的firefox扩展可以帮助您做到这一点，例如TamperData ， Firebug和LiveHttp 。