如何在使用java设置屏幕抓取表单的值后调用post方法

Question

背景：我有一个网页（.aspx） ，其下拉列表很少。列表值是根据之前下拉列表的选择使用Ajax调用填充的。 选择所有下拉列表的值后，我们可以单击下载按钮，将根据我们执行某些其他操作所需的下载数据下载数据。

我已经做了什么：我能够通过正确调用ajax设置下拉数据，但发送一个帖子请求是一个问题。 这是代码片段/伪代码。

随意使用任何工具和java

public static void main(String[] args) throws FailingHttpStatusCodeException, IOException {
        final WebClient webClient = new WebClient(BrowserVersion.FIREFOX_17);


        WebRequest request = new WebRequest(new URL(DataDownloader.MY_URL),HttpMethod.POST);

        webClient.getOptions().setThrowExceptionOnScriptError(false);
        webClient.setJavaScriptTimeout(10000);
        webClient.getOptions().setJavaScriptEnabled(true);
        webClient.setAjaxController(new NicelyResynchronizingAjaxController());
        webClient.getOptions().setTimeout(10000);

        HtmlPage page = webClient.getPage(request);     

        HtmlSelect firstDd = (HtmlSelect) page.getElementById("dd1_id");
        List<HtmlOption> firstOption = firstDd.getOptions();
        firstDd.setSelectedAttribute(firstOption.get(2), true);
        webClient.waitForBackgroundJavaScript(3000);

        HtmlPage pgAfterFirstDd = (HtmlPage) webClient.getCurrentWindow().getEnclosedPage();
        HtmlSelect secondDd = (HtmlSelect) pgAfterFirstDd.getElementById("dd2_id");

        List<HtmlOption> secondOption = secondDd.getOptions();
        secondDd.setSelectedAttribute(secondOption.get(2), true);
        webClient.waitForBackgroundJavaScript(10000);
        //set the value for all other dropdowns


        HtmlPage finalpage = (HtmlPage) webClient.getCurrentWindow().getEnclosedPage();         
        HtmlForm form = finalpage.getHtmlElementById("aspnetForm");
        webClient.waitForBackgroundJavaScript(10000);


        request.setRequestBody("REQUESTBODY");
        Page redirectPage = webClient.getPage(request);

//       HtmlSubmitInput submitInput=form.getInputByName("btnSubmit");
//      submitInput.click();
        /*HtmlButton submitButton = (HtmlButton) pageAfterWard.createElement("btnSubmit");
        submitButton.setAttribute("type", "submit");
        form.appendChild(submitButton);

        HtmlPage nextPage = (HtmlPage) submitButton.click();*/
    }

Answer 1

final WebClient webClient = new WebClient(BrowserVersion.FIREFOX_17);

看起来您使用的是旧版本，请使用最新版本。

WebRequest request = new WebRequest(new URL(DataDownloader.MY_URL),HttpMethod.POST);

使用HtmlUnit，您通常无法处理请求。 我的想法是更多地使用'浏览器'。 使用类似getPage（最终URL网址）的内容。

List<HtmlOption> firstOption = firstDd.getOptions();
firstDd.setSelectedAttribute(firstOption.get(2), true);

你的工作更像'浏览器'

firstOption.get(2)setSelected(true);

这将为您完成所有后台工作，例如取消选择其他选项和事件处理。

关于提交表单你的想法

 HtmlSubmitInput submitInput=form.getInputByName("btnSubmit");
 HtmlPage nextPage = submitInput.click();

看起来不错。 也许你必须等到那之后。 如果您仍然遇到问题，则必须提供您正在使用的URL，以便我们能够重现/调试您的案例。

Answer 2

正如你在RBRi的答案中的评论中提到的那样，你得到了类型错误。你可以提一下

• 你得到的确切错误是什么
• 你期待什么类型的文件/回复。

因为代码看起来对我很好，它应该完美地工作..

Answer 3

为什么要隐藏错误详细信息？ 有什么秘密吗？ 如果您喜欢有用的答案，您必须提供尽可能多的信息。 所以我做了一个疯狂的猜测......

submitInput.click();

将返回PDF。 在这种情况下，你必须做类似的事情

Page pdfPage = submitInput.click();
WebResponse resp = pdfPage.getWebResponse();
if("application/pdf".equals(resp.getContentType())) {
    .... process the bytes
    .... resp.getContentAsStream()
}

HtmlUnit有四种页面HtmlPage / XmlPage / TextPage和UnexpectedPage。 PDF或办公文档等二进制内容作为UnexpectedPage处理。 处理此内容取决于您。