如何从安全URL（https：//）中提取HTML代码？

Question

我使用JSoup库不是从安全URL（https：//）获取完整的html内容，因为URL将动态获取内容。 有什么方法可以获取受保护的URL（https：//）的确切HTML内容。

Answer 1

为了解析完整的内容，您可以将Selenium与Jsoup一起使用。

WebDriver driver = new ChromeDriver();
driver.get("https://google.com/");
Document doc = Jsoup.parse(driver.getPageSource());

或者您也可以等待特定内容加载。如下所示：

public void waitForLoad(WebDriver driver) {
    ExpectedCondition<Boolean> pageLoadCondition = new
            ExpectedCondition<Boolean>() {
                public Boolean apply(WebDriver driver) {
                    return ((JavascriptExecutor)driver).executeScript("return document.readyState").equals("complete");
                }
            };
    WebDriverWait wait = new WebDriverWait(driver, 30);
    wait.until(pageLoadCondition);
}