jsoup(連接) Java 耗時較長

Question

我試圖從許多 html 頁面中獲取幾行代碼。

我正在使用 Jsoup，go 需要超過 70 多個 html 頁面（90% 的時間用於通過 jsoup.connect 創建新文檔）需要 2 分鍾。

這是正常的嗎？ 使用另一個解析器會有什么不同嗎？

Document doc = Jsoup.connect(Url).timeout(10*1000).get();

我能夠通過所有網頁 go 。

Answer 1

jsoup 通常需要大約 2 秒來建立連接並獲取 html 內容

如果 url 被重定向到另一個站點，則最多可能需要 5 秒。

可能是您獲取的某些頁面可能會被重定向，將超時設置為 3 秒，您可能知道出了什么問題..