Java JSoup URL連接

Question

我在網上搜索，但找不到任何幫助。

我有一個像這樣的網址

String url = "http://www.rightmove.co.uk/property-for-sale/find.html?searchType=SALE&locationIdentifier=REGION%5E904&insId=3&radius=10.0&minPrice=&maxPrice=500000&minBedrooms=&maxBedrooms=&displayPropertyType=&maxDaysSinceAdded=&_includeSSTC=on&sortByPriceDescending=&primaryDisplayPropertyType=&secondaryDisplayPropertyType=&oldDisplayPropertyType=&oldPrimaryDisplayPropertyType=&newHome=&auction=false"

我嘗試使用URLencoder.encode(url,"UTF-8")但是沒有用。 有任何想法嗎？？

我正在使用以下jsoup連接嘗試對網頁進行爬網。

 Document doc = Jsoup.connect(url).userAgent("Mozilla/5.0 "
                + "(Windows NT 6.1)"
                + "AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2228.0 "
                + "Safari/537.36").timeout(14000).followRedirects(false).
                ignoreContentType(true).get();

任何幫助，將不勝感激！

Answer 1

對於棘手的網址，我建議使用以下連接獲取文本：

   String url = ""
   doc = Jsoup.parse(new URL(url).openStream(),  "ISO-8859-1", url);