InputStreamReader 不從某些網站讀取 HTML 代碼

Question

我使用以下代碼

if (HttpURLConnection.HTTP_OK == con.getResponseCode()) {
                BufferedReader bf = new BufferedReader(new InputStreamReader(con.getInputStream()));

                String line;
                while ((line = bf.readLine()) != null) {
                    sb.append(line);
                    sb.append("/n");
                }
                System.out.println(sb);
            }

從我的連接中讀取 HTML 代碼。 代碼工作得很好並且在某些網站上得到正確的東西，但其他網站似乎對此有某種防御措施？ 無論哪種方式，我都沒有收到完整的 HTML 連接代碼。 這是一個應該打印出預期結果與我得到的實際結果的示例。

Answer 1

有些 web 服務器要求您指定一個用戶代理，在這里您可以找到它們的列表： https://user-agents.net/

您可以在 Windows 10（64 位）上嘗試類似 Firefox 100.0 的操作：

URL url = new URL(/* ... */);
URLConnection connection = url.openConnection();
connection.setRequestProperty("User-Agent", "Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:100.0) Gecko/20100101 Firefox/100.0 Viewer/93.9.7218.19");