頁面需要登錄時如何使用C＃從網頁獲取HTML數據

Question

因此，基本上，我希望從網頁上獲取HTML數據-問題是訪問該頁面需要登錄。我已經登錄了瀏覽器（IE），但我認為我的代碼未引用同一瀏覽器這就是為什么它需要登錄。

這是我到目前為止所做的：

        public void HTMLImport(){
        string urlAddress = "https://randomWebsite.com/reports/show_report.aspx";

        HttpWebRequest request = (HttpWebRequest)WebRequest.Create(urlAddress);
        HttpWebResponse response = (HttpWebResponse)request.GetResponse();

        if(response.StatusCode == HttpStatusCode.OK){

            Stream receiveStream = response.GetResponseStream();
            StreamReader readStream = null;

            if(response.CharacterSet == null){
                readStream = new StreamReader(receiveStream);
            }
            else{
                readStream = new StreamReader(receiveStream,Encoding.GetEncoding(response.CharacterSet));
            }
            string data = readStream.ReadToEnd();

            response.Close();
            readStream.Close();

            // This is showing the HTML data for when person is not logged in - 
            Console.WriteLine(data);



        }

Answer 1

您將需要使用C＃代碼執行登錄，也許是通過使用正確的憑據將登錄表單重新發布回服務器（太長時間才能在此處編寫代碼），然后再讀回響應頁面以獲取會話Cookie（大多數登錄功能將回復您必須包含在其他請求中的身份驗證Cookie）。

沒有更多的細節，很遺憾，我無法提供更多幫助。

Answer 2

為此，首先，您應該知道網站通常使用cookie來保存會話。

1. 向網絡服務器發送請求並獲得響應，您將在響應HEAD中找到一個session_id。 （在.NET中，通常使用ASP.NET_SessionId）。
2. 向Web服務器發送登錄請求並發布用戶名和密碼，您應該在此請求和以下請求中添加ASP.NET_SessionId cookie。
3. 發送帶有ASP.NET_SessionId cookie的“ https://randomWebsite.com/reports/show_report.aspx ”，您將發現您已在Web服務器中登錄。