忽略404狀態的html主體返回的node.js request.get

Question

我在使用node.js 請求模塊時遇到麻煩。 我需要獲取頁面的html正文，因此我以這種方式向GET請求發送url：

var request = require('request');

var headers = { 
    'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10.8; rv:24.0) Gecko/20100101 Firefox/40.0',
    'Content-Type' : 'application/x-www-form-urlencoded' 
};
var url = "http://shop.nag.ru/catalog/14019.Шкафы-телекоммуникационные/14020.Напольные-шкафы/14024.600x600/08061.SNR-TFC-376060-G";

request.get({url: url, headers: headers }, function (err, response, body) {
  console.log("stat" + response.statusCode);
   console.log("body" + body);

}); 

並且它以html主體響應。 但是，如果您在瀏覽器中使用相同的鏈接，則會看到一個帶有404 error的頁面： http : //shop.nag.ru/catalog/14019.Шкафы-телекоммуникационные/14020.Напольные-шкафы/14024.600x600/08061.SNR- TFC-376060-G “（URL使用俄語字母）。那是什么問題？為什么請求沒有返回“ 404”狀態的響應？

Answer 1

嘗試對網址進行編碼 。 大多數瀏覽器默認情況下都執行此操作，因此當您嘗試從瀏覽器中命中以下網址時：

http://shop.nag.ru/catalog/14019.Шкафы-телекоммуникационные/14020.Напольные-шкафы/14024.600x600/08061.SNR-TFC-376060-G

您實際上將請求發送到：

http://shop.nag.ru/catalog/14019.%D0%A8%D0%BA%D0%B0%D1%84%D1%8B-%D1%82%D0%B5%D0%BB%D0% B5％D0％BA％D0％BE％D0％BC％D0％BC％D1％83％D0％BD％D0％B8％D0％BA％D0％B0％D1％86％D0％B8％D0％BE％ D0％BD％D0％BD％D1％8B％D0％B5 / 14020.％D0％9D％D0％B0％D0％BF％D0％BE％D0％BB％D1％8C％D0％BD％D1％8B ％D0％B5-％D1％88％D0％BA％D0％B0％D1％84％D1％8B / 14024.600x600 / 08061.SNR-TFC-376060-G`

但是，如果您在節點request模塊的幫助下運行請求，則不會對該URL進行編碼。 因此，您應該自己做：

request.get({url: encodeURI(url), headers: headers }, function (err, response, body) { 
    // ... 
});