将cURL与C和非顶级URL结合使用时出现问题

Question

我正在使用cURL抓取网页，但似乎只能抓取顶级URL。 例如，如果我要URL URL“ http://www.businessweek.com/news/2010-09-29/flaherty-says-canada-july-gdp-report-tomorrow-may-be-negative.html ”，则不会返回任何内容（好像是空白页一样）。

这是我的C代码：

#include <stdio.h>
#include <curl/curl.h>

int main(void)
{
  CURL *curl;
  CURLcode res;

  curl = curl_easy_init();
  if(curl) {
//THIS WORKS
//curl_easy_setopt(curl, CURLOPT_URL, "news.google.com"); 

//THIS DOESN'T WORK
  curl_easy_setopt(curl, CURLOPT_URL, "http://www.businessweek.com/news/2010-09-29/flaherty-says-canada-july-gdp-report-tomorrow-may-be-negative.html"); 
    res = curl_easy_perform(curl);

    curl_easy_cleanup(curl);
  }
  return 0;
}

如果我能在这个问题上得到一些建议，那将是很好的。

Answer 1

这是因为该站点正在发送301。将CURLOPT_FOLLOWLOCATION为1以自动跟踪它们。

curl_easy_setopt(curl, CURLOPT_FOLLOWLOCATION, 1);