如何在C＃中抓取使用脚本生成的页面？

Question

简单示例：Google搜索页面。

http://www.google.com/search?q=foobar

获取页面源代码后，便获得了底层JavaScript。 我想要结果页面。 我该怎么办？

Answer 1

即使看起来好像只是javascript，它实际上是完整的HTML，也可以使用HtmlAgilityPack轻松确认：

HtmlAgilityPack.HtmlWeb web = new HtmlAgilityPack.HtmlWeb();
HtmlAgilityPack.HtmlDocument doc = web.Load("http://www.google.com/search?q=foobar");
string html = doc.DocumentNode.OuterHtml;
var nodes = doc.DocumentNode.SelectNodes("//div"); //returns 85 nodes