WebDriver 可以使用 xpath 找到元素，Html 敏捷包不能

Question

我一直遇到 Html 敏捷包的问题； 我的 XPath 查询只有在非常简单时才有效：

//*[@id='some_id']

或者

//input

但是，只要它们变得更复杂，Html Agility Pack 就无法处理它。 这是一个演示问题的示例，我使用 WebDriver 导航到 Google，并返回页面源，该页面源被传递给 Html Agility Pack，WebDriver 和 HtmlAgilityPack 都尝试定位元素/节点（C#）：

//The XPath query
const string xpath = "//form//tr[1]/td[1]//input[@name='q']";

//Navigate to Google and get page source
var driver = new FirefoxDriver(new FirefoxProfile()) { Url = "http://www.google.com" };
Thread.Sleep(2000);

//Can WebDriver find it?
var e = driver.FindElementByXPath(xpath);
Console.WriteLine(e!=null ? "Webdriver success" : "Webdriver failure");

//Can Html Agility Pack find it?
var source = driver.PageSource;
var htmlDoc = new HtmlDocument { OptionFixNestedTags = true };
htmlDoc.LoadHtml(source);
var nodes = htmlDoc.DocumentNode.SelectNodes(xpath);
Console.WriteLine(nodes!=null ? "Html Agility Pack success" : "Html Agility Pack failure");

driver.Quit();

在这种情况下，WebDriver 成功定位了该项目，但 Html Agility Pack 没有。

我知道，我知道，在这种情况下，很容易将 xpath 更改为可行的： //input[@name='q'] ，但这只会解决这个特定的例子，这不是重点，我需要能够完全或至少密切反映 WebDriver 的 xpath 引擎，甚至是 Firefox 的 FirePath 或 FireFinder 附加组件的行为。

如果 WebDriver 能找到，那为什么 Html Agility Pack 也找不到呢？

Answer 1

您遇到的问题是 FORM 元素。 HTML Agility Pack以不同的方式处理该元素- 默认情况下，它永远不会报告它有子元素。

在您给出的特定示例中，此查询确实找到了目标元素：

.//div/div[2]/table/tr/td/table/tr/td/div/table/tr/td/div/div[2]/input

但是，事实并非如此，因此很明显 form 元素正在触发解析器：

.//form/div/div[2]/table/tr/td/table/tr/td/div/table/tr/td/div/div[2]/input

不过，这种行为是可配置的。 如果在解析 HTML 之前放置此行，表单将为您提供子节点：

HtmlNode.ElementsFlags.Remove("form");