PHP XPath：如何获取div的内容和html标签？

Question

我正在尝试抓取网页，我想抓取div标签内的文本和所有 HTML 标签。

该网页如下所示：

<div class="class">
  <p>A little paragraph</p>
  <a href="#"><img src="/test.jpg"/></a>
  <p>Another paragraph</p>
  <ul>
    <li>1</li>
    <li>2</li>
  </ul>
</div>

使用 cURL 我已经成功提取了所有文本，但没有标签。

我的代码：

$content = $xpath->query('//div[@class="class"]');

Answer 1

这很容易：

<?php

$html = '
<div class="class">
  <p>A little paragraph</p>
  <a href="#"><img src="/test.jpg"/></a>
  <p>Another paragraph</p>
  <ul>
    <li>1</li>
    <li>2</li>
  </ul>
</div>';

$dom = new DomDocument();
@$dom->loadHTML($html);
$xpath = new DOMXpath($dom);
$masterNode = $xpath->query('//div[@class="class"]'); #It returns DOMNodeList

# Now from master node we gonna pick what we want.
# Also, $masterNode->item(0) is context node for "P" tags.
$paragraphNodes = $xpath->query('p', $masterNode->item(0)); 

foreach ($paragraphNodes as $paragraphElement) {
    print $paragraphElement->nodeValue . "\n";
}

上面的代码返回：

 A little paragraph
 Another paragraph

这是一个可运行的示例：http: //3v4l.org/9CYCs

从 div 中获取所有子节点

<?php
// ...
$dom = new DomDocument();
@$dom->loadHTML($html);
$xpath = new DOMXpath($dom);

这是来自 div.class 的所有子节点（它返回一个 DOMNodeList 实例）：

$allChildNodesFromDiv = $xpath->query('//div[@class="class"]/*');
# Do somenthing with child nodes (see DOMElement)
foreach($allChildNodesFromDiv as $nodeElement) {
    # Do something with $nodeElement, for instance:
    print $nodeElement->nodeName;       
    print $nodeElement->nodeValue;  
   // ...   
}

注意DOMNodeList是一组DOMElement对象。

相关文档链接：

• DOMXPath::查询
• DOMNodeList 类
• DOMElement 类

Answer 2

对于爬行，我建议使用 php_query，下面是链接。 它为页面提供了类似 jquery 的选择器。 HTML 页面不是必需的正确 xml，除非它们是 XHTML。

https://code.google.com/p/phpquery/

Answer 3

正确答案是：

        $nodes = $xpath->query("//div[contains(concat(' ', normalize-space(@class), ' '), ' class')]");
        foreach($nodes as $full_name) {
            $class_full_content = trim($dom->saveHTML($full_name));
        }

Answer 4

使用 PHP 轻松完成。

$all_data = file_get_contents("link of the url");

现在使用：PHP 正则表达式、explode、implode 等来实现你想要的数据。