PHP获取网页内容

Question

因此，我正在使用PHP Simple HTML DOM解析器来获取网页的内容。 在我知道自己所做的事情是对的之后，我仍然得到一个错误，那就是找不到任何东西。

因此，这就是我用来查看是否确实有任何东西被捕获的原因：

<?php
include_once('simple_html_dom.php');

error_reporting(E_ALL);
ini_set('display_errors', '1');

$first_url = "http://www.transfermarkt.co.uk/en/chinese-super-league/startseite/wettbewerb_CSL.html"; // works

$html = file_get_html($first_url);
echo "<textarea>Output\n===========\n $html</textarea><br /><br />";

$second_url = "http://www.transfermarkt.co.uk/en/chinese-super-league/torschuetzen/wettbewerb_CSL.html"; // does not work?

$html = file_get_html($second_url);
echo "<textarea>Output\n===========\n $html</textarea><br />";
?>

没有错误。 在第二个文本区域中没有任何内容。 第二个URL似乎并没有被工具刮掉……为什么？

Answer 1

simple_php_dom.php包含：

define('MAX_FILE_SIZE', 600000);
...
if (empty($contents) || strlen($contents) > MAX_FILE_SIZE)
{
    return false;
}

第二页超过672000字节，因此此大小检查失败。 增加该常数，您应该可以。

Answer 2

我测试了您的问题，一切正常。 您必须检查php内存限制，可能是问题所在

增加您的PHP内存限制，然后重试

<?php 

//use this to increase memory limit
ini_set('memory_limit', '200M');

$second_url = "http://www.transfermarkt.co.uk/en/chinese-super-league/torschuetzen/wettbewerb_CSL.html"; // does not work?

$html = file_get_contents($second_url);
echo "<textarea>Output\n===========\n $html</textarea><br />";