使用curl獲取多個URL

Question

需要有關使用curl提取存儲在.txt文件中的多個URL的代碼示例和/或指南。 我是否需要使用Spider，還是可以修改下面的代碼以適合一個網址？

<?php
$c = curl_init('http://www.example.com/robots.txt');
curl_setopt($c, CURLOPT_RETURNTRANSFER, true);
$page = curl_exec($c);
curl_close($c);
?>

Answer 1

您的問題含糊不清，但我會嘗試用您提供的信息來回答。

我將使用explode（）PHP函數 。

$lines = explode(PHP_EOL, $page);

foreach($lines as $line) {
    $val = explode(':', $line);
    echo $val[1];
}

像這樣的事情應該做的。