【发布时间】:2011-07-10 18:23:25
【问题描述】:
我想写一个 PHP 脚本,给定一个 URL,复制整个网页,包括图像、脚本、样式表等。
解决这个问题的最佳方法是什么,是否有教程可以指导我完成它?
我有一些 PHP 经验,但它主要基于表单、CMS、cookie 和数据库。我该如何开始这项任务?
【问题讨论】:
标签: php web-scraping
我想写一个 PHP 脚本,给定一个 URL,复制整个网页,包括图像、脚本、样式表等。
解决这个问题的最佳方法是什么,是否有教程可以指导我完成它?
我有一些 PHP 经验,但它主要基于表单、CMS、cookie 和数据库。我该如何开始这项任务?
【问题讨论】:
标签: php web-scraping
您可以通过以下方式获取任何页面的内容:
$url = "http://www.thisistheurl.com/";
$retries = 5;
while($retries > 0)
{
$contents = @file_get_contents($url);
if (strpos($http_response_headers[0],"200")
{
$retries = 0;
}
else {
$retries--;
}
}
然后您将整个页面都放在变量内容中,您可以按原样显示它,也可以使用DOMDocument 解析它
【讨论】: