使用 XPath 远程抓取页面并获取图像的最相关标题或描述

Question

我正在做的事情基本上与 Tweet 按钮或 Facebook Share/Like 按钮所做的事情相同，那就是抓取一个页面和最相关的标题以获取一段数据。我能想到的最好的例子是当你在一个有很多文章的网站的首页上，然后你点击了 Facebook 的 Like 按钮。然后，它将获取与（最近的）Like 按钮相关的帖子的正确信息。有些网站有 Open Graph 标签，但有些没有，它仍然有效。

由于这是远程完成的，我只能控制我想要定位的数据。在这种情况下，数据是图像。我不是只检索页面的<title>，而是希望以某种方式从每个图像的起点反向遍历dom，并找到最近的“标题”。问题是并非所有标题都出现在图像之前。但是，在这种情况下，图像出现在标题之后的机会似乎相当高。话虽如此，我希望它能在几乎所有网站上正常运行。

想法：

• 找到图像的“容器”，然后使用第一块文本。
• 在包含特定类（“description”、“title”）或元素（h1、h2、h3、h4）的元素中查找文本块。

标题备份：

• 使用开放图标签
• 仅使用<title>
• 仅使用 ALT 标记
• 使用 META 标签

总结：提取图像不是问题，关键是如何为它们获取相关标题。

问题：您将如何为每张图片获取相关标题？也许使用 DomDocument 或 XPath？

Answer 1

您的方法似乎已经足够好了，我只会给某些标签/属性一个权重，并使用 XPath 查询循环遍历它们，直到我找到退出的东西并且它不是无效的。比如：

i = 0

while (//img[i][@src])
  if (//img[i][@alt])
    return alt
  else if (//img[i][@description])
    return description
  else if (//img[i]/../p[0])
    return p
  else
    return (//title)

  i++

---

一个简单的 XPath 示例（函数ported from my framework）：

function ph_DOM($html, $xpath = null)
{
    if (is_object($html) === true)
    {
        if (isset($xpath) === true)
        {
            $html = $html->xpath($xpath);
        }

        return $html;
    }

    else if (is_string($html) === true)
    {
        $dom = new DOMDocument();

        if (libxml_use_internal_errors(true) === true)
        {
            libxml_clear_errors();
        }

        if ($dom->loadHTML(ph()->Text->Unicode->mb_html_entities($html)) === true)
        {
            return ph_DOM(simplexml_import_dom($dom), $xpath);
        }
    }

    return false;
}

以及实际用法：

$html = file_get_contents('http://en.wikipedia.org/wiki/Photography');

print_r(ph_DOM($html, '//img')); // gets all images
print_r(ph_DOM($html, '//img[@src]')); // gets all images that have a src
print_r(ph_DOM($html, '//img[@src]/..')); // gets all images that have a src and their parent element
print_r(ph_DOM($html, '//img[@src]/../..')); // and so on...
print_r(ph_DOM($html, '//title')); // get the title of the page