【问题标题】:How to request Google to re-crawl my website? [closed]如何请求 Google 重新抓取我的网站? [关闭]
【发布时间】:2012-03-17 00:07:24
【问题描述】:

有人知道请求 Google 重新抓取网站的方法吗?如果可能的话,这不应该持续几个月。我的网站在 Google 的搜索结果中显示了旧标题。如何使用正确的标题和描述显示它?

【问题讨论】:

  • @Ωmega - 您是在询问一长串单独的域,还是一长串同一域上的 URL?如果是同一个域,我将编辑我的答案以提供更多信息。
  • @Ωmega - 是的,使用该工具的子域在某些方面令人沮丧,但我可以理解他们为什么这样做。在这种情况下,我很确定没有一种既简单又快速重新抓取链接的方法。剩下的就是:快速(ish)重新抓取 = 使用 google.com/addurl 并回答所有验证码,或者简单 = 等到谷歌重新抓取它自己的意愿。根据您所有链接上的内容定期更新的频率,如果您只是等待,可能会很长时间,尽管这显然不是一个理想的解决方案。抱歉,我无法提供更多帮助。
  • @kevinmicke - 谢谢。

标签: seo web-crawler


【解决方案1】:

有两种选择。第一个(也是更好的)一个是在Mike Flynn 评论过的网站管理员工具中使用 Fetch as Google 选项。以下是详细说明:

  1. 转到:https://www.google.com/webmasters/tools/ 并登录
  2. 如果尚未添加,请使用“添加站点”按钮添加并验证站点
  3. 点击您要管理的站点名称
  4. 点击抓取 -> 以 Google 方式获取
  5. 可选:如果您只想创建特定页面,请输入 URL
  6. 点击获取
  7. 点击提交到索引
  8. 选择“URL”或“URL 及其直接链接”
  9. 单击“确定”即可完成。

使用上述选项,只要可以从初始页面上的某个链接或它链接到的页面访问每个页面,Google 就应该重新抓取整个页面。如果您想明确告诉它要在域上抓取的页面列表,您可以按照submit a sitemap 的指示进行操作。

正如seanbreeden 指出的那样,您的第二个(通常更慢)选项是在此处提交:http://www.google.com/addurl/

2019 年更新:

  1. 登录-Google Search Console
  2. 添加站点并使用可用方法对其进行验证。
  3. 从控制台验证后,单击 URL 检查。
  4. 在顶部的搜索栏中,输入您的网站 URL 或自定义 URL 以供检查并输入。
  5. 检查后,会显示请求索引选项
  6. 点击它,GoogleBot 会将您的网站添加到抓取队列中。

【讨论】:

  • 太棒了!这将近乎实时地重新索引您的网站!该死的,谷歌,我印象深刻!
  • 比接受的答案更好的答案。
  • @KristianB,现在不行:D。它被接受了。
  • @kevinmicke:重新抓取的周转时间是多少?我在 6 天前听从了您的建议,但没有任何内容被编入索引。谢谢。
  • 这个答案过时了吗?再也找不到了
【解决方案2】:

如今,网站的重新访问很大程度上取决于其受欢迎程度、权威性以及其内容更改的频率。拥有一个包含所有 URL 的 sitemap.xml 总是更好。您还可以设置每个 URL 条目的lastmod 标记。如果你不滥用它,爬虫会考虑到它。

【讨论】:

    【解决方案3】:

    据我所知,如果您重新提交站点地图,它将触发和抓取您的站点。

    【讨论】:

    • 我不确定。我认为,它错了......
    • 如果您手动提交站点地图,Google 将重新索引所有页面。我总是在对网页进行重大更改后执行此操作,并且它有效。 (大约 6 个月前,我最后一次这样做了。)
    • 但是它不会重新索引它之前索引过的类似页面
    • 是的,索引会随着时间而改变。 +1 获取有关 Google 抓取工具的新信息。
    【解决方案4】:

    Google 说它是unable to control when your site is re-crawled。无论如何,您也可以在“forcing rewcrawls”上查看此帖子,我自己还没有尝试过,但是如果您绝望的话,值得一试。

    另外,我可能会补充一点,您要确保有一个 sitemap.xml,因为这也有助于 SEO。

    【讨论】:

    【解决方案5】:

    通常的方法是在您的 Google 网站管理员工具中重新提交您的网站或在此处提交:http://www.google.com/addurl/

    【讨论】:

    • 网站管理员工具中没有任何内容可以重新抓取网站(2012 年 7 月检查)。
    • 没错,您不能“让”Google 做任何事情,但您可以在 Google 网站管理员工具中转到 Optimization -> Sitemaps 并重新提交您的站点地图。
    • Google 网站管理员有一个新选项可以“以 Google 方式获取”以重新索引网站。
    • @MikeFlynn:这个新选项适用于单个页面,但不适用于整个站点(除非您逐页输入每个页面)
    • @moose 现在有了“抓取 URL 和直接链接页面”的选项,总比没有好。
    猜你喜欢
    • 2014-04-01
    • 1970-01-01
    • 1970-01-01
    • 2012-01-31
    • 1970-01-01
    • 1970-01-01
    • 2014-11-24
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多