我正在开发一个每天访问量为 15,000 次的网站，我们为此聘请了广告，其中一些很重要（它们是针对银行的），这些广告的内容永远不会改变，但在某个时候他们宣布他们需要一些内容重复的人（工作和要求永远不会改变：|）。现在我们需要告诉 Googlebot 重新抓取这些 URL，因此我们用不同的文字更新了目标页面的内容，但 Googlebot 并没有按照需要快速抓取它们。使用 Fetch as Google 是一种观点，但有很多广告，我们需要一种自动的方式来做到这一点。你有什么建议？
【问题讨论】：
标签： seo web-crawler googlebot
很遗憾，您想要实现此目的的方式是不可能的，因为 Google 会根据页面的受欢迎程度、反向链接的数量以及它认为您的页面对其用户的价值来决定重新抓取页面的频率。如果您不想将 fetch 用作 Google，则不能强制 Google 重新抓取页面。
但是，有一个解决方法。使用新 URL（例如，包含最近的日期，但路径相同）创建包含新内容的新页面，并使用 301 将旧页面重定向到该页面，或将旧页面的规范链接设置为新页面。这肯定会加速新页面的索引，同时很快删除旧页面。它会将大部分 PR 汁从旧页面传递到新页面。确保新页面也添加到您的sitemap.xml。
这将自动实现您想要的（几乎）。
【讨论】：
尽量避免自动化和临时提交链接。构建一个干净的 xml 站点地图。 xml 文件告诉搜索引擎您的站点地图可能包含动态和频繁更改以及健康的 URL 列表。这意味着，如果您的站点地图使用格式良好的 XML 代码，提供干净、有效的 URL，并满足搜索引擎的其他要求，那么它包含的 URL 将至少会被搜索记录下来未来爬行活动的引擎。耐心有回报....
健康的 xml 站点地图可帮助对其内容页面使用动态 URL 的网站以及存档内容未很好地链接到其当前活动页面的网站。此外，xml 站点地图还可以帮助具有难以发现的页面的站点，这些页面使用难以抓取的链接（例如脚本中的链接）或包含大量非文本内容的站点，例如 Flash 或 Silverlight。
网上有很多解决方案可以帮助生成 XML 站点地图。万事如意！
【讨论】：
提交站点地图时，您可以指定内容更改的频率。它不能保证它会经常抓取，但它会让 Google 知道它需要抓取的频率。
【讨论】：