每天访问网页的机器人或蜘蛛的平均数量是多少？

Question

我试图粗略估计我的网页浏览量中有多少来自漫游器。机器人和搜索蜘蛛占平均 SEO 网页的页面浏览量的典型值是多少？

Answer 1

没有简单的答案，因为漫游器的数量实际上取决于您网站的曝光程度。 Google 会根据链接到您的网页的数量来进行抓取，越多越好。

对于一个合理可见的网站，我希望有 10 到 15 个爬虫，每个爬虫每月一次，最多每周一次。