【问题标题】:how to completely Hide website from search engines?如何从搜索引擎中完全隐藏网站?
【发布时间】:2011-01-19 04:48:53
【问题描述】:

从搜索引擎中隐藏我的登台网站的最佳推荐方法是什么,我用谷歌搜索了它,发现有人说我应该放一个元标记,有些人说我应该在我的网站目录中放一个文本文件,我想知道标准方式。

我当前的网站是在 asp.net 中,而我相信它必须是任何网站的通用方式,无论其编程语言如何。

【问题讨论】:

  • 您无法对搜索引擎真正隐藏您的网站(除非阻止其 IP 范围)。但您可以建议搜索引擎不要使用robots.txt 为您的网站编制索引。

标签: asp.net web seo search-engine


【解决方案1】:

从搜索引擎中隐藏我的临时网站的最佳推荐方法是什么

简单:不要公开。如果这不起作用,那么只需将其公开足够长的时间以验证它已准备好实时发布,然后将其删除。

然而,话虽如此,一个更基本的问题是,“为什么要关心?”。如果登台站点在推送直播之前确实应该是直播站点,那么它是否被索引应该无关紧要。

【讨论】:

    【解决方案2】:

    请记住,您不能向搜索引擎隐藏面向公众的不受保护的网站。你可以要求机器人不要索引它(通过我的好同事提出的 robots.txt),编写机器人的人可能会选择不根据这个索引你的网站,但至少要有一个人谁在索引人们要求他不要索引的所有东西。至少一个。

    如果这是一个很大的要求,将自动爬虫排除在外,那么某种 CAPCHA 解决方案可能对您有用。

    【讨论】:

      【解决方案3】:

      非常简单的答案;密码保护它。如果它是一个临时站点,那么它很可能不打算面向公众(最有可能只面向私人观众)。当真正的问题是您没有适当地保护它时,试图将其排除在搜索引擎之外只是治标不治本。

      【讨论】:

        【解决方案4】:

        有些搜索引擎/书签服务不使用 robots.txt。如果您真的不希望它出现,我建议您使用验证码来导航到该网站。

        【讨论】:

        • 祝您好运。
        • 只是出于好奇,您指的是哪些特定的搜索引擎/书签服务?
        • @Grawity - 他不想进入搜索引擎,因此我认为他不是在寻找主流人群。 @NinjaBomb - 美味,一组 p2p 搜索引擎,让人们在互联网上自动索引网站,而不是 google 、 yahoo 等。
        【解决方案5】:

        使用 robots.txt 文件。

        看这里http://www.robotstxt.org/robotstxt.html

        【讨论】:

          【解决方案6】:

          您也可以使用您的服务器 robots.txt:

          User-agent: *
          Disallow: /
          

          Google 的抓取工具实际上尊重这些设置。

          【讨论】:

            【解决方案7】:
            猜你喜欢
            • 1970-01-01
            • 1970-01-01
            • 2011-10-07
            • 2012-08-18
            • 2014-10-23
            • 2014-10-12
            • 2014-09-20
            • 1970-01-01
            • 2016-10-27
            相关资源
            最近更新 更多