如何让 msnbot 不会落入我的机器人陷阱？

Question

是否有其他方法告诉 Bing 不要抓取/传递/点击/输入某个链接，例如 google 的 rel=nofollow？

msnbot/2.​​0b 一直被困在我的机器人陷阱中。它不遵守锚标签 rel="nofollow"。

限制：

• 我无法添加到 robots.txt 的链接，因为该链接是动态参数键，即 anypage.php?xirh398。每个会话的密钥都是唯一的，并且每 5 分钟更改一次。
• 我不能使用元标记，因为陷阱不是页面。
• 我不能使用 HTTP 标头，因为那时机器人已经被禁止了。
• 我不想不断更新白名单。

Answer 1

它不遵守锚标签 rel="nofollow"。

nofollow 表示“不要在搜索结果中重视此链接”。这并不意味着“这不是一个真正的链接，不要关注它”。 （是的，这是不直观的）。

如果您希望 Good Bots 远离您网站的一部分，请use a robots.txt 告诉他们。