想通过 htaccess 将 url 添加到 robots.txt答案

【问题标题】：wanting to add urls to robots.txt via htaccess想通过 htaccess 将 url 添加到 robots.txt
【发布时间】：2014-10-15 13:51:26
【问题描述】：

我有一个 WP 网站，目前正在通过插件通过 .htaccess 重定向多个链接，并希望通过同一个 htaccess 文件将原始重定向链接添加到 robots.txt。

这是 htaccess 中的示例重定向

重定向 /probing-pre-attack-1/ /send-somwhere/
重定向 /probing-pre-attack-2/ /send-somwhere/
重定向 /probing-pre-attack-3/ /send-somwhere/

这是我希望输入到 WP robots.txt

用户代理：*
禁止：/probing-pre-attack-1/
禁止：/probing-pre-attack-2/
禁止：/probing-pre-attack-3/

【问题讨论】：

【解决方案1】：

我认为您应该使用 WP 插件来执行此操作：https://wordpress.org/plugins/kb-robotstxt/

[编辑]

我认为您不希望任何人使用文件夹 /probing-pre-attack-1/ 等，也不希望搜索引擎。你可以用密码保护这些文件夹。更多相关信息：http://www.htaccesstools.com/articles/password-protection/

此处显示了另一个解决方案：PHP append and prepend in htaccess，您可以在其中将文件附加到另一个文件。我想这就是你要找的东西！

【讨论】：