【发布时间】:2019-06-13 04:47:51
【问题描述】:
默认 robots.txt 文件禁用搜索引擎索引?我不能用我自己的来代替它。我错过了什么?
这是默认的和固定的:
User-agent: *
Disallow: /
【问题讨论】:
标签: surge.sh
默认 robots.txt 文件禁用搜索引擎索引?我不能用我自己的来代替它。我错过了什么?
这是默认的和固定的:
User-agent: *
Disallow: /
【问题讨论】:
标签: surge.sh
根据 slack 的说法,*.surge.sh 子域上的 robots.txt 文件已被锁定,以防止链接农场……可悲。
【讨论】: