【发布时间】:2011-11-17 20:33:32
【问题描述】:
如何在 Google App Engine 网站上阻止搜索引擎机器人?是否有管理/配置程序,或者您应该使用普通的 robots.txt 文件 - 如果是后者,您如何让 GAE 从根目录传递静态文件?
【问题讨论】:
标签: google-app-engine web-crawler robots.txt
如何在 Google App Engine 网站上阻止搜索引擎机器人?是否有管理/配置程序,或者您应该使用普通的 robots.txt 文件 - 如果是后者,您如何让 GAE 从根目录传递静态文件?
【问题讨论】:
标签: google-app-engine web-crawler robots.txt
【讨论】: