【发布时间】：2015-07-06 07:27:17
【问题描述】：
我有一个 asp.net mvc5 应用程序。我想防止搜索引擎在 .net mvc 中抓取我的网站。
使用以下代码在我的项目中创建 robots.txt 是否足够（猜它不应该在我的解决方案中）？
User-agent: *
Disallow: /
文件结构
Solution
--Nuget
--CompanyProject
----Controllers
----Models
----Views
【问题讨论】：
-
您想阻止搜索引擎爬虫对您的网站进行 SEO？
-
纯粹出于好奇，你为什么想要这样的东西？
-
我不希望搜索引擎找到该站点。该网站是特定公司的，他们有网址并登录到该网站。
-
如果是私人网站，搜索引擎无论如何也找不到该网站。如果没有指向该网站的公共链接，它将保持隐藏状态。
标签： .net asp.net-mvc robots.txt asp.net-mvc-5.1