【发布时间】：2013-10-09 18:07:21
【问题描述】：
常规搜索引擎，如 google、yahoo 和 msn 等。我也制作软件搜索引擎。首先它获取站点的所有页面，然后获取所需的数据。这也可以在洪流站点或其他地方工作。对于我的搜索引擎，种子链接必须出现在必须被抓取的网站的任何位置。
【问题讨论】：
标签： search-engine web-crawler bittorrent
【发布时间】：2013-10-09 18:07:21
【问题描述】：
这适用于大多数公共网站。但私人网站没有机器人访问权限。你可以在 google 上找到很多 torrent 搜索引擎的例子
【讨论】：