我一直在尝试创建一个新的谷歌自定义搜索引擎，但是当我尝试一些查询时，搜索引擎没有给我预期的搜索 结果。在某些查询上它工作正常，但在其他查询上，它说“没有结果”。
我尝试添加我想要搜索的网站的 URL，但是当我尝试搜索该页面的关键字时，搜索结果中没有出现某些页面和关键字。 我厌倦了添加主页 URL 和要搜索的子页面的 URL，但没有任何效果。 主 URL 的一些子页面会出现在搜索结果中。
【问题讨论】：
标签： search search-engine
这也发生在我身上。这是因为您指定给 google 的 url 必须与存储您网站的服务器地址相匹配。例如，我使用 google 自定义搜索 (mainstreetbd.com) 创建了一个站点，当我在我的服务器上对其进行测试时，google 搜索没有返回任何结果。但是当我在指定的 url 上做时，它工作正常。
【讨论】：
一些网页指示搜索引擎如何在一个名为 robots.txt 的文件中索引他们的网页。
例如： https://stackoverflow.com/robots.txt
（如果一个站点有一个，它应该在http://URL/robots.txt 下直接在域名之后）
如果您尝试搜索的网站的 robots.txt 将其网站的某些部分排除在索引之外，这可能是问题的根源。
【讨论】：