【问题标题】:Full Text Search Finding Word Only Occasionally全文搜索偶尔只找到单词
【发布时间】:2014-10-06 22:23:12
【问题描述】:

我有一个带有全文索引的表格。此查询返回 2 个结果:

SELECT *
FROM SampleTable
WHERE ContentForSearch LIKE '% mount %'
ORDER BY 1

此查询返回 1 个结果:

SELECT *
FROM SampleTable
WHERE CONTAINS(ContentForSearch, '"mount"')
ORDER BY 1

将单词“mount”的新实例添加到表中确实会显示在搜索中。为什么?

我已经尽我所能检查了停用词列表。这不返回任何结果:

SELECT *
FROM sys.fulltext_stoplists

这不会返回任何结果:

SELECT *
FROM sys.fulltext_system_stopwords
WHERE stopword like '%mount%'

我还检查了索引是否是最新的,它返回了当前时间(减去几分钟)和一个 0,表示空闲:

SELECT DATEADD(ss, FULLTEXTCATALOGPROPERTY('SampleTableCatalog','PopulateCompletionAge'), '1/1/1990') AS LastPopulated,
    FULLTEXTCATALOGPROPERTY('SampleTableCatalog','PopulateStatus')

我还在 CONTAINS 结果中未显示的字符串中进行了一些搜索,以查看 ASCII 值是否奇怪(如果需要,可以提供查询),但它们与显示的完全相同起来。

在一个数据库副本上,有人跑了:

ALTER FULLTEXT INDEX ON SampleTable SET STOPLIST = OFF;
ALTER FULLTEXT INDEX ON SampleTable SET STOPLIST = SYSTEM;

这似乎解决了问题,但我不知道为什么,而且我对做出我不理解的更改感到不舒服。

更新 Stoleg 的 cmets 最终让我找到了解决方案。全文索引在某个数据库服务器上以某种方式关闭。当该数据库随后恢复到另一台服务器时,即使新服务器正确更新了索引,那些在第一台服务器上没有被索引的条目仍然没有被索引。我通过使用 Stoleg 的查询来检查索引中缺少哪些行,然后检查这些行的修改日期(幸运的是,这些行已存储)来发现这一点。我注意到数据库在另一台服务器上的日期中的行不在索引中的模式。问题服务器上的解决方案是打开全文索引并重建目录。至于索引是如何关闭的,我自己也不明白。 DBA 对他如何解决问题的评论是“我将全文搜索作为资源添加到集群节点。”

【问题讨论】:

  • 您可能会查看所有注册为分词器的内容,以及可能的过滤器。 msdn.microsoft.com/en-us/library/dd207002.aspx 我不确定这些与重置停止列表如何修复它有什么关系。
  • 当您对示例表运行此查询时,是否有任何 LUCode 和 RUCode 不是 32 的结果? SELECT m.StringMatch , LEFT(m.StringMatch, 1) as L1 , UNICODE(LEFT(m.StringMatch, 1)) AS LUCode , right(m.StringMatch, 1) as R1 , UNICODE(right(m.StringMatch, 1)) AS RUCode FROM SampleTable st CROSS APPLY (SELECT substring(ContentForSearch, charindex(' mount ', ContentForSearch), 7) AS StringMatch) as m WHERE st.ContentForSearch LIKE '% mount %' ;
  • 什么是列数据类型?搜索词应为NVARCHAR。试试CONTAINS(ContentForSearch, N'"mount"')。 “珠穆朗玛峰……”中的第一个角色真的有空格吗? Db 排序规则是什么?
  • 试试这个检查“mount”是否进入索引:select * from sys.dm_fts_index_keywords_by_document ( DB_ID('database_name'), OBJECT_ID('table_name') )
  • 第二次没有进入索引应该是有原因的。我可以请您 drop 并重新创建索引吗?您也可以发布上面查询的输出(有用的位)。

标签: sql sql-server full-text-search


【解决方案1】:

这是因为 '% mount %' 中有多余的空格 试试:

SELECT * FROM SampleTable WHERE ContentForSearch LIKE '%mount%' ORDER BY 1

【讨论】:

  • 这并不能解释为什么 contains 没有得到这些结果。去掉空格只会显示更多与山等词无关的结果。
【解决方案2】:

更改与索引关联的全文非索引字表(如果有)。

关闭
指定没有停止列表与全文索引相关联。

系统
指定该全文索引应使用默认的全文系统 STOPLIST。

停止列表名称
指定要与全文索引关联的非索引字表的名称。

有关详细信息,请参阅为全文搜索配置和管理停用词和停用列表。

这刚刚删除并将停止列表重置为系统默认值。

【讨论】:

    【解决方案3】:

    嗯,显而易见的问题是:'mount' 在你的停止列表中吗?

    Microsoft Configure and Manage Stopwords and Stoplists for Full-Text Search 向您展示如何查询和更新停用词。

    您可能还想查看来自 Microsoft 的 general info on stoplist。

    添加

    不要认为是侮辱(不是你听起来受到侮辱)。太多次,人们说他们只是认为他们检查了一些东西——查看了错误的数据库等。所以希望你确定一下。我有时将您解释为与 like 一起使用,而不是与 contains 一起使用,所以我认为它实际上更有可能是停止列表。

    唯一的其他“明显”解决方案是重建全文索引 - 认为更改停止列表对其他数据库有相同的影响。我想您也可以先重新启动服务器。但是,作为另一种神秘的解决方案,并不是首选。

    【讨论】:

    • 正如我在问题中所说,我已经检查了停止列表并且没有看到“mount”。此外,如果它在停止列表中,它似乎永远找不到“mount”这个词,但它有时会找到它。
    猜你喜欢
    • 1970-01-01
    • 2012-01-10
    • 2017-06-09
    • 1970-01-01
    • 1970-01-01
    • 2023-03-17
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多