是否为 LUIS-bot-app 推荐了任何文本预处理？

Question

是否建议对“训练话语”和“最终用户输入话语”执行以下文本预处理任务？

1. 替换为“根”同义词。例如。用“根”同义词regular替换词普通/典型。这类似于 LUIS 短语列表，但我可以定义自己应用的内部列表，不限于 10 个短语列表。
2. 词干：将变形（或有时派生）的词减少到它们的词根形式。例如，单词“connect”、“connects”、“connected”、“connection”、“connecting”将映射到“connect”。

...我是否错过了任何其他文本预处理任务？

Answer 1

根据我在 LUIS 方面的经验，我不建议进行文本预处理。 LUIS 正在使用使用 POS 标记的分类方法。词干或替换词根可能会改变句子的含义。最好的方法是继续使用原始用户创建的内容。