监控 LDA 模型的指标答案

【问题标题】：Metrics for monitoring LDA Model监控 LDA 模型的指标
【发布时间】：2022-12-04 09:10:52
【问题描述】：

我们在生产中使用 LDA 进行主题建模。我想知道是否有任何指标可用于监控该模型的质量，以了解模型何时开始表现不佳以及我们需要重新训练它（例如，如果我们有太多新主题）。

我们考虑计算在文档中找到的top-topic（文档中具有最高概率的主题）语料库中的单词数与文档中的一般单词数（经过所有处理后）的比率theshold，但可能有人可以分享他们的经验。

【问题讨论】：

【解决方案1】：

您可以计算其相干值并将其与前一个进行比较。请参阅Michael Roeder, Andreas Both and Alexander Hinneburg: “Exploring the space of topic coherence measures，如果您将 gensim 与 python 一起使用，请在 CoherenceModel 检查其实现。

【讨论】：