如何将新文档添加到 mallet 中的现有主题模型或批量处理大文档数量的模型答案

【问题标题】：How to add new documents to existing topic model in mallet or batch the model for large document counts如何将新文档添加到 mallet 中的现有主题模型或批量处理大文档数量的模型
【发布时间】：2014-12-25 00:02:34
【问题描述】：

我想使用主题建模，发现 MALLET 适合我。
我使用大约 10 万个文档成功创建了我的第一个演示。现在根据我的要求，我必须处理 1000 万个无法进一步处理的文档。是否可以将新文档添加到现有主题模型或类似创建两个模型并合并为单个模型并通过合并所有模型来获取输出，因为 mallet 无法一次性处理如此大的文档，因此我正在考虑批量处理模型并通过合并所有文档来获取输出
例如，我将制作 100 批 10 万份文档并在每批上运行 mallet，最后通过合并所有 100 批获得结果

谢谢

【问题讨论】：

标签： lda mallet

【解决方案1】：

我认为 Mallet 不可能。我不认为一旦创建了模型，就可以逐步将新文档添加到经过训练的模型中并对其进行重新训练。

我会等待有人支持或反驳我的回答。

【讨论】：