deeplearning4j：在线 Word2Vec 培训

Question

Word2vec 是一个很棒的工具，是 deeplearning4j。我设法为 tutorial 之后的语料库创建了一个向量。

现在的问题是如何用新句子更新模型，而不必从头开始重新构建它。

对此有一些想法，这种方法有帮助吗？

public void trainSentence(List<VocabWord> sentence){}

这会更新模型吗？如果是，如何准备要发送到该方法的句子？

Answer 1

是和不是。在文档here 中，它提到：

添加模型序列化/反序列化后权重更新。 也就是说，您可以使用 200GB 的新文本更新模型状态 调用loadFullModel，添加TokenizerFactory 和 SentenceIterator 给它，并在恢复的模型上调用 fit()。

这意味着可以使用新的语料库重新训练和更新模型权重。但不会在词汇表中添加新词。

检查代码和Javadoc here。