【问题标题】:Instances required for word2vec to learn new wordword2vec 学习新词所需的实例
【发布时间】:2022-01-03 01:52:09
【问题描述】:

我是 NLP 新手。我正在学习 word2vec 并试图了解它何时有用与否。在这种情况下,我试图弄清楚 word2vec 是否有助于在新词/用法的发展过程中查看它们? 我想知道预训练的 word2vec 模型需要多少个实例/样本(在上下文中)来学习一个新单词。 我已经看到了有关训练模型所需的总字数的信息,但找不到。 感谢您的建议。

【问题讨论】:

  • 请编辑问题以将其限制为具有足够详细信息的特定问题,以确定适当的答案。

标签: nlp word2vec


【解决方案1】:

大多数 word2vec 实现使用默认的 min_count 5 - 这意味着它们完全丢弃任何出现少于 5 次的单词,因为使用示例太少,而且太少,不值得尝试训练一个向量。

所以这是一个很好的,粗糙的地板。每一个额外的例子,在other适当频繁的词之间的各种实际用法中,都会有所帮助。 (简单地重复完全相同的文本并没有真正的帮助。)

对于对我的问题领域很重要的词,我想要几十个对比鲜明的用法示例。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2021-05-30
    • 1970-01-01
    • 2016-10-29
    • 2019-07-16
    • 1970-01-01
    • 1970-01-01
    • 2017-08-02
    • 2015-01-20
    相关资源
    最近更新 更多