【问题标题】:Common words that cause topic overlap in gensim LDAgensim LDA中导致主题重叠的常用词
【发布时间】:2020-08-03 19:58:34
【问题描述】:

当我们使用 pyLDAvis 可视化 LDA 时,我们可以看到主题重叠。我想知道导致这个话题重叠的词。或者我想知道主题气泡交叉处的单词。任何指导表示赞赏。

【问题讨论】:

  • 通过“看到主题重叠”,你的意思是主题的投影有一个交集,例如这张图片中的主题 2 和 5? miro.medium.com/max/4832/1*k0svin9aq0ObRnHZgg6mFQ.png
  • 是的,没错。

标签: python-3.x gensim lda topic-modeling pyldavis


【解决方案1】:
  1. 选择主题2
  2. 从右边复制一个单词列表(带有横杠的单词)
  3. 选择主题 5
  4. 按照 2 复制列表。
  5. 自行比较复制的列表。

我不确定那里有更好的方法......

【讨论】:

  • 不使用界面(和复制/粘贴)你也可以想象对主题词分布做同样的事情。比较每个主题的前 100 个单词...
  • 前100个词不可能没有重叠...
  • 取决于训练参数,但我认为如果主题重叠,前 100 个单词集之间应该有重叠。
猜你喜欢
  • 2019-03-31
  • 2017-02-19
  • 2015-06-27
  • 2017-08-08
  • 2014-11-06
  • 2020-12-25
  • 2013-06-23
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多