【问题标题】:Overal Coherence in Gensim and MalletGensim 和 Mallet 的整体一致性
【发布时间】:2021-05-22 19:02:26
【问题描述】:

我想知道如何测量 gensim (https://radimrehurek.com/gensim/models/coherencemodel.html) 中每组主题的 u_mass'、'c_v'、'c_uci'、'c_npmi' 的整体一致性?

是否基于连贯性值的平均值:(连贯性主题 1 + 连贯性主题 2 + .... + 连贯性主题 n)/n ?

例如,如果我们有 5 个主题,则整体连贯性为(连贯性主题 1 + 连贯性主题 2 + 连贯性主题 3 + 连贯性主题 4 + 连贯性主题 5)除以 5

【问题讨论】:

    标签: gensim lda topic-modeling mallet


    【解决方案1】:

    通常,模型的整体连贯性是主题的平均连贯性(这意味着您的五个主题的示例是正确的)。 C_vC_uciC_npmiC_u_mass 都是略有不同的一致性指标,均基于逐点互信息。

    有一篇很好的调查论文详细介绍了上述所有一致性指标,可以在 here 找到。

    【讨论】:

      猜你喜欢
      • 2021-10-05
      • 1970-01-01
      • 1970-01-01
      • 2012-05-22
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2019-08-12
      • 1970-01-01
      相关资源
      最近更新 更多