【发布时间】:2017-12-05 23:45:03
【问题描述】:
在 Tensorflow 中,我得到的输出是 0.602129 或 0.663941。看起来更接近 0 的值意味着更好的模型,但似乎困惑度应该被计算为 2^loss,这意味着损失是负数。这没有任何意义。
【问题讨论】:
标签: python tensorflow language-model sequence-to-sequence perplexity
在 Tensorflow 中,我得到的输出是 0.602129 或 0.663941。看起来更接近 0 的值意味着更好的模型,但似乎困惑度应该被计算为 2^loss,这意味着损失是负数。这没有任何意义。
【问题讨论】:
标签: python tensorflow language-model sequence-to-sequence perplexity
这对我来说没有多大意义。困惑度计算为2^entropy。熵是从 0 到 1。所以你的结果
我建议你看看你的模型是如何计算困惑度的,因为我怀疑可能有错误。
【讨论】: