4 困惑とは何ですか? 見えないデータの対数平均された逆確率を指す用語「perplexity」に出会いました。困惑に関するウィキペディアの記事は、そのための直感的な意味を与えません。 この困惑度の尺度は、pLSAの論文で使用されました。 誰もが困惑度の必要性と直感的な意味を説明できますか? 42 measurement perplexity
2 n-gramモデルの複雑さと交差エントロピー クロスエントロピーと当惑の関係を理解しようとしています。一般に、モデルMの場合、Perplexity(M)= 2 ^ entropy(M)です。この関係は、すべての異なるNグラム、つまり、ユニグラム、バイグラムなどに当てはまりますか? 10 natural-language entropy perplexity