Yapay ZekâÇekirdekAIML-LM-018

Perplexity

The standard intrinsic measure of a language model: exponentiated average negative log-likelihood per token.

Bu konunun henüz Türkçe çevirisi yok, bu yüzden İngilizce gösteriliyor.

Zorluk
2 / 5
Önem
5 / 5
Çalışma süresi
1–2 sa
Çalışma türü
Karma

Neden önemli

The learner can compute perplexity from per-token probabilities and explain why it depends on the tokenizer.

Bu konuya giden rota

Rota AIML-LM-018