Term van de dag
Perplexity
Perplexity is een metriek die meet hoe goed een taalmodel in staat is om natuurlijke taal te voorspellen. Het geeft aan hoe verward het model is bij het maken van voorspellingen: lagere perplexity duidt op betere prestaties.
Perplexity wordt berekend uit de waarschijnlijkheid die het model aan de werkelijke gegevens toekent. Het is vooral nuttig voor het evalueren van taalmodellen en andere probabilistische modellen. Een perplexity van 1 betekent perfecte voorspelling, terwijl hogere waarden slechter prestatie aanduiden.
Voorbeeld: Stel een taalmodel wordt getest op een testset tekstfragmenten. Als het model gemiddeld een lage waarschijnlijkheid geeft aan werkelijke woorden, zal de perplexity hoog zijn (bijvoorbeeld 500). Dit suggereert dat het model slecht voorspelt. Een beter model zou dezelfde woorden hoger waarschijnlijkheid geven, wat resulteert in lagere perplexity (bijvoorbeeld 50).
Term van de dag archief
Alle AI-termen op één plek. Blader door het volledige archief, gesorteerd op alfabet.