Core

Comprendre la perplexité depuis zéro : comment un modèle prédit le prochain token

Un exemple de prédiction du prochain token pour comprendre le calcul de la perplexité, son rôle et ses limites dans la compression des prompts.