ゼロからわかるパープレキシティ:モデルは次のトークンをどう予測するか

「我爱茶」の次トークン確率を例に、パープレキシティの計算とプロンプト圧縮での役割・限界を解説。