¿Que es perplexity?
En el contexto de la IA, perplexity es una métrica que mide qué tan bien un modelo de lenguaje predice una muestra de datos. Cuanto menor sea la perplexity, mejor será la capacidad del modelo para predecir el próximo elemento en una secuencia.
¿Como funciona perplexity?
La perplexity evalúa la efectividad de un modelo de lenguaje al medir la probabilidad que asigna a una secuencia de palabras. Un modelo con baja perplexity se considera más preciso porque hace predicciones más cercanas a la realidad.