La evaluación con autorater es un proceso de evaluación automatizado en el que un modelo o sistema de puntuación juzga la calidad de las salidas de un modelo. Los autoraters pueden ser preconstruidos o ajustados para una tarea de evaluación específica, y su fiabilidad depende de la calidad de sus criterios, datos de entrenamiento y validación frente a juicios humanos.