Les métriques automatiques sont des mesures calculées par du code pour évaluer des sorties : exactitude, correspondance exacte, validité du format, rappel, précision. Rapides et reproductibles, elles conviennent aux sorties vérifiables, mais mesurent mal la qualité d'un texte libre.
Exemple
exactitude = bonnes réponses / total des réponses