ROUGE
Définition
ROUGE est l'acronyme de « Recall-Oriented Understudy for Gisting Evaluation » ; il s'agit d'un ensemble de mesures et d'un progiciel utilisés pour évaluer les logiciels de synthèse automatique et de traduction automatique dans le domaine du traitement automatique de la langue naturelle.
Dans le cadre d'une tâche de synthèse, la reprise des idées principales et la précision (recall) sont plus importantes que d'obtenir une formulation exacte, ainsi ROUGE est calculé en comptant le nombre de mots ou de n-grammes qui se recoupent.
Voir aussi BLEU
Compléments
- ROUGE peut être calculé à l'aide de bibliothèque (library) SacreBLEU.
- En raison des points faibles de ROUGE, ROUGE 2.0 à été proposé en 2018.
- Même s'il s'agit d'un ensemble de métriques, on retrouve souvent la mention ROUGE score dans les textes.
Français
ROUGE
Anglais
ROUGE
Recall-Oriented Understudy for Gisting Evaluation
ROUGE stands for "Recall-Oriented Understudy for Gisting Evaluation" and it is a set of metrics and a software package used for evaluating automatic summarization and machine translation software in natural language processing. It is computed by counting the number of overlapping words or n-grams since capturing key ideas and recall is more important than exact wording for the summarization task.
Sources
Contributeurs: Arianne Arel, wiki
