Compréhension massive et multitâche des langues

Définition

La compréhension massive et multitâche des langues désigne un type de test de performances utilisé pour évaluer les grands modèles de langues en mesurant les connaissances acquises lors du préentraînement.

Voir aussi grand modèle de langues

Français

compréhension massive et multitâche des langues

Anglais

massive multitask language understanding

MMLU

Massive multitask language understanding is a type of benchmark that measures knowledge acquired during pretraining and it is used for evaluating capabilities of large language models.

Sources

Source : Wikipédia

Source : Paper with code