Compréhension massive et multitâche des langues

Définition

La XXXXXX désigne un type de test de performances utilisé pour évaluer les grands modèles de langues en mesurant les connaissances acquises lors du préentraînement.

Voir aussi grand modèle de langues

Français

XXXXXX

Anglais

Massive Multitask Language Understanding

MMLU

Massive multitask language understanding is a type of benchmark that measures knowledge acquired during pretraining and it is used for evaluating capabilities of large language models.

Sources

Source : Wikipédia

Source : Paperwithcode