« GPT » : différence entre les versions
Aucun résumé des modifications |
Aucun résumé des modifications |
||
Ligne 1 : | Ligne 1 : | ||
== Définition == | == Définition == | ||
Acronyme anglais de ''Generative Pre-Training'', GPT est un [[grand modèle de langues]] (GML) résultant | Acronyme anglais de ''Generative Pre-Training'', GPT est un [[grand modèle de langues]] (GML) résultant du pré-entraînement d'un [[Modèle de langue|modèle de langue]] au moyen d'un [[Réseau autoattentif|réseau de neurones autoattentif]] (en anglais, Transformer) sur un large corpus générique. Autrement dit, en français, GPT est un [[grand modèle de langues]] préentraîné génératif. | ||
== Compléments == | == Compléments == | ||
GPT (Generative Pre-Training) fut créé par une équipe d'OpenAI en juin 2018. À l'origine le modèle s'appelait ''Snuffleupagus''. Il s'ensuivit [[GPT-2]] en février 2019, [[GPT-3]] en mai 2020 et [[GPT-4]] en 2022. À noter, GPT devint l'acronyme de ''Generative Pre-trained Transformer''. C'est-à-dire en français, [[grand modèle de langues]] modèle | GPT (Generative Pre-Training) fut créé par une équipe d'OpenAI en juin 2018. À l'origine le modèle s'appelait ''Snuffleupagus''. Il s'ensuivit [[GPT-2]] en février 2019, [[GPT-3]] en mai 2020 et [[GPT-4]] en 2022. À noter, GPT devint l'acronyme de ''Generative Pre-trained Transformer''. C'est-à-dire en français, [[grand modèle de langues]] modèle autoattentif préentraîné génératif. | ||
== Français == | == Français == | ||
Ligne 12 : | Ligne 12 : | ||
'''GAP''' | '''GAP''' | ||
'''modèle | '''modèle autoattentif préentraîné génératif''' | ||
'''MGAP''' | '''MGAP''' | ||
'''grand modèle de langues | '''grand modèle de langues autoattentif préentraîné génératif''' | ||
''' | '''GMLAPG''' | ||
== Anglais == | == Anglais == | ||
Ligne 36 : | Ligne 36 : | ||
[[Catégorie:GRAND LEXIQUE FRANÇAIS]] | [[Catégorie:GRAND LEXIQUE FRANÇAIS]] | ||
[[Catégorie:publication]] |
Version du 11 juillet 2024 à 23:13
Définition
Acronyme anglais de Generative Pre-Training, GPT est un grand modèle de langues (GML) résultant du pré-entraînement d'un modèle de langue au moyen d'un réseau de neurones autoattentif (en anglais, Transformer) sur un large corpus générique. Autrement dit, en français, GPT est un grand modèle de langues préentraîné génératif.
Compléments
GPT (Generative Pre-Training) fut créé par une équipe d'OpenAI en juin 2018. À l'origine le modèle s'appelait Snuffleupagus. Il s'ensuivit GPT-2 en février 2019, GPT-3 en mai 2020 et GPT-4 en 2022. À noter, GPT devint l'acronyme de Generative Pre-trained Transformer. C'est-à-dire en français, grand modèle de langues modèle autoattentif préentraîné génératif.
Français
GPT
générateur autoattentif préentraîné
GAP
modèle autoattentif préentraîné génératif
MGAP
grand modèle de langues autoattentif préentraîné génératif
GMLAPG
Anglais
GPT
Generative Pre-trained Transformers
Generative Pre-training
Sources
Source : OpenAI - Improving Language Understanding by Generative Pre-Training
Source : OpenAI - Improving Language Understanding with Unsupervised Learning
Contributeurs: Claude Coulombe, Patrick Drouin, wiki