« Modèle fondateur » : différence entre les versions

Dernière version du 20 février 2024 à 20:29

Définition

Des chercheurs de l'Université Stanford ont proposé le terme modèle fondateur ou modèle de fondation (« foundation model ») pour définir un ensemble de grands modèles de langues basés sur des architectures de réseau autoattentif préentraînées sur de vastes corpus parfois selon plusieurs modalités (textes, voix, images, etc.).

Les modèles fondateurs comme BERT, GPT-3, LLaMA, DALL-E peuvent être adaptés à un large éventail de tâches.

Compléments

Les modèles fondateurs constituent un changement radical de paradigme en IA. Ils représentent une augmentation spectaculaire des capacités en termes de précision, de qualité et d'extrapolation à de nouvelles tâches.

Les modèles fondateurs présentent également des problèmes évidents d'utilisation à des fins de désinformation, l'exacerbation des biais et le risque d'oligopole de l'intelligence artificielle entre les mains de quelques entreprises.

Français

modèle fondateur

modèle de fondation

modèle fondationnel

Anglais

foundation model

Sources

@@ Ligne 1 : / Ligne 1 : @@
+== Définition ==
+Des chercheurs de l'Université Stanford ont proposé le terme modèle fondateur ou modèle de fondation  (« foundation model ») pour définir un ensemble de [[grand modèle de langues|grands modèles de langues]] basés sur des architectures de [[réseau autoattentif]] préentraînées sur de vastes corpus parfois selon plusieurs modalités (textes, voix, images, etc.).
+Les modèles fondateurs comme [[BERT]], [[GPT-3]], [[LLaMA]], [[DALL-E]] peuvent être adaptés à un large éventail de tâches.
+==Compléments==
-==en construction==
+Les modèles fondateurs constituent un changement radical de paradigme en IA. Ils représentent une augmentation spectaculaire des capacités en termes de précision, de qualité et d'extrapolation à de nouvelles tâches.
-== Définition ==
+Les modèles fondateurs présentent également des problèmes évidents d'utilisation à des fins de désinformation, l'exacerbation des biais et le risque d'oligopole de l'intelligence artificielle entre les mains de quelques entreprises.
-XXXXXXXXX
 == Français ==
-''' XXXXXXXXX '''
+'''modèle fondateur'''
+'''modèle de fondation'''
+'''modèle fondationnel'''
 == Anglais ==
-''' Foundation Model'''
+'''foundation model'''
+==Sources==
+[https://www.btb.termiumplus.gc.ca/tpv2alpha/alpha-fra.html?lang=fra&i=1&srchtxt=FOUNDATION+MODEL&index=alt&codom2nd_wet=1#resultrecs Termium]
- By foundation model (e.g. BERT, GPT-3, DALL-E), we mean a single model that is trained on raw data, potentially across multiple modalities, which can be usefully adapted to a wide range of tasks. These models have demonstrated clear potential, which we see as the beginnings of a sweeping paradigm shift in AI. They represent a dramatic increase in capability in terms of accuracy, generation quality, and extrapolation to new tasks, but they also pose clear risks such as use for widespread disinformation, potential exacerbation of historical inequities, and problematic centralization of power.
+[https://fr.wikipedia.org/wiki/Mod%C3%A8le_de_fondation  wikipedia ]
-<small>
-[https://arxiv.org/abs/2108.07258   Source : arxiv.org ]
+[https://arxiv.org/abs/2108.07258   arxiv.org ]
-[https://www.youtube.com/watch?v=dG628PEN1fY    Source : youtube ]
+[https://www.youtube.com/watch?v=dG628PEN1fY  youtube ]
+[https://www.insa-lyon.fr/es/evenement/conference-les-enjeux-des-modeles-de-langage Conférence INSA]
-[[Catégorie:vocabulary]]
+[[Catégorie:GRAND LEXIQUE FRANÇAIS]]