« Modèle fondateur » : différence entre les versions


m (Claude COULOMBE a déplacé la page Modèle fondateur vers Modèle de fondation)
Aucun résumé des modifications
Ligne 1 : Ligne 1 :
== Définition ==
== Définition ==
Des chercheurs de l'Université Stanford ont proposé le terme modèle fondateur (« foundation model ») pour définir un ensemble de [[grand modèle de langues|grands modèles de langues]] basés sur des architectures de [[réseau autoattentif]] préentraînées sur de vastes corpus parfois selon plusieurs modalités (textes, voix, images, etc.).
Des chercheurs de l'Université Stanford ont proposé le terme modèle de fondation (« foundation model ») pour définir un ensemble de [[grand modèle de langues|grands modèles de langues]] basés sur des architectures de [[réseau autoattentif]] préentraînées sur de vastes corpus parfois selon plusieurs modalités (textes, voix, images, etc.).


Les modèles fondateurs comme [[BERT]], [[GPT-3]], [[LLaMA]], [[DALL-E]] peuvent être adaptés à un large éventail de tâches.  
Les modèles de fondation comme [[BERT]], [[GPT-3]], [[LLaMA]], [[DALL-E]] peuvent être adaptés à un large éventail de tâches.  


==Compléments==
==Compléments==


Les modèles fondateurs constituent un changement radical de paradigme en IA. Ils représentent une augmentation spectaculaire des capacités en termes de précision, de qualité et d'extrapolation à de nouvelles tâches.  
Les modèles de fondation constituent un changement radical de paradigme en IA. Ils représentent une augmentation spectaculaire des capacités en termes de précision, de qualité et d'extrapolation à de nouvelles tâches.  


Les modèles fondateurs présentent également des problèmes évidents d'utilisation à des fins de désinformation, l'exacerbation des biais et le risque d'oligopole de l'intelligence artificielle entre les mains de quelques entreprises.
Les modèles de fondation présentent également des problèmes évidents d'utilisation à des fins de désinformation, l'exacerbation des biais et le risque d'oligopole de l'intelligence artificielle entre les mains de quelques entreprises.


== Français ==
== Français ==
'''modèle de fondation'''
'''modèle fondateur'''
'''modèle fondateur'''


== Anglais ==
== Anglais ==
'''foundation model'''
'''foundation model'''


==Sources==
==Sources==
 
<small>
[https://arxiv.org/abs/2108.07258  Source : arxiv.org ]
[https://fr.wikipedia.org/wiki/Mod%C3%A8le_de_fondation wikipédia]
 
[https://arxiv.org/abs/2108.07258  arxiv.org ]
[https://www.youtube.com/watch?v=dG628PEN1fY   Source : youtube ]
[https://www.youtube.com/watch?v=dG628PEN1fY youtube ]
</small>
[[Catégorie:GRAND LEXIQUE FRANÇAIS]]
[[Catégorie:GRAND LEXIQUE FRANÇAIS]]
[[Catégorie:Publication]]

Version du 3 février 2024 à 12:57

Définition

Des chercheurs de l'Université Stanford ont proposé le terme modèle de fondation (« foundation model ») pour définir un ensemble de grands modèles de langues basés sur des architectures de réseau autoattentif préentraînées sur de vastes corpus parfois selon plusieurs modalités (textes, voix, images, etc.).

Les modèles de fondation comme BERT, GPT-3, LLaMA, DALL-E peuvent être adaptés à un large éventail de tâches.

Compléments

Les modèles de fondation constituent un changement radical de paradigme en IA. Ils représentent une augmentation spectaculaire des capacités en termes de précision, de qualité et d'extrapolation à de nouvelles tâches.

Les modèles de fondation présentent également des problèmes évidents d'utilisation à des fins de désinformation, l'exacerbation des biais et le risque d'oligopole de l'intelligence artificielle entre les mains de quelques entreprises.

Français

modèle de fondation

modèle fondateur

Anglais

foundation model

Sources

wikipédia arxiv.org youtube

Contributeurs: Claude Coulombe, wiki