Modèle préentraîné

Définition

Un modèle préentraîné est un modèle ou un réseau de neurones sauvegardé et créé à partir d'un ensemble de données pour résoudre un problème similaire.

Compléments

Des exemples de grands modèles préentraînés sont MobileNet (pour la vision artificielle), BERT, la série des grands modèles de langues GPT-x et LLaMA.

Étant donnée la taille importante de ces modèles, l'étape de préentrainement est généralement réalisée par un nombre restreint d’entreprises possédant des fermes de serveurs infonuagiques,essentiellement des processeurs graphiques.

Français

modèle préentraîné

Anglais

pre-trained model

Sources

Source: Google machine learning glossary