« Échauffement du taux d'apprentissage » : différence entre les versions


Aucun résumé des modifications
Aucun résumé des modifications
Ligne 2 : Ligne 2 :


== Définition ==
== Définition ==
XXXXXXXX
L'échauffement du taux d'apprentissage désigne une méthode, ou plus spécifiquement une technique de régularisation du '''[[réseau de neurones]]''', qui assure une stabilité dans la phase d'apprentissage du modèle qui effectue des tâches comme la reconnaissance d'images ou le '''[[traitement de la langue naturelle]]'''.


Voir aussi '''[[Linear Warm-Up]]''' et '''[[réseau antagoniste génératif]]'''
Voir aussi '''[[Linear Warm-Up]]''', '''[[réseau antagoniste génératif]]''' et '''[[taux d'apprentissage]]'''


== Français ==
== Français ==
''' XXXXXX'''
''' échauffement du taux d'apprentissage'''


== Anglais ==
== Anglais ==
''' Learning Rate Warm-Up'''
''' learning rate warm-up'''


''' Learning Rate Warmup'''
''' learning rate warmup'''


''' LR Warm-Up'''
''' LR warm-up'''


''' LR Warmup'''
''' LR warmup'''


''Learning rate warmup is a common heuristic used by many practitioners for training deep neural nets for computer vision and natural language processing tasks.''
''Learing Rate Warm-up is a method, or more secifically, a network regularization technique, that ensures stability in the initial phase of training for computer vision and natural language processing tasks.''


== Source ==
== Source ==

Version du 9 novembre 2024 à 14:07

en construction

Définition

L'échauffement du taux d'apprentissage désigne une méthode, ou plus spécifiquement une technique de régularisation du réseau de neurones, qui assure une stabilité dans la phase d'apprentissage du modèle qui effectue des tâches comme la reconnaissance d'images ou le traitement de la langue naturelle.

Voir aussi Linear Warm-Up, réseau antagoniste génératif et taux d'apprentissage

Français

échauffement du taux d'apprentissage

Anglais

learning rate warm-up

learning rate warmup

LR warm-up

LR warmup

Learing Rate Warm-up is a method, or more secifically, a network regularization technique, that ensures stability in the initial phase of training for computer vision and natural language processing tasks.

Source

Source : Baeldung

Source : Open Review

Contributeurs: Arianne