Échelonnage des poids

Définition

En apprentissage profond, méthode d'approximation par échantillonnage utilisée en inférence (c.-à-d. après l'étape d'entraînement, donc sur un modèle entraîné) pour tenir compte de l'effet de l'extinction de neurones (dropout) au moment de l'entraînement.

Français

échelonnage des poids

Anglais

weight scaling

Source : L'apprentissage profond, Ian Goodfellow, Yoshua Bengio et Aaron Courville Éd. Massot 2018 page 270

Source : Understanding droput, Roan Gylberth 2019 Publication