« Ecrêtage de gradient » : différence entre les versions


Aucun résumé des modifications
Balise : Éditeur de wikicode 2017
m (Remplacement de texte — « <small>loc. nom. masc.</small> » par « <small> masculin </small> »)
Ligne 3 : Ligne 3 :


==Français==
==Français==
'''écrêtage de gradient'''  <small>loc. nom. masc.</small>
'''écrêtage de gradient'''  <small> masculin </small>


'''bornement de gradient'''  <small>loc. nom. masc.</small>
'''bornement de gradient'''  <small> masculin </small>


'''seuillage de gradient'''  <small>loc. nom. masc.</small>
'''seuillage de gradient'''  <small> masculin </small>


==Anglais==
==Anglais==

Version du 22 mai 2020 à 23:42

Définition

Mécanisme couramment utilisé afin d'atténuer le problème d'explosion du gradient en limitant artificiellement la valeur maximale des gradients lors de l'utilisation de la descente de gradient pendant l'entraînement d'un modèle.

Français

écrêtage de gradient masculin

bornement de gradient masculin

seuillage de gradient masculin

Anglais

Gradient Clipping

Source: Géron, Aurélien (2017). Deep Learning avec TensorFlow - Mise en oeuvre et cas concrets, Paris, Dunod, 360 pages.

Source:L'apprentissage profond p.295

Source: Termino