« Ecrêtage de gradient » : différence entre les versions
Aucun résumé des modifications Balise : Éditeur de wikicode 2017 |
Aucun résumé des modifications Balise : Éditeur de wikicode 2017 |
||
| Ligne 13 : | Ligne 13 : | ||
==Définition== | ==Définition== | ||
Mécanisme couramment utilisé afin d'atténuer le problème d'explosion du gradient en limitant artificiellement la valeur maximale des gradients lors de l'utilisation de la descente de gradient pendant l'entraînement d'un modèle. | Mécanisme couramment utilisé afin d'atténuer le problème d'explosion du gradient en limitant artificiellement la valeur maximale des gradients lors de l'utilisation de la descente de gradient pendant l'entraînement d'un modèle. | ||
==Français== | ==Français== | ||
'''écrêtage de gradient''' n.m. | '''écrêtage de gradient''' n.m. | ||
'''bornement de gradient''' n.m. | '''bornement de gradient''' n.m. | ||
==Anglais== | ==Anglais== | ||
'''Gradient Clipping''' | |||
Version du 16 juin 2019 à 00:12
Domaine
Intelligence artificielle
Apprentissage automatique
Apprentissage profond
Définition
Mécanisme couramment utilisé afin d'atténuer le problème d'explosion du gradient en limitant artificiellement la valeur maximale des gradients lors de l'utilisation de la descente de gradient pendant l'entraînement d'un modèle.
Français
écrêtage de gradient n.m.
bornement de gradient n.m.
Anglais
Gradient Clipping
Source: Géron, Aurélien (2017). Deep Learning avec TensorFlow - Mise en oeuvre et cas concrets, Paris, Dunod, 360 pages.
Contributeurs: Jacques Barolet, Julie Roy, Patrick Drouin, wiki
