« Adagrad » : différence entre les versions
Aucun résumé des modifications |
Aucun résumé des modifications |
||
| Ligne 20 : | Ligne 20 : | ||
== Termes privilégiés == | == Termes privilégiés == | ||
=== AdaGrad <small>(diminutif de ''adaptive gradient'', anglais pour gradient adaptatif.)</small>=== | === AdaGrad <small>(diminutif de ''adaptive gradient'', anglais pour gradient adaptatif.)</small>=== | ||
=== Gradient adaptatif=== | |||
Version du 29 septembre 2018 à 21:53
Domaine
Vocabulaire
Google
Apprentissage profond
Définition
Algorithme complexe de descente de gradient qui redimensionne les gradients de chaque paramètre en attribuant à chacun des paramètres un taux d'apprentissage indépendant. Pour plus d'explication, consultez ces articles.
http://www.jmlr.org/papers/volume12/duchi11a/duchi11a.pdf
http://ruder.io/optimizing-gradient-descent/index.html#adagrad
Termes privilégiés
AdaGrad (diminutif de adaptive gradient, anglais pour gradient adaptatif.)
Gradient adaptatif
Anglais
AdaGrad
Contributeurs: Jacques Barolet, wiki
