Gradient adaptatif

Définition

Algorithme complexe de descente de gradient qui redimensionne les gradients de chaque paramètre en attribuant à chacun des paramètres un taux d'apprentissage indépendant. AdaGrad est le diminutif de adaptive gradient.

Français

gradient adaptatif

Adagrad nom propre

Anglais

AdaGrad

Adaptive Gradient

Source: Google, Machine learning glossary.