Adagrad

Définition

Diminutif de adaptive gradient. Algorithme complexe de descente de gradient qui redimensionne les gradients de chaque paramètre en attribuant à chacun des paramètres un taux d'apprentissage indépendant.

Anglais

Adaptive Gradient

Source: Google machine learning glossary