« Adadelta » : différence entre les versions


m (Remplacement de texte — « Category:Coulombe » par « <!-- Coulombe --> »)
m (Remplacement de texte — « [[Category: » par « [[Catégorie: »)
Ligne 5 : Ligne 5 :
[[Catégorie:Apprentissage profond]] Apprentissage profond<br />
[[Catégorie:Apprentissage profond]] Apprentissage profond<br />


[[Category:Vocabulary]]Vocabulary<br />
[[Catégorie:Vocabulary]]Vocabulary<br />
<!-- Coulombe -->Coulombe<br />
<!-- Coulombe -->Coulombe<br />



Version du 27 septembre 2019 à 10:08

en construction

Apprentissage profond
Vocabulary

Coulombe

Définition

Français

Adadelta

Algorithme d'optimisation de la descente de gradient.

Anglais

Adadelta

Adadelta is a gradient descent based learning algorithm that adapts the learning rate per parameter over time. It was proposed as an improvement over Adagrad, which is more sensitive to hyperparameters and may decrease the learning rate too aggressively. Adadelta It is similar to rmsprop and can be used instead of vanilla SGD.

  • ADADELTA: An Adaptive Learning Rate Method
  • Stanford CS231n: Optimization Algorithms
  • An overview of gradient descent optimization algorithms