« Méthode d'accélération » : différence entre les versions


Aucun résumé des modifications
Balise : Éditeur de wikicode 2017
m (Remplacement de texte : « ↵<small> » par «  ==Sources== »)
 
(2 versions intermédiaires par le même utilisateur non affichées)
Ligne 3 : Ligne 3 :


==Français==
==Français==
'''méthode d'accélération'''  <small>loc. nom. fém.</small>
'''méthode d'accélération'''   


'''méthode à contrario'''  <small>loc. nom. fém.</small>
'''méthode à contrario'''   


'''méthode d'inertie'''  <small>loc. nom. fém.</small>
'''méthode d'inertie'''   


'''méthode du momentum'''  <small>loc. nom. fém.</small>
'''méthode du momentum'''   
   
   
==Anglais==
==Anglais==
Ligne 15 : Ligne 15 :




<small>
==Sources==


[https://www.apprentissageprofond.org/ Source :  ''L'apprentissage profond'',  Ian Goodfellow, Yoshua Bengio et Aaron Courville  Éd. Massot 2018 page 302]
[https://www.apprentissageprofond.org/ Source :  ''L'apprentissage profond'',  Ian Goodfellow, Yoshua Bengio et Aaron Courville  Éd. Massot 2018 page 302]

Dernière version du 28 janvier 2024 à 11:27

Définition

La méthode d'accélération, aussi appelée méthode du momentum, est conçue pour accélérer l'apprentissage en particulier face à des courbures élevées, des gradients faibles mais robustes ou des gradients bruités. L'algorithme du momentum construit une moyenne mobile cumulée des gradients passés, aux poids exponentiellement décroissants et continue à se placer dans leur direction.

Français

méthode d'accélération

méthode à contrario

méthode d'inertie

méthode du momentum

Anglais

method of momentum


Sources

Source : L'apprentissage profond, Ian Goodfellow, Yoshua Bengio et Aaron Courville Éd. Massot 2018 page 302



Contributeurs: Jacques Barolet, wiki