« Méthode d'accélération » : différence entre les versions


m (Pitpitt a déplacé la page Accélération vers Méthode d'accélération sans laisser de redirection)
Aucun résumé des modifications
Balise : Éditeur de wikicode 2017
Ligne 6 : Ligne 6 :


== Définition ==
== Définition ==
La méthode du momentum ( ou méthode d'accélération, parfois dénommée a contrario, ou méthode d'inertie) est conçue pour accélérer l'apprentissage en particulier face à des courbures élevées, des gradients faibles mais robustes ou des gradients bruités. L'algorithme du momentum construit une moyenne mobile cumulée des gradients passés, aux poids exponentiellement décroissants et continue à se placer dans leur direction.
La ''méthode du momentum'' ( ou ''méthode d'accélération'', parfois dénommée'' a contrario'', ou ''méthode d'inertie'') est conçue pour accélérer l'apprentissage en particulier face à des courbures élevées, des gradients faibles mais robustes ou des gradients bruités. L'algorithme du momentum construit une moyenne mobile cumulée des gradients passés, aux poids exponentiellement décroissants et continue à se placer dans leur direction.


== Français ==
== Français ==
Ligne 14 : Ligne 14 :


'''méthode d'inertie'''
'''méthode d'inertie'''
'''méthode du momentum'''
   
   
== Anglais ==
== Anglais ==
'''momentum method'''
'''method of momentum''





Version du 27 décembre 2019 à 14:27

en construction

Définition

La méthode du momentum ( ou méthode d'accélération, parfois dénommée a contrario, ou méthode d'inertie) est conçue pour accélérer l'apprentissage en particulier face à des courbures élevées, des gradients faibles mais robustes ou des gradients bruités. L'algorithme du momentum construit une moyenne mobile cumulée des gradients passés, aux poids exponentiellement décroissants et continue à se placer dans leur direction.

Français

méthode d'accélération

méthode a contrario

méthode d'inertie

méthode du momentum

Anglais

'method of momentum


Source: L'apprentissage profond. Éd.Massot 2018 page 302

Contributeurs: Jacques Barolet, wiki