« Méthode d'accélération » : différence entre les versions
m (Pitpitt a déplacé la page Accélération vers Méthode d'accélération sans laisser de redirection) |
Aucun résumé des modifications Balise : Éditeur de wikicode 2017 |
||
Ligne 6 : | Ligne 6 : | ||
== Définition == | == Définition == | ||
La méthode du momentum ( ou méthode d'accélération, parfois dénommée a contrario, ou méthode d'inertie) est conçue pour accélérer l'apprentissage en particulier face à des courbures élevées, des gradients faibles mais robustes ou des gradients bruités. L'algorithme du momentum construit une moyenne mobile cumulée des gradients passés, aux poids exponentiellement décroissants et continue à se placer dans leur direction. | La ''méthode du momentum'' ( ou ''méthode d'accélération'', parfois dénommée'' a contrario'', ou ''méthode d'inertie'') est conçue pour accélérer l'apprentissage en particulier face à des courbures élevées, des gradients faibles mais robustes ou des gradients bruités. L'algorithme du momentum construit une moyenne mobile cumulée des gradients passés, aux poids exponentiellement décroissants et continue à se placer dans leur direction. | ||
== Français == | == Français == | ||
Ligne 14 : | Ligne 14 : | ||
'''méthode d'inertie''' | '''méthode d'inertie''' | ||
'''méthode du momentum''' | |||
== Anglais == | == Anglais == | ||
'''momentum | '''method of momentum'' | ||
Version du 27 décembre 2019 à 14:27
en construction
Définition
La méthode du momentum ( ou méthode d'accélération, parfois dénommée a contrario, ou méthode d'inertie) est conçue pour accélérer l'apprentissage en particulier face à des courbures élevées, des gradients faibles mais robustes ou des gradients bruités. L'algorithme du momentum construit une moyenne mobile cumulée des gradients passés, aux poids exponentiellement décroissants et continue à se placer dans leur direction.
Français
méthode d'accélération
méthode a contrario
méthode d'inertie
méthode du momentum
Anglais
'method of momentum
Contributeurs: Jacques Barolet, wiki