« Optimiseur » : différence entre les versions

Dernière version du 25 avril 2024 à 16:58

Définition

Implémentation particulière de l'algorithme de descente de gradient. La classe de base de TensorFlow pour les optimiseurs est tf.train.Optimizer. Différents optimiseurs (sous-classes de tf.train.Optimizer) tiennent compte des concepts tels que :

le moment (Momentum);
la fréquence de mise à jour (AdaGrad = descente de gradient adaptative ; Adam = adaptative avec Momentum ; RMSProp);
la parcimonie/régularisation (Ftrl);
des opérations mathématiques plus complexes (proximal et autres).

Il est même possible d'imaginer un optimiseur reposant sur un réseau de neurones.

Français

optimiseur

Anglais

optimizer

Sources

Source : Google machine learning glossary

@@ Ligne 1 : / Ligne 1 : @@
-__NOTOC__
-== Domaine ==
-[[Category:GRAND LEXIQUE FRANÇAIS]]
-[[Category:Vocabulaire2]]
-[[Category:Google2]]
-[[Category:Apprentissage profond]]Apprentissage profond<br />
-<br />
 == Définition ==
+Implémentation particulière de l'[[algorithme de descente de gradient]]. La classe de base de [[TensorFlow]] pour les optimiseurs est tf.train.Optimizer. Différents optimiseurs (sous-classes de tf.train.Optimizer) tiennent compte des concepts tels que :
-Implémentation particulière de l'algorithme de descente de gradient. La classe de base de TensorFlow pour les optimiseurs est tf.train.Optimizer. Différents optimiseurs (sous-classes de tf.train.Optimizer) tiennent compte des concepts tels que :
+*    le moment (Momentum);
-*    le moment (Momentum) ;
+*    la fréquence de mise à jour (AdaGrad = descente de gradient adaptative ; Adam = adaptative avec Momentum ; RMSProp);
-*    la fréquence de mise à jour (AdaGrad = descente de gradient adaptative ; Adam = adaptative avec Momentum ; RMSProp) ;
+*    la parcimonie/régularisation (Ftrl);
-*    la parcimonie/régularisation (Ftrl) ;
 *    des opérations mathématiques plus complexes (proximal et autres).
 Il est même possible d'imaginer un optimiseur reposant sur un réseau de neurones.
-<br />
 == Français ==
-=== optimiseur n.m.===
+'''optimiseur'''
-<br />
 == Anglais ==
+'''optimizer'''
-===  optimizer===
+==Sources==
+[https://developers.google.com/machine-learning/glossary/  Source : Google machine learning glossary ]
-<br/>
+[[Category:GRAND LEXIQUE FRANÇAIS]]
-<br/>
+[[Category:Apprentissage profond]]
-<br/>
-[https://developers.google.com/machine-learning/glossary/  Source: Google machine learning glossary ]
-<br/>
-<br/>[https://datafranca.org/lexique/optimiseur/        ''Publié : datafranca.org'' ]
-<br/>
-<br/>
-<br/>