« Évanescence du gradient » : différence entre les versions


m (Remplacement de texte — « <small>loc. nom. masc.</small> » par « <small> masculin </small> »)
m (Remplacement de texte : « ↵<small> » par «  ==Sources== »)
 
(10 versions intermédiaires par 2 utilisateurs non affichées)
Ligne 1 : Ligne 1 :
==Définition==
==Définition==
Problème posé, dans un réseau de neurones profond, par la diminution très rapide des valeurs des gradients pendant la rétropropagation entraînant l'annulation du gradient et l'arrêt de l'apprentissage.  
Problème posé, dans un réseau de neurones profond, par la diminution très rapide des valeurs des gradients pendant la rétropropagation entraînant l'annulation du gradient et par conséquent l'arrêt de l'apprentissage.
 
==Compléments==
Nous recommandons l'expression « évanescence du gradient » pour sa spécificité et sa <i>beauté</i> langagière.


==Français ==
==Français ==
'''problème de la disparition du gradient''' <small> masculin </small>
'''évanescence du gradient'''


'''problème de l'évanescence du gradient''' <small> masculin </small>
'''disparition du gradient'''  


'''problème de la dissipation du gradients'''  <small> masculin </small>
'''dissipation du gradients'''   
 
'''problème de l'évanescence du gradient'''


==Anglais==
==Anglais==
'''gradient vanishing problem'''


'''gradient vanishing'''
'''gradient vanishing'''


'''gradient vanishing problem'''


<small>
==Sources==


Source: Pascanu, Razvan (2015). ''On Recurrent and Deep Neural Networks'', thèse de doctorat, Université de Montréal, 267 pages.       
Source: Pascanu, Razvan (2015). ''On Recurrent and Deep Neural Networks'', thèse de doctorat, Université de Montréal, 267 pages.       
Ligne 25 : Ligne 30 :
[[Utilisateur:Patrickdrouin  | Source: Termino  ]]
[[Utilisateur:Patrickdrouin  | Source: Termino  ]]


[[Category:Intelligence artificielle]]
 
[[Catégorie:Apprentissage automatique]]
 
[[Catégorie:Réseau de neurones artificiels]]
[[Catégorie:Apprentissage profond]]
[[Category:GRAND LEXIQUE FRANÇAIS]]
[[Category:GRAND LEXIQUE FRANÇAIS]]
[[Category:Termino 2019]]

Dernière version du 28 janvier 2024 à 15:10

Définition

Problème posé, dans un réseau de neurones profond, par la diminution très rapide des valeurs des gradients pendant la rétropropagation entraînant l'annulation du gradient et par conséquent l'arrêt de l'apprentissage.

Compléments

Nous recommandons l'expression « évanescence du gradient » pour sa spécificité et sa beauté langagière.

Français

évanescence du gradient

disparition du gradient

dissipation du gradients

problème de l'évanescence du gradient

Anglais

gradient vanishing

gradient vanishing problem

Sources

Source: Pascanu, Razvan (2015). On Recurrent and Deep Neural Networks, thèse de doctorat, Université de Montréal, 267 pages.

Source : openclassrooms.com

Source: Claude Coulombe ( discussion)

Source: Termino