« Évanescence du gradient » : différence entre les versions


Aucun résumé des modifications
Balise : Éditeur de wikicode 2017
(Ajout d'une source)
Balise : Éditeur de wikicode 2017
Ligne 28 : Ligne 28 :


Source: Pascanu, Razvan (2015). On Recurrent and Deep Neural Networks, thèse de doctorat, Université de Montréal, 267 pages.
Source: Pascanu, Razvan (2015). On Recurrent and Deep Neural Networks, thèse de doctorat, Université de Montréal, 267 pages.
Source : Claude Coulombe





Version du 10 juin 2019 à 21:05

Domaine

Intelligence artificielle
Apprentissage automatique
Réseau de neurones artificiels
Apprentissage profond



Définition

Problème posé, dans un réseau de neurones profond, par la diminution très rapide des valeurs des gradients pendant la rétropropagation entraînant l'annulation du gradient et l'arrêt de l'apprentissage.


Français

problème de la disparition du gradient n.m.

problème de l'évanescence du gradient n.f.

problème de la dissipation du gradients n.f.


Source: Pascanu, Razvan (2015). On Recurrent and Deep Neural Networks, thèse de doctorat, Université de Montréal, 267 pages.

Source : Claude Coulombe


Anglais

gradient vanishing problem

gradient vanishing


Source : openclassrooms.com

source : Claude Coulombe ( discussion)

Source : Termino