« Initialisation de Xavier » : différence entre les versions


Aucun résumé des modifications
m (Remplacement de texte : « ↵<small> » par «  ==Sources== »)
 
Ligne 9 : Ligne 9 :




<small>
 
==Sources==


[https://qastack.fr/stats/319323/whats-the-difference-between-variance-scaling-initializer-and-xavier-initialize  Source: QA Stack]
[https://qastack.fr/stats/319323/whats-the-difference-between-variance-scaling-initializer-and-xavier-initialize  Source: QA Stack]

Dernière version du 27 janvier 2024 à 23:00

Définition

Initialement proposée par Xavier Glorot et Yoshua Bengio dans "Comprendre la difficulté de former des réseaux de neurones profonds à action directe" , c'est la technique d'initialisation des poids qui essaie de rendre la variance des sorties d'une couche égale à la variance de ses entrées .

Français

initialisation de Xavier

Anglais

Xavier Initialization


Sources

Source: QA Stack

Contributeurs: Imane Meziani, wiki