« Préentraînement glouton » : différence entre les versions


Aucun résumé des modifications
Balise : Éditeur de wikicode 2017
Aucun résumé des modifications
Balise : Éditeur de wikicode 2017
Ligne 1 : Ligne 1 :
== Définition ==
== Définition ==
Les trois principes pour la formation de réseaux de neurones profonds sont:
Pré-entraînement non supervisée au niveau des couches gourmandes est:
* la pré-entraînement  d'une couche à la fois d'une manière gloutonnne
• Une représentation apprise pour une tâche (apprentissage non supervisé, qui capture la forme de la distribution d'entrée )
* l'apprentissage non supervisé à chaque couche d'une manière qui préserve les informations de l'entrée et démêle les facteurs de variation
• Est utilisée pour une autre tâche ( apprentissage supervisé avec le même domaine d'entrée )
* affiner l'ensemble du réseau par rapport au critère ultime d'intérêt.
• La pré-entraînement glouton  au niveau des couches repose sur un apprentissage de la représentation monocouche
 


== Français ==
== Français ==
'''pré-entraînement glouton'''
'''Pré-entraînement glouton'''   <small> masculin </small>
 
'''Pré-entraînement gourmand'''  <small> masculin </small>
   
   
== Anglais ==
== Anglais ==
'''greedy pre-trainning'''
'''Greedy pre-trainning'''


<small>
<small>


[http://jmlr.org/papers/volume10/larochelle09a/larochelle09a.pdf  Source :  Journal of Machine Learning page 29 ]
 
[https://cedar.buffalo.edu/~srihari/CSE676/15.1%20Greedy-Layerwise.pdf  Source : Greedy Layer-wise Unsupervised Pretraining - page 6 ]
 
[http://jmlr.org/papers/volume10/larochelle09a/larochelle09a.pdf  Source :  Journal of Machine Learning - page 29 ]


[https://www.apprentissageprofond.org/  Source :  ''L'apprentissage profond'',  Ian Goodfellow, Yoshua Bengio et Aaron Courville  Éd. Massot 2018 ]
[https://www.apprentissageprofond.org/  Source :  ''L'apprentissage profond'',  Ian Goodfellow, Yoshua Bengio et Aaron Courville  Éd. Massot 2018 ]

Version du 28 mai 2020 à 21:16

Définition

Pré-entraînement non supervisée au niveau des couches gourmandes est: • Une représentation apprise pour une tâche (apprentissage non supervisé, qui capture la forme de la distribution d'entrée ) • Est utilisée pour une autre tâche ( apprentissage supervisé avec le même domaine d'entrée ) • La pré-entraînement glouton au niveau des couches repose sur un apprentissage de la représentation monocouche


Français

Pré-entraînement glouton masculin

Pré-entraînement gourmand masculin

Anglais

Greedy pre-trainning


Source : Greedy Layer-wise Unsupervised Pretraining - page 6

Source : Journal of Machine Learning - page 29

Source : L'apprentissage profond, Ian Goodfellow, Yoshua Bengio et Aaron Courville Éd. Massot 2018