Mécanisme d'attention

Domaine

Intelligence artificielle

Définition

Capacité d'un réseau de neurones d'apprendre à cibler des parties spécifiques d'une donnée complexe (image, phrase, etc.) dans son mécanisme de prédiction.

Note
Plus précisément, le réseau de neurones apprend une distribution statistique indiquant sur quoi se concentrer parmi les différentes parties d'une donnée complexe (mot d'une phrase, partie d'une image).

Anglais

attention mechanism

Source : Yoshua Bengio, Pour la science.