« Vecteur-mot » : différence entre les versions
Aucun résumé des modifications |
Aucun résumé des modifications |
||
Ligne 8 : | Ligne 8 : | ||
==Compléments== | ==Compléments== | ||
Détail technique, on part typiquement d’un corpus représenté par un lexique parcimonieux de plusieurs milliers d'attributs vers une représentation compacte de quelques centaines d’attributs. Voir '''[[Parcimonie des données]]''' | Détail technique, on part typiquement d’un corpus représenté par un lexique parcimonieux de plusieurs milliers d'attributs vers une représentation compacte de quelques centaines d’attributs. Voir '''[[Parcimonie des données]]''' | ||
<hr/> | |||
Des représentations par vecteur-mot populaires sont [[word2vec]] et GloVe. | Des représentations par vecteur-mot populaires sont [[word2vec]] et [[GloVe]]. | ||
<hr/> | |||
Le problème le plus important avec l'emploi de vecteurs-mots pour la substitution lexicale est | |||
la polysémie. Les algorithmes d’extraction de vecteurs-mots comme Word2Vec produisent | |||
des vecteurs-mots polysémiques qui mélangent leurs multiples sens. En fait, les techniques | |||
de génération de vecteurs-mots opèrent sur un mot sans considérer qu’il peut être ambigu | |||
56 | |||
ou polysémique. Par exemple, toute l’information pour le mot «java» se retrouvera | |||
condensée dans un unique vecteur-mot associé à «java» que ce soit le lieu géographique, le | |||
café ou le langage de programmation. | |||
==Français== | ==Français== | ||
Version du 11 octobre 2022 à 14:45
Définition
Un vecteur-mot est une représentation distribuée et dense sous la forme de nombres. La modélisation par vecteur-mot, bien que souvent appliquée aux mots, ne se limite pas à ces derniers et peut être appliquée à des phrases, des paragraphes, des documents, etc.
La représentation par vecteur-mot a comme propriété que les mots apparaissant dans des contextes similaires possèdent des vecteurs qui sont relativement proches. Il en découle que la distance entre des vecteurs-mots de concepts similaires (ex. bouteille, gobelet) est plus faible que celle mesurée entre des concepts sémantiquement éloignés (ex. bouteille, moucheron).
Un vecteur-mot est obtenu par apprentissage automatique ou analyse de cooccurrence ou de voisinage de données.
Compléments
Détail technique, on part typiquement d’un corpus représenté par un lexique parcimonieux de plusieurs milliers d'attributs vers une représentation compacte de quelques centaines d’attributs. Voir Parcimonie des données
Des représentations par vecteur-mot populaires sont word2vec et GloVe.
Le problème le plus important avec l'emploi de vecteurs-mots pour la substitution lexicale est la polysémie. Les algorithmes d’extraction de vecteurs-mots comme Word2Vec produisent des vecteurs-mots polysémiques qui mélangent leurs multiples sens. En fait, les techniques de génération de vecteurs-mots opèrent sur un mot sans considérer qu’il peut être ambigu 56 ou polysémique. Par exemple, toute l’information pour le mot «java» se retrouvera condensée dans un unique vecteur-mot associé à «java» que ce soit le lieu géographique, le café ou le langage de programmation.
Français
vecteur-mot
plongement lexical
plongement de mot
Anglais
word embedding
word vector
Source: Wiktionnaire, Plongement lexical
Source: Turenne, Nicolas (2016). Analyse de données textuelles sous R, Londres, Éditions ISTE, 318 pages.
Source: Nagoudi, El Moatez Billah; Jérémy Ferrero et Didier SchwabDidier Schwab (2017). Amélioration de la similarité sémantique vectorielle par méthodes non-supervisées, Actes de la24e conférence sur le Traitement Automatique des Langues Naturelles (TALN 2017), Orléans, France, 9 pages.
Source: Bernier Colborne, Gabriel (2016). Aide à l'identification de relations lexicales au moyen de la sémantique distributionnelle et son application à un corpus bilingue du domaine de l'environnement, thèse de doctorat, Université de Montréal, 265 pages.
![](/wiki/annonces/DF annonce FRQ.jpg)
Contributeurs: Claude Coulombe, Patrick Drouin, wiki