« BERT » : différence entre les versions
Aucun résumé des modifications |
Aucun résumé des modifications |
||
Ligne 1 : | Ligne 1 : | ||
== Définition == | == Définition == | ||
Acronyme anglais de ''Bidirectional Encoder Representations from Transformers'' (Représentations d'encodeur bidirectionnel à partir de ''[[Réseau autoattentif|réseaux autoattentifs]]'', BERT | Acronyme anglais de ''Bidirectional Encoder Representations from Transformers'' (Représentations d'encodeur bidirectionnel à partir de ''[[Réseau autoattentif|réseaux autoattentifs]]'', BERT fut le premier [[grand modèle de langues]], créé par une équip de Google en 2018. | ||
BERT utilise une stratégie d'apprentissage profond du [[traitement automatique du langage naturel]] (TALN) dans lequel les réseaux de neurones profonds utilisent des modèles bidirectionnels avec une représentation du langage non supervisée. | |||
== Français == | == Français == | ||
Ligne 9 : | Ligne 11 : | ||
'''Bidirectional Encoder Representations from Transformers''' | '''Bidirectional Encoder Representations from Transformers''' | ||
<small> | <small> | ||
[https://en.wikipedia.org/wiki/BERT_(language_model) Source : Wikipedia (BERT - Language model) ] | [https://en.wikipedia.org/wiki/BERT_(language_model) Source : Wikipedia (BERT - Language model) ] |
Version du 24 mai 2023 à 17:56
Définition
Acronyme anglais de Bidirectional Encoder Representations from Transformers (Représentations d'encodeur bidirectionnel à partir de réseaux autoattentifs, BERT fut le premier grand modèle de langues, créé par une équip de Google en 2018.
BERT utilise une stratégie d'apprentissage profond du traitement automatique du langage naturel (TALN) dans lequel les réseaux de neurones profonds utilisent des modèles bidirectionnels avec une représentation du langage non supervisée.
Français
BERT
Anglais
BERT
Bidirectional Encoder Representations from Transformers
Contributeurs: Claude Coulombe, Imane Meziani, Jean Benoît Morel, wiki