Fabulation de l'IA
Définition
Dans le domaine de l’intelligence artificielle, plus particulièrement des robots conversationnels il s'agit d'une réponse manifestement fausse présentée comme un fait.
Par exemple, un [agent conversationnel|robots conversationnels] qui inventera un chiffre d’affaires pour une entreprise sans avoir de données à ce sujet.
Compléments
Ce phénomène est appelé « fabulation » ou « hallucination » par analogie ou anthropomorphisme avec les phénomènes semblables en psychologie humaine.
Le phénomène des hallucinations est en lien direct avec les données d'entrainement. Pour un sujet où l'algorithme n'a pas bénéficié de beaucoup de données, le GMLG fera des liens en se basant sur peu d'évidence ou de faits. Afin de produire un résultat, ces liens erronés seront utilisés pour générer une réponse à une requête.
Le terme hallucination en intelligence artificielle a pris de l'importance vers 2022 parallèlement au déploiement des modèles de langues basés sur l'apprentissage profond tels que ChatGPT.
Les grands modèles de langues génératifs sont « intrinsèquement » non fiables. Ils simulent un comportement intelligent et il est impossible de déterminer si les réponses sont vraies. De plus, les GMLG ne citent pas leurs sources. En plaçant quelques gardes-fous, un GMLG fonctionne plutôt bien, mais un dérapage peut se produire sans avertissement. Il est donc impossible de garantir à 100% la véracité d'une affirmation produite par un tel système d'IA.
La quantité de contexte pris en compte par le GMLG est un limite importante. Après une très longue conversation, des modèles à mémoire limitée comme ChatGPT perdent le fil de la conversation. C'est pourquoi elle est passée de 3000 mots pour ChatGPT à 25 000 mots pour GPT-4.
Français
fabulation de l'IA
hallucination de l'IA
affirmation fausse de l'IA
Anglais
AI hallucination
Contributeurs: Claude Coulombe, Patrick Drouin, wiki
