« Peaufinage d'un grand modèle de langues » : différence entre les versions


Aucun résumé des modifications
 
(11 versions intermédiaires par 2 utilisateurs non affichées)
Ligne 3 : Ligne 3 :


== Compléments ==
== Compléments ==
Pour le peaufinage de grands modèles de langues, il existe deux techniques principales : l'[[adaptation par modèle auxiliaire]] ([[adaptation par modèle auxiliaire|APPMA ou LoRA]]) et la[[Génération augmentée d'information contextuelle]] RAG (Retrieval Augmented Generation).
Pour le peaufinage de grands modèles de langues, il existe deux techniques principales : l'[[adaptation par modèle auxiliaire]] ([[adaptation par modèle auxiliaire|APMA]]) en anglais LoRA (Low Rank Adaptation) et la [[Génération augmentée d'information applicative]] (GAIA), en anglais ''Retrieval Augmented Generation'' (RAG).


Voir l'entrée [[modèle de langue]] pour des explications sur la nuance entre modèle de langues et modèles de langage.  
Voir l'entrée [[modèle de langue]] pour des explications sur la nuance entre modèle de langues et modèles de langage.  


== Français ==
== Français ==
Ligne 29 : Ligne 28 :




<small>
==Sources==


[https://huggingface.co/docs/autotrain/llm_finetuning Source : Hugging Face]
[https://huggingface.co/docs/autotrain/llm_finetuning Source : Hugging Face]

Dernière version du 18 juin 2024 à 13:20

Définition

Application de la technique de peaufinage à l'amélioration des performances d'un grand modèle de langues.

Compléments

Pour le peaufinage de grands modèles de langues, il existe deux techniques principales : l'adaptation par modèle auxiliaire (APMA) en anglais LoRA (Low Rank Adaptation) et la Génération augmentée d'information applicative (GAIA), en anglais Retrieval Augmented Generation (RAG).

Voir l'entrée modèle de langue pour des explications sur la nuance entre modèle de langues et modèles de langage.

Français

peaufinage de grand modèle de langues

réglage fin de grand modèle de langues

ajustement fin de grand modèle de langues

Anglais

large language model fine-tuning

large language model fine tuning

large language model finetuning

LLM fine-tuning

LLM fine tuning

LLM finetunning


Sources

Source : Hugging Face

Source : Medium

Source : Wikipedia