GML comme juge - Historique des versions

Patrickdrouin le 21 avril 2026 à 19:09

2026-04-21T19:09:23Z

← Version précédente		Version du 21 avril 2026 à 15:09
Ligne 1 :		Ligne 1 :
	== Définition ==		== Définition ==
	~~Une (famille~~ de~~) technique(s)~~ de '''[[traitement automatique de la langue naturelle]]''' qui utilise un '''[[grand modèle de langues (GML)]]''' pour évaluer le travail d'un autre GML.		Ensemble de techniques de '''[[traitement automatique de la langue naturelle]]''' qui utilise un '''[[grand modèle de langues (GML)]]''' pour évaluer le travail d'un autre GML.

	== Compléments ==		== Compléments ==

Patrickdrouin le 21 avril 2026 à 19:08

2026-04-21T19:08:19Z

← Version précédente		Version du 21 avril 2026 à 15:08
Ligne 22 :		Ligne 22 :

	== Sources ==		== Sources ==
	[https://hal.science/hal-04782667v1/file/Techniques%20d%27audit%20des%20LLM%20VF%20HAL.pdf Duprieu et Berkouk 2024 - GML comme juge]		[https://hal.science/hal-04782667v1/file/Techniques%20d%27audit%20des%20LLM%20VF%20HAL.pdf Duprieu et Berkouk (2024) - GML comme juge]

	[https://arxiv.org/abs/2411.15594 Source : arxiv]		[https://arxiv.org/abs/2411.15594 Source : arxiv]

Patrickdrouin : Patrickdrouin a déplacé la page GML en tant que juge vers GML comme juge par-dessus une redirection

2026-04-21T19:06:41Z

Patrickdrouin a déplacé la page GML en tant que juge vers GML comme juge par-dessus une redirection

← Version précédente	Version du 21 avril 2026 à 15:06
(Aucune différence)

Patrickdrouin le 21 avril 2026 à 19:06

2026-04-21T19:06:23Z

← Version précédente		Version du 21 avril 2026 à 15:06
Ligne 1 :		Ligne 1 :
	== Définition ==		== Définition ==
	Une (famille de) technique(s) de '''[[traitement automatique de la langue naturelle]]''' qui utilise un '''[[grand modèle de langues (GML)]]''' pour évaluer le travail d'un autre GML. Une '''[[requête générative\|requête]]''' effectuée dans le cadre d'une évaluation par un GML comporte en général les trois éléments suivants: le contexte de la tâche et les textes à évaluer, une explication des critères d'évaluation et un format de réponse qui encode la décision du « GML juge ».		Une (famille de) technique(s) de '''[[traitement automatique de la langue naturelle]]''' qui utilise un '''[[grand modèle de langues (GML)]]''' pour évaluer le travail d'un autre GML.

	== Compléments ==		== Compléments ==
	*Important: Cette technique ne supprime pas la nécessité du jugement humain!		Une '''[[requête générative\|requête]]''' effectuée dans le cadre d'une évaluation par un GML comporte en général les trois éléments suivants: le contexte de la tâche et les textes à évaluer, une explication des critères d'évaluation et un format de réponse qui encode la décision du « GML juge ».
	*Les GML (comme juge) performants peuvent établir une corrélation étroite avec les jugements humains sur de nombreuses tâches. Cependant, ils présentent des biais systématiques et des ~~modes de défaillance~~.
	*~~La tâche~~ peut ~~comporter~~ un ou plusieurs textes de référence~~, ou non~~.		*Important: Cette technique ne supprime pas la nécessité du jugement humain.
			*Les GML (comme juge) performants peuvent établir une corrélation étroite avec les jugements humains sur de nombreuses tâches. Cependant, ils présentent des biais systématiques et des défaillances.
			*Dans certains cas, on peut donner au GML qui sert de juge un ou plusieurs textes de référence.

	== Français ==		== Français ==
			''' GML comme juge'''

	''' GML en tant que juge'''		''' GML en tant que juge'''

	~~''' GML comme juge'''~~

	== Anglais ==		== Anglais ==
Ligne 20 :		Ligne 22 :

	== Sources ==		== Sources ==
			[https://hal.science/hal-04782667v1/file/Techniques%20d%27audit%20des%20LLM%20VF%20HAL.pdf Duprieu et Berkouk 2024 - GML comme juge]

	[https://arxiv.org/abs/2411.15594 Source : arxiv]		[https://arxiv.org/abs/2411.15594 Source : arxiv]

Pitpitt le 7 mars 2026 à 23:11

2026-03-07T23:11:05Z

← Version précédente		Version du 7 mars 2026 à 19:11
Ligne 1 :		Ligne 1 :
	~~== en construction ==~~

	== Définition ==		== Définition ==
	Une (famille de) technique(s) de '''[[traitement automatique de la langue naturelle]]''' qui utilise un '''[[grand modèle de langues (GML)]]''' pour évaluer le travail d'un autre GML. Une '''[[requête générative\|requête]]''' effectuée dans le cadre d'une évaluation par un GML comporte en général les trois éléments suivants: le contexte de la tâche et les textes à évaluer, une explication des critères d'évaluation et un format de réponse qui encode la décision du « GML juge ».		Une (famille de) technique(s) de '''[[traitement automatique de la langue naturelle]]''' qui utilise un '''[[grand modèle de langues (GML)]]''' pour évaluer le travail d'un autre GML. Une '''[[requête générative\|requête]]''' effectuée dans le cadre d'une évaluation par un GML comporte en général les trois éléments suivants: le contexte de la tâche et les textes à évaluer, une explication des critères d'évaluation et un format de réponse qui encode la décision du « GML juge ».
Ligne 28 :		Ligne 26 :
	[https://en.wikipedia.org/wiki/LLM-as-a-Judge Source : Wikipedia]		[https://en.wikipedia.org/wiki/LLM-as-a-Judge Source : Wikipedia]

	[[Catégorie:~~publication~~]]		[[Catégorie:GRAND LEXIQUE FRANÇAIS]]

Arianne le 6 mars 2026 à 20:15

2026-03-06T20:15:40Z

← Version précédente		Version du 6 mars 2026 à 16:15
Ligne 17 :		Ligne 17 :
	''' LLM-as-a-judge'''		''' LLM-as-a-judge'''

	~~<!--~~A (family of) technique(s) in natural language processing that uses one large language model (LLM) to evaluate another LLM’s work. A typical LLM-as-a-Judge setup consists of three elements: an input that contains the task context and candidate outputs to be evaluated, a prompt that explains the evaluation criteria, and a response format that encodes the judge's decision.		''A (family of) technique(s) in natural language processing that uses one large language model (LLM) to evaluate another LLM’s work. A typical LLM-as-a-Judge setup consists of three elements: an input that contains the task context and candidate outputs to be evaluated, a prompt that explains the evaluation criteria, and a response format that encodes the judge's decision.''

	Strong LLM judges can correlate closely with human judgments on many tasks. However, it has systematic biases and failure modes. The task can have reference(s) or not. But most importantly, it doesn’t eliminate the need for human judgment.~~-->~~		''Strong LLM (judges) can correlate closely with human judgments on many tasks. However, it has systematic biases and failure modes. The task can have reference(s) or not. But most importantly, it doesn’t eliminate the need for human judgment.''

	== Sources ==		== Sources ==

Arianne : Arianne a déplacé la page LLM-as-a-judge vers GML en tant que juge

2026-03-06T20:08:31Z

Arianne a déplacé la page LLM-as-a-judge vers GML en tant que juge

← Version précédente	Version du 6 mars 2026 à 16:08
(Aucune différence)

Arianne le 6 mars 2026 à 20:08

2026-03-06T20:08:14Z

← Version précédente		Version du 6 mars 2026 à 16:08
Ligne 2 :		Ligne 2 :

	== Définition ==		== Définition ==
	~~xxxxxx~~		Une (famille de) technique(s) de '''[[traitement automatique de la langue naturelle]]''' qui utilise un '''[[grand modèle de langues (GML)]]''' pour évaluer le travail d'un autre GML. Une '''[[requête générative\|requête]]''' effectuée dans le cadre d'une évaluation par un GML comporte en général les trois éléments suivants: le contexte de la tâche et les textes à évaluer, une explication des critères d'évaluation et un format de réponse qui encode la décision du « GML juge ».

			== Compléments ==
			*Important: Cette technique ne supprime pas la nécessité du jugement humain!
			*Les GML (comme juge) performants peuvent établir une corrélation étroite avec les jugements humains sur de nombreuses tâches. Cependant, ils présentent des biais systématiques et des modes de défaillance.
			*La tâche peut comporter un ou plusieurs textes de référence, ou non.

	== Français ==		== Français ==
Ligne 23 :		Ligne 28 :
	[https://en.wikipedia.org/wiki/LLM-as-a-Judge Source : Wikipedia]		[https://en.wikipedia.org/wiki/LLM-as-a-Judge Source : Wikipedia]

	[[Catégorie:~~vocabulary~~]]		[[Catégorie:publication]]

Arianne : Page créée avec « == en construction == == Définition == xxxxxx == Français == ''' GML en tant que juge''' ''' GML comme juge''' == Anglais == ''' LLM-as-a-judge'''