« Régression de crête » : différence entre les versions


m (Imeziani a déplacé la page Ridge Regression vers Régression de crête)
m (Remplacement de texte : « ↵<small> » par «  ==Sources== »)
 
(3 versions intermédiaires par 2 utilisateurs non affichées)
Ligne 1 : Ligne 1 :
==en construction==
== Définition ==
Technique d’analyse de données de régression multiples avec multicolinéarité. Lorsque la [[multicollinéarité]] est avérée, les estimations des [[moindres carrés]] sont sans biais, mais leurs variances étant importantes, elles peuvent être loin de la valeur réelle.


== Définition ==
En ajoutant un degré de biais aux estimations de régression, la régression de crête réduit les erreurs standard. Espérant ainsi que l’effet net sera de donner des estimations plus fiables.
XXXXXXXXX


== Français ==
== Français ==
''' XXXXXXXXX '''
''' régression de crête '''


== Anglais ==
== Anglais ==
''' Ridge Regression'''
''' ridge regression'''
 
Ridge regression for neural networks performs regularization during the training phase with the L2 norm, i.e. it adds a term which is the sum of squares of the weights to the objective (loss) function being minimized. Thus, ridge regression minimizes the following during training: Objective = base_loss(weights) + alpha * (sum of squares of the weights) The base_loss will depend on the underling task (e.g. cross-entropy loss for classification) and alpha is generally adjusted during model validation, and is called the regularization parameter. Ridge regression is also called weight decay.




<small>


==Sources==


[https://deepai.org/machine-learning-glossary-and-terms/ridge-regression  Source : DeepAI.org ]


[[Catégorie:DeepAI.org]]
[https://analyticsinsights.io/top-5-des-types-de-regression/  Source : Analytics Insights ]




[[Catégorie:vocabulary]]
[[Catégorie:GRAND LEXIQUE FRANÇAIS]]

Dernière version du 28 janvier 2024 à 13:17

Définition

Technique d’analyse de données de régression multiples avec multicolinéarité. Lorsque la multicollinéarité est avérée, les estimations des moindres carrés sont sans biais, mais leurs variances étant importantes, elles peuvent être loin de la valeur réelle.

En ajoutant un degré de biais aux estimations de régression, la régression de crête réduit les erreurs standard. Espérant ainsi que l’effet net sera de donner des estimations plus fiables.

Français

régression de crête

Anglais

ridge regression


Sources

Source : Analytics Insights



Contributeurs: Imane Meziani, wiki