Régression Logistique Flashcards et Quiz

Module 1 : Concepts de Base de la Régression Logistique

La régression logistique est une méthode statistique clé utilisée pour la classification binaire. Elle établit une relation entre une variable binaire dépendante et plusieurs variables indépendantes. Bien que son nom contienne le terme 'régression', elle est principalement appliquée aux tâches de classification visant deux catégories de résultats. Cela est essentiel pour comprendre son application dans divers domaines comme le marketing analytique ou la médecine.

• Elle prédit des probabilités pour des issues binaires, en utilisant la fonction sigmoïde.
• Cette fonction transforme les résultats en valeurs comprises entre 0 et 1, facilitant ainsi l'interprétation des résultats.
• La régression logistique est prisée pour sa simplicité et sa facilité d'interprétation dans la prédiction des résultats, par exemple, savoir si un email est du spam.

Module 2 : Principes Mathématiques Clés de la Régression Logistique

La régression logistique est fondée sur des principes mathématiques. La fonction logistique, caractérisée par sa courbe S, cartographie efficacement les valeurs d'entrée dans une plage comprise entre 0 et 1. Son équation est donnée par :

$$S(x) = \frac{1}{1 + e^{-x}}$$

Cette formule reflète la façon dont la fonction réagit aux variations d'entrée. L'objectif est de dériver les poids optimaux qui permettent une distinction efficace entre les deux classes.

• La probabilité de sortie peut être formulée comme : $$P(Y=1|X) = S(W^TX)$$
• Où W indique le vecteur de poids, et X le vecteur de caractéristiques d'entrée.
• L'estimation du maximum de vraisemblance (EMV) est clé pour estimer ces poids.