Corrélation et visualisation
Prérequis : Les données et leur description
- calculer et interpréter un coefficient de corrélation ;
- reconnaître ce que la corrélation ne mesure pas (liens non linéaires) et ce qui la fausse (valeurs aberrantes) ;
- distinguer corrélation et causalité, et reconnaître une variable confondante ;
- choisir un graphique adapté à la question posée.
Le nuage de points
Section intitulée « Le nuage de points »Pour savoir si deux variables quantitatives sont liées, le premier réflexe est de dessiner un nuage de points : une variable en abscisse, l’autre en ordonnée, un point par individu. On y voit d’un coup d’œil la forme du lien, sa force, et les points qui sortent du lot.
Le coefficient de corrélation
Section intitulée « Le coefficient de corrélation »Le coefficient de corrélation de Pearson, noté , résume en un nombre la force d’un lien linéaire :
- est toujours entre −1 et 1 ;
- : les points sont exactement alignés sur une droite qui monte ; : sur une droite qui descend ;
- : aucune tendance linéaire.
Faites varier la force du lien, puis essayez les deux pièges :
- Relation en parabole : dépend entièrement de , et pourtant . La corrélation ne voit que les droites.
- Un point aberrant : un seul point bien placé peut faire passer de 0,7 à une valeur négative. La corrélation n’est pas robuste.
Le carré s’interprète comme la part de la variance de « expliquée » par une droite en : avec , la droite n’en explique que la moitié ().
🎓 Pour aller plus loin : formule, Spearman et matrice de corrélation
C’est la covariance « normalisée » : elle ne dépend pas des unités. La pente de la droite des moindres carrés vaut .
La corrélation de Spearman applique la même formule aux rangs des valeurs (1ᵉʳ, 2ᵉ, 3ᵉ…) plutôt qu’aux valeurs elles-mêmes. Elle mesure un lien monotone (qui monte ou descend toujours, sans être forcément une droite) et résiste aux valeurs extrêmes.
Avec pandas : df.corr() (Pearson) ou df.corr(method="spearman"), et sns.heatmap(df.corr(), annot=True) pour visualiser toutes les paires d’un coup. C’est un outil classique d’exploration : deux variables très corrélées apportent presque la même information.
Le quartet d’Anscombe
Section intitulée « Le quartet d’Anscombe »En 1973, le statisticien Francis Anscombe a construit quatre jeux de 11 points qui ont les mêmes moyennes, variances, corrélation et droite de régression, à deux décimales près. Devinez à quoi ils ressemblent, puis affichez-les :
Un seul des quatre (le jeu I) correspond à ce qu’on imagine en lisant « ». Le jeu II est une courbe, le III une droite parfaite dérangée par un point, le IV ne doit sa corrélation qu’à un seul point. Les résumés ne remplacent pas les graphiques.
Corrélation n’est pas causalité
Section intitulée « Corrélation n’est pas causalité »Dans les stations balnéaires, les ventes de glaces et le nombre de noyades sont fortement corrélées. Les glaces provoquent-elles des noyades ? Non : la chaleur fait augmenter les deux. La chaleur est une variable confondante.
Une variable confondante peut même inverser une tendance. Dans l’exemple suivant, sur l’ensemble des personnes, plus on fait de sport, plus le cholestérol semble élevé :
En séparant par tranche d’âge, la tendance s’inverse dans chaque groupe. Les personnes âgées font en moyenne plus de sport (elles ont plus de temps) et ont plus de cholestérol (à cause de l’âge). C’est le paradoxe de Simpson.
Pour la data science, deux leçons :
- Un modèle prédictif exploite les corrélations, causales ou non. C’est suffisant pour prédire, mais pas pour décider d’agir : si le modèle a appris « les clients qui reçoivent l’offre achètent plus », ce n’est peut-être pas l’offre qui les fait acheter, mais le fait qu’on l’envoie aux meilleurs clients.
- Pour établir une cause, il faut une expérience contrôlée (un essai randomisé, un test A/B) ou des méthodes d’inférence causale qui dépassent ce cours.
Choisir le bon graphique
Section intitulée « Choisir le bon graphique »| Question | Graphique |
|---|---|
| Comment se répartit une variable quantitative ? | histogramme, boîte à moustaches |
| Comment se répartit une variable qualitative ? | diagramme en barres (triées) |
| Deux variables quantitatives sont-elles liées ? | nuage de points |
| Une variable quantitative diffère-t-elle selon les groupes ? | boîtes à moustaches côte à côte |
| Comment évolue une grandeur dans le temps ? | courbe |
| Toutes les paires de variables d’un coup ? | matrice de corrélation (heatmap), sns.pairplot |
Quelques règles de bonne pratique : un axe vertical de barres commence à zéro ; une couleur a une signification (une classe, un groupe) et une seule ; on évite les camemberts au-delà de 3 ou 4 parts ; chaque graphique a un titre et des axes nommés, avec leurs unités.
import seaborn as sns
sns.scatterplot(data=df, x="surface", y="prix", hue="ville") # nuage coloré par groupesns.pairplot(df, hue="espece") # toutes les paires de variablessns.heatmap(df.corr(numeric_only=True), annot=True, cmap="coolwarm", vmin=-1, vmax=1)L’ACP résume les 13 variables des vins en 2 axes ; les flèches montrent quelles variables vont ensemble (corrélées).
→✅ Vérifiez vos acquis