{"id":1807,"date":"2020-08-25T07:31:33","date_gmt":"2020-08-25T06:31:33","guid":{"rendered":"https:\/\/www.gironi.it\/blog\/?p=1807"},"modified":"2026-10-06T08:50:52","modified_gmt":"2026-10-06T07:50:52","slug":"regressione-lineare-semplice","status":"publish","type":"post","link":"https:\/\/www.gironi.it\/blog\/regressione-lineare-semplice\/","title":{"rendered":"Regressione lineare semplice e correlazione: retta, r di Pearson e R\u00b2"},"content":{"rendered":"\n<p class=\"wp-block-paragraph\">Pi\u00f9 fa caldo, pi\u00f9 gelati si vendono: lo sospettiamo tutti. Ma <em>di quanto<\/em>? Se domani il termometro segna 27 gradi, quanti gelati conviene preparare? E, spostandoci sul nostro terreno: se alziamo il budget delle campagne, quante conversioni in pi\u00f9 possiamo aspettarci?<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Concetti come la <a href=\"https:\/\/www.gironi.it\/blog\/statistica-descrittiva-misure-di-posizione\/\">media<\/a> o la <a href=\"https:\/\/www.gironi.it\/blog\/statistica-descrittiva-misure-di-dispersione-o-variabilita\/\">deviazione standard<\/a> descrivono una variabile alla volta. Per domande come queste, invece, <strong>dobbiamo guardare due variabili insieme<\/strong>: \u00e8 il mestiere della <strong>correlazione<\/strong> e della <strong>regressione lineare semplice<\/strong>, due degli strumenti pi\u00f9 usati (e pi\u00f9 fraintesi) dell&#8217;analisi dei dati.<\/p>\n\n\n\n<!--more-->\n\n\n\n<p class=\"wp-block-paragraph\"><strong>In sintesi:<\/strong> la <strong>regressione lineare semplice<\/strong> descrive il legame fra una variabile dipendente y e una sola variabile indipendente x con una retta, y = b + m\u00b7x, scelta con il <strong>metodo dei minimi quadrati<\/strong> (la retta che rende minima la somma dei quadrati dei residui). La pendenza m dice di quanto cambia in media y quando x aumenta di un&#8217;unit\u00e0. Il <strong>coefficiente di correlazione r di Pearson<\/strong>, fra \u22121 e +1, misura forza e direzione della relazione lineare; il <strong>coefficiente di determinazione R\u00b2<\/strong> indica la quota di variabilit\u00e0 di y spiegata dal modello (con un solo predittore, R\u00b2 = r\u00b2). Una correlazione forte non dimostra un rapporto di causa ed effetto. In R si usano <code>cor()<\/code> e <code>lm()<\/code>.<\/p>\n\n\n\n<div style=\"border: 1px solid #ccc;padding: 1.2em 1.5em;margin: 1.5em 0;border-radius: 6px\">\n<h3 style=\"margin-top: 0\">Di cosa parleremo<\/h3>\n<ul>\n<li><a href=\"#la-regressione-semplice\">Cos&#8217;\u00e8 la regressione lineare semplice?<\/a><\/li>\n<li><a href=\"#coefficiente-correlazione-pearson\">Come si calcola il coefficiente di correlazione di Pearson?<\/a><\/li>\n<li><a href=\"#coefficiente-determinazione-r2\">Cosa misura il coefficiente di determinazione R&sup2;?<\/a><\/li>\n<li><a href=\"#equazione-di-regressione\">Come si trova la retta di regressione?<\/a><\/li>\n<li><a href=\"#caso-studio-ads-conversioni\">Un caso studio: spesa pubblicitaria e conversioni<\/a><\/li>\n<li><a href=\"#valori-anomali-punti-influenza\">Valori anomali e punti di influenza<\/a><\/li>\n<li><a href=\"#assunzioni-del-modello\">Le assunzioni del modello<\/a><\/li>\n<li><a href=\"#analisi-dei-residui\">Analisi dei residui<\/a><\/li>\n<li><a href=\"#difficolta-pratiche\">Le difficolt&agrave; pratiche<\/a><\/li>\n<li><a href=\"#altri-coefficienti-correlazione\">Altri coefficienti di correlazione<\/a><\/li>\n<li><a href=\"#prova-tu\">Prova tu<\/a><\/li>\n<li><a href=\"#domande-frequenti\">Domande frequenti<\/a><\/li>\n<\/ul>\n<\/div>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"la-regressione-semplice\">Cos\u2019\u00e8 la regressione lineare semplice?<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Possiamo considerare la <strong>regressione<\/strong> come un metodo idoneo a ricercare una relazione matematica che esprima un legame tra un carattere y (la <em><strong>variabile dipendente <\/strong><\/em><em><strong>o variabile responso<\/strong><\/em>) ed un carattere x (<em><strong>variabile indipendente <\/strong><\/em><em><strong>o variabile predittiva<\/strong><\/em>).<\/p>\n\n\n\n<p class=\"wp-block-paragraph\"><strong>Il primo passo utile per indagare qualitativamente l&#8217;eventuale dipendenza fra due variabili x e y consiste sempre nel disegnare un grafico, chiamato diagramma di dispersione (<em>scatterplot<\/em>).<\/strong><\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Poniamo in ascissa i dati relativi a una delle due variabili, in ordinata quelli relativi all&#8217;altra variabile e rappresentiamo con dei punti le singole osservazioni. Ricordiamo infatti che i grafici a dispersione confrontano due variabili.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Se esiste una relazione semplice fra le due variabili, il diagramma dovrebbe mostrarla!<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Usiamo dei valori di esempio e lasciamo a R il compito di tracciare a video il nostro diagramma di dispersione.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Riporto in un file csv dei dati di fantasia relativi a una ipotetica correlazione tra la temperatura ambientale registrata nella mia citt\u00e0 e le vendite di gelati. Chiamo il file <em>gelati.csv<\/em> e lo salvo come pure testo in una cartella qualsiasi del mio filesystem (nel mio esempio in <em>tmp\/gelati.csv<\/em>). Il file avr\u00e0 questo contenuto:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>temperatura,gelati\n25,58\n30,70\n29,61\n26,53\n25,48\n28,66\n24,47\n22,47\n20,40\n18,29\n22,33<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">Ora apro R Studio e carico il mio dataset:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>gelati &lt;- read.csv(\"\/tmp\/gelati.csv\")<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">Poi traccio il grafico scatterplot per vedere se la figura \u00e8 compatibile con una ipotesi di regressione lineare:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>plot(gelati)<\/code><\/pre>\n\n\n\n<figure class=\"wp-block-image size-large is-resized\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/diagramma-a-dispersione.png\" alt=\"Scatterplot\" class=\"wp-image-1810\" width=\"641\" height=\"405\" srcset=\"https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/diagramma-a-dispersione.png 855w, https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/diagramma-a-dispersione-300x189.png 300w\" sizes=\"auto, (max-width: 709px) 85vw, (max-width: 909px) 67vw, (max-width: 984px) 61vw, (max-width: 1362px) 45vw, 600px\" \/><figcaption>il diagramma a dispersione che rappresenta le variabili temperatura e numero di gelati venduti.<\/figcaption><\/figure>\n\n\n\n<p class=\"wp-block-paragraph\">Il diagramma mostra una evidente correlazione di tipo lineare, con tendenza ascendente.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"coefficiente-correlazione-pearson\">Come si calcola il coefficiente di correlazione di Pearson?<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Esistono in statistica svariati tipi di coefficienti di correlazione.<strong> Qualora la relazione da indagare sia tra due <a href=\"https:\/\/www.gironi.it\/blog\/i-dati-scale-di-misura\/\" class=\"rank-math-link\">variabili di tipo intervallo oppure rapporto<\/a> (si tratta quindi di variabili di tipo quantitativo, numeriche), il pi\u00f9 noto e il pi\u00f9 usato \u00e8 certamente il coefficiente di correlazione di Pearson<\/strong>, generalmente indicato con la lettera <em>r<\/em>.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Uso il linguaggio R (da non confondere con il coefficiente <em>r<\/em>) per un esempio pratico con il coefficiente di correlazione di Pearson. <br>La funzione da utilizzare \u00e8 cor():<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>cor(gelati$temperatura,gelati$gelati)\n\n[1] 0.9320279<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">Come si vede la correlazione in questo esempio \u00e8 davvero molto forte.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\"><em><strong>r<\/strong><\/em> infatti \u00e8 un <strong>valore standardizzato e va da +1 a -1<\/strong>. Pi\u00f9 si allontana da zero e si avvicina a 1 (o a -1 in caso di correlazione negativa), pi\u00f9 \u00e8 forte la correlazione.<\/p>\n\n\n\n<p class=\"has-light-gray-background-color has-background wp-block-paragraph\">Se r \u00e8 positivo la correlazione \u00e8 positiva, cio\u00e8 y aumenta all\u2019aumentare di x .<br>Se r \u00e8 negativo, y diminuisce all\u2019aumentare di x.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Ma quando posso dire che una correlazione \u00e8 forte o molto forte e quando moderata o addirittura nulla? La risposta \u00e8&#8230;dipende \ud83d\ude42<br>Non esiste una risposta standard. In maniera molto arbitraria possiamo dire che in genere una correlazione sotto a 0.20 (o per meglio dire, tra -0.2 e +0.2) \u00e8 considerata molto debole, tra 0.2 e 0.5 (o tra -0.2 e -0.5) moderata, tra 0.5 e 0.8 (o tra -0.5 e -0.8) piuttosto forte. Correlazioni superiori a 0.8 o inferiori a -0.8, molto forti, sono in realt\u00e0 abbastanza rare.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\"><strong><em>ATTENZIONE 1<\/em><\/strong> : <strong>La cosa in realt\u00e0 pi\u00f9 importante \u00e8 che l&#8217;evidenza di una relazione tra due variabili non implica necessariamente la presenza di un rapporto di causa effetto tra le due variabili. E&#8217; un punto della massima importanza, che va sempre tenuto bene a mente. <\/strong>Entrambe le variabili che nel mio studio mostrano una fortissima correlazione possono in realt\u00e0 dipendere da una terza variabile, o da molte altre variabili, che costituiscono la reale causa. Trovare e calcolare la correlazione tra due variabili \u00e8 relativamente semplice, trovare e soprattutto provare un rapporto di causa ed effetto \u00e8 estremamente complesso!<\/p>\n\n\n\n<p class=\"wp-block-paragraph\"><strong><em>ATTENZIONE 2:<\/em><\/strong> Un altro punto che vorrei sottolineare \u00e8 che <strong>il coefficiente di correlazione r di Pearson misura la correlazione lineare <\/strong>tra due variabili. Questo significa che due variabili possono mostrare una correlazione apparente nulla (<em>r<\/em> circa 0) eppure essere correlate, ad esempio mostrando una <strong>correlazione di tipo curvilineo<\/strong>. Un classico esempio di scuola riguarda la correlazione tra il livello di stress e la prestazione in una prova di esame. Un leggero stress infatti contribuisce a migliorare la prestazione, ma superata una certa soglia risulta del tutto dannoso, portando a un decadimento del risultato. In questo caso, l&#8217;analisi in termini di r e di correlazione lineare porterebbe a scartare una correlazione invece esistente.<\/p>\n\n\n\n<div class=\"wp-block-group bordo has-light-gray-background-color has-background\"><div class=\"wp-block-group__inner-container is-layout-flow wp-block-group-is-layout-flow\">\n<p><b>E ora un po&#8217; di matematica (ma davvero poca)<\/b><\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Il coefficiente di correlazione di Pearson per una popolazione, date due variabili X e Y, si indica con la lettera greca rho ed \u00e8 dato da:<\/p>\n\n\n\n<div class=\"wp-block-group\"><div class=\"wp-block-group__inner-container is-layout-flow wp-block-group-is-layout-flow\">\n\\(\n\\\\\n\\rho_{X,Y}=\\frac{COV(X,Y)}{\\sigma_X \\sigma_Y}\n\\\\\n\\)\n\n\n\n<p>dove:<\/p>\n<ul>\n<li>COV indica la covarianza<\/li>\n<li>&sigma;<sub>X<\/sub> \u00e8 la <a href=\"https:\/\/www.gironi.it\/blog\/statistica-descrittiva-misure-di-dispersione-o-variabilita\/#sqm\">deviazione standard<\/a> di X<\/li>\n<li>&sigma;<sub>Y<\/sub> \u00e8 la <a href=\"https:\/\/www.gironi.it\/blog\/statistica-descrittiva-misure-di-dispersione-o-variabilita\/#sqm\">deviazione standard<\/a> di Y<\/li>\n<\/ul>\n\n\n\n<p class=\"wp-block-paragraph\">Per calcolare la covarianza della popolazione (che, ricordiamo, \u00e8 una misura <em>non standardizzata<\/em> della direzione e della forza della relazione tra gli elementi di due popolazioni):<\/p>\n\n\n\n\\(\n\\sigma_{XY}=\\frac{\\sum\\limits_{i=1}^n (X_i-\\mu_x)(Y_i-\\mu_y)}{n}\n\\\\\n\\)\n\n\n\n<p class=\"wp-block-paragraph\">dove:<\/p>\n\n\n\n<ul>\n<li>\u03bc<sub>x<\/sub> \u00e8 la media della popolazione per x<\/li>\n<li>\u03bc<sub>y<\/sub> \u00e8 la media della popolazione per y<\/li>\n<li>n \u00e8 il numero di elementi in entrambe le variabili<\/li>\n<li>i \u00e8 l&#8217;indice che va da 1 a n<\/li>\n<li>X<sub>i<\/sub> \u00e8 un singolo elemento della popolazione x<\/li><li>Y<sub>i<\/sub> \u00e8 un singolo elemento della popolazione y<\/li><\/ul>\n\n\n\n<p class=\"wp-block-paragraph\"><strong>Attenzione<\/strong>: quando lavoriamo su un campione e vogliamo stimare la covarianza della popolazione, al denominatore si usa <em>n-1<\/em>.<br>R usa sempre le versioni campionarie di covarianza e deviazione standard; per r di Pearson, comunque, la scelta non cambia nulla, perch\u00e9 n-1 compare sia sopra sia sotto la frazione e si semplifica.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\"><strong>Tiro fuori la calcolatrice &#8211; o carta e penna &#8211; e faccio un po&#8217; di conti&#8230;<\/strong><\/p>\n\n\n\n<p class=\"wp-block-paragraph\">questa \u00e8 la mia tabella, che ho completato computando i vari valori:<\/p>\n\n\n\n<table border=1 style=\"font-size:11px!important\">\n<tr> <th>  <\/th> <th> temperatura <\/th> <th> gelati <\/th> <th> x<sub>i<\/sub> \u2212 x\u0304 <\/th> <th> y<sub>i<\/sub> \u2212 \u0233 <\/th> <th> (x<sub>i<\/sub> \u2212 x\u0304)\u00b7(y<sub>i<\/sub> \u2212 \u0233)<\/th>  <\/tr>\n  <tr> <td align=\"right\"> 1 <\/td> <td align=\"right\">  25 <\/td> <td align=\"right\">  58 <\/td> <td align=\"right\"> 0.55 <\/td> <td align=\"right\"> 7.82 <\/td> <td align=\"right\"> 4.26 <\/td> <\/tr>\n  <tr> <td align=\"right\"> 2 <\/td> <td align=\"right\">  30 <\/td> <td align=\"right\">  70 <\/td> <td align=\"right\"> 5.55 <\/td> <td align=\"right\"> 19.82 <\/td> <td align=\"right\"> 109.90 <\/td> <\/tr>\n  <tr> <td align=\"right\"> 3 <\/td> <td align=\"right\">  29 <\/td> <td align=\"right\">  61 <\/td> <td align=\"right\"> 4.55 <\/td> <td align=\"right\"> 10.82 <\/td> <td align=\"right\"> 49.17 <\/td> <\/tr>\n  <tr> <td align=\"right\"> 4 <\/td> <td align=\"right\">  26 <\/td> <td align=\"right\">  53 <\/td> <td align=\"right\"> 1.55 <\/td> <td align=\"right\"> 2.82 <\/td> <td align=\"right\"> 4.36 <\/td> <\/tr>\n  <tr> <td align=\"right\"> 5 <\/td> <td align=\"right\">  25 <\/td> <td align=\"right\">  48 <\/td> <td align=\"right\"> 0.55 <\/td> <td align=\"right\"> -2.18 <\/td> <td align=\"right\"> -1.19 <\/td> <\/tr>\n  <tr> <td align=\"right\"> 6 <\/td> <td align=\"right\">  28 <\/td> <td align=\"right\">  66 <\/td> <td align=\"right\"> 3.55 <\/td> <td align=\"right\"> 15.82 <\/td> <td align=\"right\"> 56.08 <\/td> <\/tr>\n  <tr> <td align=\"right\"> 7 <\/td> <td align=\"right\">  24 <\/td> <td align=\"right\">  47 <\/td> <td align=\"right\"> -0.45 <\/td> <td align=\"right\"> -3.18 <\/td> <td align=\"right\"> 1.45 <\/td> <\/tr>\n  <tr> <td align=\"right\"> 8 <\/td> <td align=\"right\">  22 <\/td> <td align=\"right\">  47 <\/td> <td align=\"right\"> -2.45 <\/td> <td align=\"right\"> -3.18 <\/td> <td align=\"right\"> 7.81 <\/td> <\/tr>\n  <tr> <td align=\"right\"> 9 <\/td> <td align=\"right\">  20 <\/td> <td align=\"right\">  40 <\/td> <td align=\"right\"> -4.45 <\/td> <td align=\"right\"> -10.18 <\/td> <td align=\"right\"> 45.36 <\/td> <\/tr>\n  <tr> <td align=\"right\"> 10 <\/td> <td align=\"right\">  18 <\/td> <td align=\"right\">  29 <\/td> <td align=\"right\"> -6.45 <\/td> <td align=\"right\"> -21.18 <\/td> <td align=\"right\"> 136.72 <\/td> <\/tr>\n  <tr> <td align=\"right\"> 11 <\/td> <td align=\"right\">  22 <\/td> <td align=\"right\">  33 <\/td> <td align=\"right\"> -2.45 <\/td> <td align=\"right\"> -17.18 <\/td> <td align=\"right\"> 42.17 <\/td> <\/tr>\n   <\/table>\n\n\n\n<p class=\"wp-block-paragraph\">La somma dei valori dell&#8217;ultima colonna \u00e8 456.0909.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Posso quindi calcolare la covarianza dividendo per n-1 = 10, quindi:<br>456.0909\/10 = 45.60909<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Calcolando le deviazioni standard campionarie per X e Y, trovo i valori:<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">S<sub>x<\/sub> = 3,751363<br>S<sub>y<\/sub> = 13,04468<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Quindi S<sub>x<\/sub> * S<sub>y<\/sub> = 48,9353299<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Ultimo passaggio. <strong>Posso calcolare r<\/strong>:<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">45,60909 \/ 48,9353299 = 0,9320278435<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">che come si vede coincide perfettamente con il valore fornito dalla funzione cor() di R.<\/p>\n<\/div><\/div>\n<\/div><\/div>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"coefficiente-determinazione-r2\">Cosa misura il coefficiente di determinazione R<sup>2<\/sup>?<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Elevando <em><strong>r<\/strong><\/em> al quadrato otteniamo il <strong>coefficiente di determinazione<\/strong>.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Nel nostro caso il coefficiente di determinazione r<sup>2 <\/sup>sar\u00e0:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>R-squared = 0.86868<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">ma cosa significa questo numero?<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">r<sup>2<\/sup> ci segnala in quale misura la nostra equazione di regressione riproduce la varianza dei dati.<br>Detta in altri termini, quanta parte della variazione della variabile responso \u00e8 spiegata dalla variabile predittiva. Pi\u00f9 \u00e8 accurata l\u2019equazione di regressione, pi\u00f9 il valore di r<sup>2 <\/sup>tende a 1.<\/p>\n\n\n\n<p class=\"has-light-gray-background-color has-background wp-block-paragraph\">Con un solo predittore il coefficiente di determinazione \u00e8 letteralmente il quadrato di r: 0,932\u00b2 = 0,869. La temperatura spiega quindi circa l&#8217;<strong>87% della variabilit\u00e0<\/strong> delle vendite, e il restante 13% dipende da tutto ci\u00f2 che il modello non vede.<br>Con pi\u00f9 predittori l&#8217;uguaglianza non vale pi\u00f9, e R\u00b2 cresce ogni volta che si aggiunge una variabile, anche inutile: per questo nella <a href=\"https:\/\/www.gironi.it\/blog\/regressione-multipla-spiegata-semplice\/\">regressione multipla<\/a> si guarda l&#8217;R\u00b2 corretto.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"equazione-di-regressione\">Come si trova la retta di regressione?<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Il nostro scopo \u00e8 quello di ottenere l\u2019equazione di regressione, e trattandosi di una regressione lineare la forma tipica sar\u00e0:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>y = mx + b<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">m indica la pendenza della retta nel grafico, e si chiama <strong>coefficiente di regressione<\/strong>.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">b \u00e8 il punto in cui la retta interseca l\u2019asse delle y, e si chiama <strong>intercetta<\/strong>.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Ricordiamo sempre che la retta di regressione lineare \u00e8 la retta che meglio si adatta ai dati forniti. Idealmente, vorremmo ridurre al minimo le distanze di tutti i punti dati dalla linea di regressione. Queste distanze sono chiamate <strong>errore <\/strong>e sono anche note come <strong>valori residui<\/strong>. Una buona linea avr\u00e0 piccoli residui.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Adattiamo la linea di regressione ai punti dati in un grafico a dispersione utilizzando il <strong>metodo dei<\/strong><strong> minimi quadrati<\/strong>.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">I calcoli non sono difficili, e vale la pena vederli una volta. La pendenza \u00e8 il rapporto fra la covarianza di x e y e la varianza di x; in modo equivalente, \u00e8 la correlazione r \u00abritradotta\u00bb nelle unit\u00e0 di misura delle due variabili:<\/p>\n\n\n\n\\( m = \\frac{COV(X,Y)}{s_X^2} = r \\cdot \\frac{s_Y}{s_X} \\)\n\n\n\n<p class=\"wp-block-paragraph\">L&#8217;intercetta, poi, si ricava imponendo che la retta passi per il punto medio della nuvola, cio\u00e8 per la coppia delle due medie:<\/p>\n\n\n\n\\( b = \\bar{y} &#8211; m \\cdot \\bar{x} \\)\n\n\n\n<p class=\"wp-block-paragraph\">Con i numeri gi\u00e0 calcolati nel box sul coefficiente di Pearson: m = 0,932 \u00d7 13,045 \/ 3,751 = <strong>3,241<\/strong> e b = 50,18 \u2212 3,241 \u00d7 24,45 = <strong>\u221229,07<\/strong>. Nella pratica, per\u00f2, nessuno fa questi conti a mano: tutte le calcolatrici scientifiche evolute e i fogli elettronici hanno una funzione apposita, e in R il processo \u00e8 ancora pi\u00f9 agevole.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Procedo calcolando i parametri della retta di regressione:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code># calcolo i parametri della retta di regressione\nlm(gelati$gelati ~ gelati$temperatura)\n\n\nCall: lm(formula = gelati$gelati ~ gelati$temperatura) \nCoefficients: \n(Intercept) gelati$temperatura \n-29.074     3.241<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">Dunque la mia retta avr\u00e0 equazione:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code><strong>y = 3,241x - 29,074<\/strong><\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">Leggiamola: <strong>ogni grado in pi\u00f9 vale, in media, circa 3,2 gelati venduti in pi\u00f9<\/strong>. E la domanda dell&#8217;inizio trova risposta: a 27 gradi il modello prevede 3,241 \u00d7 27 \u2212 29,07 \u2248 <strong>58 gelati<\/strong>.<br>L&#8217;intercetta, invece, non va presa alla lettera: a zero gradi la retta prevede \u221229 gelati, un numero senza senso. Il motivo \u00e8 semplice, nei dati non c&#8217;\u00e8 nessuna giornata sotto i 18 gradi, e fuori dall&#8217;intervallo osservato la retta non sa nulla. Ci torneremo parlando di <em>estrapolazione<\/em>.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">E\u2019 giunto il momento di tracciare di nuovo il diagramma a dispersione, sovrapponendo la linea di regressione che ho appena trovato:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code># disegno lo scatterplot\nplot(gelati$temperatura,gelati$gelati, main=\"Scatterplot e linea di regressione\",xlab=\"temperatura\", ylab=\"gelati\")\n\n# e traccio la linea di regressione in rosso\nabline(lm(gelati$gelati ~ gelati$temperatura),col=\"red\",lwd=2)<\/code><\/pre>\n\n\n\n<figure class=\"wp-block-image size-large is-resized\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/regressione-lineare.png\" alt=\"Regressione lineare: linea di regressione semplice\" class=\"wp-image-1816\" width=\"641\" height=\"405\" srcset=\"https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/regressione-lineare.png 855w, https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/regressione-lineare-300x189.png 300w\" sizes=\"auto, (max-width: 709px) 85vw, (max-width: 909px) 67vw, (max-width: 984px) 61vw, (max-width: 1362px) 45vw, 600px\" \/><figcaption>la linea di regressione sovrapposta al diagramma a dispersione.<\/figcaption><\/figure>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"caso-studio-ads-conversioni\">Un caso studio: spesa pubblicitaria e conversioni<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Il dataset dei gelati ci ha accompagnato fin qui, ma portiamo ora la regressione nel territorio che ci interessa davvero: il marketing. Abbiamo dodici settimane di campagne Google Ads, e per ogni settimana conosciamo la spesa (in euro) e le conversioni registrate. La domanda &egrave; quella che ogni cliente, prima o poi, ci rivolge: <strong>se aumento il budget, quante conversioni in pi&ugrave; posso aspettarmi?<\/strong><\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>spesa,conversioni\n120,15\n150,14\n95,11\n180,22\n210,20\n160,18\n140,13\n250,26\n190,17\n230,25\n110,13\n175,16<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">Stimo il modello in R:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>dati &lt;- read.csv(\"\/tmp\/ads.csv\")\nmodello &lt;- lm(conversioni ~ spesa, data = dati)\nsummary(modello)\n\nCoefficients:\n            Estimate Std. Error t value Pr(&gt;|t|)\n(Intercept)  1.93098    2.22949   0.866    0.407\nspesa        0.09295    0.01284   7.240 2.79e-05 ***\n\nMultiple R-squared:  0.8398,    Adjusted R-squared:  0.8238<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">Leggiamo i risultati con calma, perch&eacute; ogni numero ha qualcosa da dirci.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">La <strong>pendenza<\/strong> vale 0.093: per ogni euro di spesa in pi&ugrave;, il modello stima 0.093 conversioni aggiuntive. In termini pi&ugrave; chiari e diretti: <strong>una conversione ogni 11 euro circa<\/strong>. Il suo p-value (2.79e-05) ci dice che la relazione &egrave; tutto fuorch&eacute; casuale.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">L&#8217;<strong>intercetta<\/strong> vale 1.93: sarebbero le conversioni attese a spesa zero. Ma attenzione al suo p-value (0.407): non &egrave; statisticamente diversa da zero. Il modello, in altri termini, non ha dati a sufficienza per dirci quanto convertiremmo senza campagne &mdash; logico, visto che non abbiamo nemmeno una settimana a spesa zero nel dataset. Le previsioni fuori dall&#8217;intervallo osservato (95&ndash;250 euro) restano terreno scivoloso.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">L&#8217;<strong>R<sup>2<\/sup> vale 0.84<\/strong>: la spesa spiega l&#8217;84% della variabilit&agrave; delle conversioni settimanali. Il restante 16% &egrave; tutto ci&ograve; che il modello non vede: stagionalit&agrave;, qualit&agrave; degli annunci, concorrenza, giorni di pioggia.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">A questo punto la previsione &egrave; un giochetto da ragazzi. Quante conversioni a 200 euro di spesa? Calcolo in R:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>predict(modello, data.frame(spesa = 200))\n# 20.52<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\"><strong>Un avvertimento, prima di portare questo numero in una riunione.<\/strong> La regressione descrive un&#8217;<em>associazione<\/em>, non dimostra una causa. Se il budget veniva alzato proprio nelle settimane di domanda alta (saldi, stagionalit&agrave;), parte di quella pendenza appartiene alla domanda, non alle campagne. Per stabilire un nesso causale serve un esperimento controllato &mdash; ed &egrave; esattamente il mestiere dell&#8217;<a href=\"https:\/\/www.gironi.it\/blog\/ab-testing\/\">A\/B testing<\/a>.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"valori-anomali-punti-influenza\">Valori anomali e punti di influenza<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Un valore anomalo \u00e8 un&#8217;osservazione estrema che non si adatta alla correlazione generale o al modello di regressione. In pratica, nel nostro grafico vedremo che tali valori anomali, qualora esistano, saranno molto lontani dalla linea di regressione nella direzione y.<br>L&#8217;inclusione di un valore anomalo pu\u00f2 influenzare la pendenza e l&#8217;intercetta y della retta di regressione.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Quando si esamina un grafico a dispersione e si calcola l&#8217;equazione di regressione, vale la pena considerare se le osservazioni anomale debbano essere incluse o meno. Potrebbe infatti trattarsi di errori nei dati \u2013 e allora sarebbero da escludere \u2013 ma anche di valori \u201creali\u201d, e in tal caso si tratta di informazioni della massima importanza per l\u2019analista.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\"><strong>Ma quando possiamo parlare di valori anomali?<\/strong> Non esiste una regola fissa quando si cerca di decidere se includere o meno un valore anomalo nell&#8217;analisi di regressione. Questa decisione dipende dalla dimensione del campione, da quanto \u00e8 estremo il valore anomalo e dalla normalit\u00e0 della distribuzione.<br><br>Per i dati univariati, si pu\u00f2 utilizzare una <strong>regola empirica basata sull\u2019<a href=\"https:\/\/www.gironi.it\/blog\/statistica-descrittiva-misure-di-posizione\/\" class=\"rank-math-link\">intervallo interquartile IQR<\/a><\/strong> per determinare se un punto \u00e8 o meno un valore anomalo.<br><br>Procediamo in questo modo:<\/p>\n\n\n\n<ul class=\"wp-block-list\"><li>Calcoliamo l\u2019intervallo interquartile per i nostri dati.<\/li><li>Moltiplichiamo l\u2019intervallo interquartile (IQR) per 1,5.<\/li><li>Aggiungiamo 1,5 x (IQR) al terzo quartile.<br>Qualsiasi numero maggiore del valore trovato \u00e8 un dato estremo sospetto.<\/li><li>Sottraiamo 1,5 x (IQR) dal primo quartile. Qualsiasi numero inferiore \u00e8 un dato estremo sospetto.<\/li><\/ul>\n\n\n\n<hr class=\"wp-block-separator\"\/>\n\n\n\n<p class=\"wp-block-paragraph\">Un <strong>punto influente<\/strong>  \u00e8 un punto che, se rimosso, produce un notevole cambiamento nella stima del modello. <strong>Un punto influente pu\u00f2 essere o meno un valore anomalo (<em>outlier<\/em>)<\/strong>.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Il comando influence.measures() fornisce tutta una serie di utili misure di influenza: dfbeta, dffit, covratio, distanza di Cook e punti di <em>leverage<\/em> di tutte le osservazioni:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code># misuro punti di influenza\ninfluence.measures(lm(gelati$gelati ~ gelati$temperatura))<\/code><\/pre>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"assunzioni-del-modello\">Le assunzioni del modello<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Perch\u00e8 il modello di regressione lineare possa risultare effettivamente utilizzabile, devono essere rispettate alcune assunzioni:<\/p>\n\n\n\n<ul class=\"wp-block-list\"><li><strong>Linearit\u00e0<\/strong>: la relazione fra X e Y \u00e8 davvero rettilinea, e non curva.<\/li><li><strong>Distribuzione normale degli errori<\/strong>: gli errori devono avere, per ogni valore di X, una distribuzione normale.<\/li><li><strong>Omoschedasticit\u00e0<\/strong>: la variabilit\u00e0 degli errori \u00e8 costante per ciascun valore di X.<\/li><li><strong>Indipendenza degli errori<\/strong>: gli errori devono essere indipendenti per ciascun valore di X (\u00e8 importante soprattutto per osservazioni nel corso del tempo, nelle quali deve essere verificato che non sia presente autocorrelazione).<\/li><\/ul>\n\n\n\n<p class=\"has-dark-gray-color has-light-gray-background-color has-text-color has-background wp-block-paragraph\">Le assunzioni vanno <strong>sempre verificate<\/strong>, ma non hanno tutte lo stesso peso. Se manca la linearit\u00e0 \u00e8 la retta stessa a essere sbagliata. Con <em>eteroschedasticit\u00e0<\/em> o <em>correlazione seriale<\/em> le stime dei coefficienti restano corrette in media, ma errori standard, p-value e intervalli di confidenza diventano inaffidabili. La <em>non normalit\u00e0 dei residui<\/em>, infine, pesa soprattutto sui campioni piccoli.<br>Le contromisure le vediamo nell&#8217;articolo sulla <a href=\"https:\/\/www.gironi.it\/blog\/multicollinearita-eteroschedasticita-autocorrelazione\/\">diagnostica della regressione<\/a>.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"analisi-dei-residui\">Analisi dei residui<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Il <strong>residuo<\/strong> \u00e8 uguale alla differenza tra valore osservato e il valore previsto di Y.<\/p>\n\n\n\n<ul class=\"wp-block-list\"><li>Per stimare la capacit\u00e0 di adattamento ai dati della retta di regressione \u00e8 opportuna un&#8217;analisi grafica tramite un grafico di dispersione dei residui (in ordinata) e dei valori di X (nelle ascisse).<br>   <\/li><li>Per verificare le assunzioni posso valutare il <strong>grafico dei residui rispetto a X<\/strong>: questo ci consente di stabilire se la variabilit\u00e0 degli errori varia a seconda dei valori di X, confermando o meno l\u2019<strong>assunzione di omoschedasticit\u00e0<\/strong>.<br>   <\/li><li>Per verificare la linearit\u00e0 occorre tracciate il grafico dei residui, in ordinata, rispetto ai valori previsti, in ascissa. I punti dovrebbero essere distribuiti in modo simmetrico intorno ad una linea orizzontale con intercetta uguale a zero. Andamenti diversi indicano la presenza di non linearit\u00e0.<\/li><\/ul>\n\n\n\n<pre class=\"wp-block-code\"><code># guardo la distribuzione dei residui.\n# deve essere bilanciata sopra e sotto la linea di zero.\nlmgelati &lt;- lm(gelati$gelati ~ gelati$temperatura)\nplot (lmgelati$residual ~ lmgelati$fitted, ylab=\"Residui\",\nxlab=\"Fitted\")\nabline(h=0)<\/code><\/pre>\n\n\n\n<figure class=\"wp-block-image size-large is-resized\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/linearita-residui.png\" alt=\"grafico linearit\u00e0 residui\" class=\"wp-image-1830\" width=\"641\" height=\"405\" srcset=\"https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/linearita-residui.png 855w, https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/linearita-residui-300x189.png 300w\" sizes=\"auto, (max-width: 709px) 85vw, (max-width: 909px) 67vw, (max-width: 984px) 61vw, (max-width: 1362px) 45vw, 600px\" \/><figcaption>il grafico dei residui rispetto ai valori previsti.<\/figcaption><\/figure>\n\n\n\n<p class=\"wp-block-paragraph\">Il pacchetto <em>lmtest<\/em> di R ci mette a disposizione il test di Breusch-Pagan per verificare l&#8217;omoschedasticit\u00e0 dei residui:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code># verifico omoschedasticita dei residui\n# utilizzando il test di Breusch-Pagan\nlibrary(lmtest)\ntestbp &lt;- bptest(gelati ~ temperatura, data=gelati)\ntestbp\n\n# BP = 0.33208, df = 1, p-value = 0.5644<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">Il p-value di 0,56 non ci d\u00e0 motivo di rifiutare l&#8217;ipotesi nulla di omoschedasticit\u00e0: la variabilit\u00e0 dei residui appare costante.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Per quanto riguarda la <strong>normalit\u00e0 dei residui<\/strong>, l\u2019<strong>istogramma delle frequenze<\/strong> consente di verificare o meno la condizione.<\/p>\n\n\n\n<figure class=\"wp-block-image size-large is-resized\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/residui-normalita.png\" alt=\"Istogramma dei residui\" class=\"wp-image-1820\" width=\"641\" height=\"405\" srcset=\"https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/residui-normalita.png 855w, https:\/\/www.gironi.it\/blog\/wp-content\/uploads\/2020\/08\/residui-normalita-300x189.png 300w\" sizes=\"auto, (max-width: 709px) 85vw, (max-width: 909px) 67vw, (max-width: 984px) 61vw, (max-width: 1362px) 45vw, 600px\" \/><figcaption>la verifica di normalit\u00e0 dei residui nel nostro esempio, tramite un istogramma.<\/figcaption><\/figure>\n\n\n\n<p class=\"wp-block-paragraph\">Possiamo verificare la normalit\u00e0 dei residui anche numericamente, con il test di Shapiro-Wilk:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code># verifico la normalita della distribuzione degli errori\n# con il test di Shapiro-Wilk\nresidui &lt;- residuals(lm(gelati$gelati ~ gelati$temperatura))\nshapiro &lt;- shapiro.test(residui)\nshapiro\n\n# W = 0.93844, p-value = 0.5023<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">Un controllo che si vede proporre spesso, il test t sulla media dei residui, in realt\u00e0 non serve: quando il modello ha l&#8217;intercetta, i minimi quadrati producono residui con media <em>esattamente<\/em> zero per costruzione, qualunque siano i dati.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Il <strong>grafico dei residui rispetto al tempo<\/strong> (e l\u2019utilizzo della statistica di <em>Durbin-Watson<\/em>) consente invece di evidenziare l\u2019esistenza o meno di <strong>autocorrelazione<\/strong>.<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code># test di Durbin-Watson per l'autocorrelazione\ndwtest(gelati ~ temperatura, data=gelati)\n\n# DW = 1.3644, p-value = 0.07275<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">Il test ha senso solo quando le osservazioni sono in ordine di tempo (giorni, settimane): con dati senza un ordine naturale, l&#8217;autocorrelazione non ha significato. Qui il p-value di 0,07 resta sopra la soglia del 5%.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"difficolta-pratiche\">L\u2019analisi di regressione: difficolt\u00e0 pratiche<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">L\u2019analisi di regressione semplice \u00e8 un modello assai utilizzato, ma molto, molto insidioso. La tendenza generalizzata, infatti, \u00e8 quella di impiegare questo tipo di analisi in maniera poco consapevole e rigorosa \u2013 come ad esempio nell\u2019esempio semplificato che ho proposto \ud83d\ude42<br>Le assunzioni alla base del modello sono piuttosto stringenti, e molto spesso ignorate&#8230;<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Frequentemente, l\u2019analisi viene svolta senza tenere conto del modo in cui tale assunzioni debbono essere valutate oppure si sceglie il semplice modello di regressione semplice lineare al posto di modelli alternativi pi\u00f9 calzanti.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Un altro errore molto comune \u00e8 dato dall\u2019<strong>estrapolazione<\/strong>: si compie cio\u00e8 <strong>una stima di valori esterni all\u2019intervallo dei valori osservati<\/strong>. Questo \u00e8 un grande no-no.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Il consiglio \u00e8 sempre quello di iniziare l\u2019analisi guardando con grande attenzione il diagramma di dispersione e di verificare con attenzione le ipotesi alla base del modello di regressione prima di usare i risultati.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"altri-coefficienti-correlazione\">Altri tipi di coefficienti di correlazione <\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Il coefficiente di correlazione di Pearson \u00e8 sicuramente il pi\u00f9 conosciuto, studiato e usato, ma come abbiamo visto si applica nei casi in cui entrambe le variabili siano di tipo quantitativo, misurate attraverso una scala di tipo intervallo oppure rapporto. Esistono altri metodi che ci consentono di ottenere la misura della correlazione tra variabili di tipo diverso. Tutti condividono la caratteristica di essere concettualmente molto simili al coefficiente r di Pearson.<\/p>\n\n\n\n<h3 class=\"wp-block-heading\">Il coefficiente di correlazione punto-biseriale <\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">Prendiamo il caso di un&#8217;analisi nella quale una delle variabili sia di tipo quantitativo (misurata su una scala intervallo oppure rapporto) e la seconda sia una <strong>variabile categorica a due livelli<\/strong> (o variabile dicotomica). In questo caso ci viene in aiuto il <strong>coefficiente di correlazione punto-biseriale<\/strong>. Non approfondisco in questa sede il concetto, trattandosi di fatto di una versione &#8220;speciale&#8221; del coefficiente di Pearson, lasciando al lettore l&#8217;approfondimento quando richiesto dall&#8217;analisi.<\/p>\n\n\n\n<h3 class=\"wp-block-heading\">Il coefficiente phi<\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">Se dovesse servirci di conoscere se <strong>due variabili dicotomiche sono correlate<\/strong>, potremmo poi ricorrere al <strong>coefficiente phi<\/strong>, un altro caso &#8220;speciale&#8221; del coefficiente r di Pearson. Molti lettori sapranno certamente che due variabili dicotomiche possono anche essere analizzate servendosi di un <a href=\"https:\/\/www.gironi.it\/blog\/il-test-del-chi-quadrato-bonta-di-adattamento-e-test-di-indipendenza\/\" class=\"rank-math-link\">test chi quadrato<\/a>.<\/p>\n\n\n\n<h3 class=\"wp-block-heading\">Il coefficiente di correlazione per ranghi rho di Spearman (e un accenno al tau di Kendall)<\/h3>\n\n\n\nTalvolta poi i dati sono riportati in termini di ranghi. I ranghi sono una forma di dati di tipo ordinale, e dal momento che gli altri tipi di coefficienti di correlazione non trattano questa tipologia di dati, ecco la necessit\u00e0 di introdurre l&#8217;uso del coefficiente rho di Spearman.\nLa correlazione di Spearman segue un approccio semplice e ingegnoso: si converte ogni set di dati in ranghi e quindi si calcola la correlazione. E&#8217; una misura statistica non parametrica di correlazione: l&#8217;unica ipotesi richiesta \u00e8 che le variabili siano ordinabili, e possibilmente continue.\n<p>\nEcco la formula del coefficiente di Spearman:\n<\/p>\n\\(\n\\\\\nr_s=1-\\frac{6\\sum{d}_i^2}{N(N^2-1)}\n\\\\ \\\\\n\\)\n<p>\ndove d<sub>i<\/sub> \u00e8 la differenza fra i due ranghi della stessa osservazione e N il numero di osservazioni. Anche r<sub>s<\/sub> pu\u00f2 assumere valori compresi tra \u20131.00 e +1.00, con gli stessi significati visti per r.\n<\/p>\n<p>\nQuesta formula abbreviata \u00e8 esatta solo se non ci sono ranghi uguali (pareggi). Con i pareggi si calcola direttamente la correlazione di Pearson sui ranghi, ed \u00e8 quello che fa R. Con molti pareggi o con campioni piccoli, inoltre, si preferisce spesso un&#8217;altra statistica: il <b>coefficiente <i>tau<\/i> di Kendall<\/b>.\n<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">In R non servono funzioni diverse: <code>cor()<\/code> calcola tutti e tre i coefficienti, basta indicare il metodo. Calcolo in R, sul nostro esempio dei gelati:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>cor(gelati$temperatura, gelati$gelati, method = \"pearson\")   # 0.932\ncor(gelati$temperatura, gelati$gelati, method = \"spearman\")  # 0.954\ncor(gelati$temperatura, gelati$gelati, method = \"kendall\")   # 0.860<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">Spearman supera di poco Pearson: la relazione \u00e8 <em>monotona<\/em> (a temperatura pi\u00f9 alta corrispondono quasi sempre pi\u00f9 vendite) ancora pi\u00f9 di quanto sia lineare. Il tau di Kendall \u00e8 pi\u00f9 basso perch\u00e9 misura un&#8217;altra cosa (quanto prevalgono le coppie di osservazioni concordanti su quelle discordanti) e tende a dare valori pi\u00f9 bassi di Spearman: i due numeri non vanno confrontati direttamente.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"prova-tu\">Prova tu<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Per fissare il meccanismo, un esercizio con dati finti ma realistici. Dalla Search Console abbiamo estratto dieci keyword con la loro posizione media e il CTR (in percentuale):<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>posizione,ctr\n1.2,28.4\n2.5,19.7\n3.1,15.2\n4.8,9.8\n5.5,8.1\n6.9,5.9\n8.2,4.2\n9.0,3.6\n10.5,2.8\n12.3,1.9<\/code><\/pre>\n\n\n\n<ul class=\"wp-block-list\">\n<li>Stimiamo la retta di regressione del CTR sulla posizione con <code>lm(ctr ~ posizione)<\/code>.<\/li>\n\n\n\n<li>Interpretiamo la pendenza: di quanti punti cala il CTR scendendo di una posizione?<\/li>\n\n\n\n<li>Prevediamo il CTR atteso in posizione 7.<\/li>\n\n\n\n<li>Guardiamo i residui con <code>residuals()<\/code>: che disegno fanno?<\/li>\n<\/ul>\n\n\n\n<p class=\"wp-block-paragraph\">Per controllare i risultati: la pendenza vale circa <strong>&minus;2.15<\/strong> (ogni posizione persa costa due punti di CTR), l&#8217;R<sup>2<\/sup> &egrave; 0.82 e la previsione in posizione 7 &egrave; un CTR dell&#8217;<strong>8.7%<\/strong>. Ma il punto pi&ugrave; istruttivo &egrave; l&#8217;ultimo: i residui sono positivi agli estremi e negativi al centro. &Egrave; il disegno tipico di una <strong>relazione non lineare<\/strong>: il CTR non cala in linea retta, precipita nelle prime posizioni e si appiattisce dopo. La retta &egrave; un&#8217;approssimazione onesta ma grossolana &mdash; e sono proprio i residui, come abbiamo visto, a denunciarlo.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\" id=\"domande-frequenti\">Domande frequenti<\/h2>\n\n\n\n<h3 class=\"wp-block-heading\">Che differenza c&#8217;\u00e8 tra correlazione e regressione?<\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">La correlazione misura quanto due variabili variano insieme ed \u00e8 simmetrica: r fra x e y \u00e8 uguale a r fra y e x. La regressione invece stima un&#8217;equazione per prevedere una variabile (la dipendente) a partire dall&#8217;altra, e scambiare i ruoli cambia la retta.<\/p>\n\n\n\n<h3 class=\"wp-block-heading\">Cosa significa un R\u00b2 di 0,8?<\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">Che il modello spiega l&#8217;80% della variabilit\u00e0 della variabile dipendente; il restante 20% dipende da fattori che il modello non include o dal caso. Un R\u00b2 alto non garantisce che il modello sia corretto, n\u00e9 che il legame sia causale: vanno sempre controllati i residui.<\/p>\n\n\n\n<h3 class=\"wp-block-heading\">Che cos&#8217;\u00e8 il metodo dei minimi quadrati?<\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">\u00c8 il criterio con cui si sceglie la retta di regressione: fra tutte le rette possibili, quella che rende minima la somma dei quadrati delle distanze verticali (i residui) fra i punti osservati e la retta stessa.<\/p>\n\n\n\n<h3 class=\"wp-block-heading\">Una correlazione forte dimostra un rapporto di causa ed effetto?<\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">No. Due variabili possono essere fortemente correlate perch\u00e9 dipendono entrambe da una terza, o per pura coincidenza. Per stabilire un nesso causale serve un esperimento controllato, come un A\/B test, o un disegno di analisi pensato apposta.<\/p>\n\n\n\n<h3 class=\"wp-block-heading\">Quando usare Spearman invece di Pearson?<\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">Quando i dati sono ordinali (ranghi, punteggi, classifiche), quando la relazione \u00e8 monotona ma non lineare, o quando qualche valore estremo rischia di distorcere Pearson. Spearman lavora sui ranghi e risente molto meno dei valori anomali.<\/p>\n\n\n\n<h3 class=\"wp-block-heading\">Regressione lineare semplice o multipla?<\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">La semplice usa un solo predittore, la <a href=\"https:\/\/www.gironi.it\/blog\/regressione-multipla-spiegata-semplice\/\">multipla<\/a> due o pi\u00f9. Quando la variabile da prevedere dipende plausibilmente da pi\u00f9 fattori (spesa, stagionalit\u00e0, dispositivo), la semplice rischia di attribuire a un solo predittore l&#8217;effetto anche degli altri.<\/p>\n\n\n\n<script type=\"application\/ld+json\">{\"@context\": \"https:\/\/schema.org\", \"@type\": \"FAQPage\", \"mainEntity\": [{\"@type\": \"Question\", \"name\": \"Che differenza c'\u00e8 tra correlazione e regressione?\", \"acceptedAnswer\": {\"@type\": \"Answer\", \"text\": \"La correlazione misura quanto due variabili variano insieme ed \u00e8 simmetrica: r fra x e y \u00e8 uguale a r fra y e x. La regressione invece stima un'equazione per prevedere una variabile (la dipendente) a partire dall'altra, e scambiare i ruoli cambia la retta.\"}}, {\"@type\": \"Question\", \"name\": \"Cosa significa un R\u00b2 di 0,8?\", \"acceptedAnswer\": {\"@type\": \"Answer\", \"text\": \"Che il modello spiega l'80% della variabilit\u00e0 della variabile dipendente; il restante 20% dipende da fattori che il modello non include o dal caso. Un R\u00b2 alto non garantisce che il modello sia corretto, n\u00e9 che il legame sia causale: vanno sempre controllati i residui.\"}}, {\"@type\": \"Question\", \"name\": \"Che cos'\u00e8 il metodo dei minimi quadrati?\", \"acceptedAnswer\": {\"@type\": \"Answer\", \"text\": \"\u00c8 il criterio con cui si sceglie la retta di regressione: fra tutte le rette possibili, quella che rende minima la somma dei quadrati delle distanze verticali (i residui) fra i punti osservati e la retta stessa.\"}}, {\"@type\": \"Question\", \"name\": \"Una correlazione forte dimostra un rapporto di causa ed effetto?\", \"acceptedAnswer\": {\"@type\": \"Answer\", \"text\": \"No. Due variabili possono essere fortemente correlate perch\u00e9 dipendono entrambe da una terza, o per pura coincidenza. Per stabilire un nesso causale serve un esperimento controllato, come un A\/B test, o un disegno di analisi pensato apposta.\"}}, {\"@type\": \"Question\", \"name\": \"Quando usare Spearman invece di Pearson?\", \"acceptedAnswer\": {\"@type\": \"Answer\", \"text\": \"Quando i dati sono ordinali (ranghi, punteggi, classifiche), quando la relazione \u00e8 monotona ma non lineare, o quando qualche valore estremo rischia di distorcere Pearson. Spearman lavora sui ranghi e risente molto meno dei valori anomali.\"}}, {\"@type\": \"Question\", \"name\": \"Regressione lineare semplice o multipla?\", \"acceptedAnswer\": {\"@type\": \"Answer\", \"text\": \"La semplice usa un solo predittore, la multipla due o pi\u00f9. Quando la variabile da prevedere dipende plausibilmente da pi\u00f9 fattori (spesa, stagionalit\u00e0, dispositivo), la semplice rischia di attribuire a un solo predittore l'effetto anche degli altri.\"}}]}<\/script>\n\n\n\n<p class=\"wp-block-paragraph\">Una sola variabile, del resto, racconta raramente tutta la storia: le conversioni dipendono dalla spesa, ma anche dalla stagionalit&agrave;, dal dispositivo, dalla forza del brand. Quando i predittori diventano pi&ugrave; di uno, entriamo nel territorio della <a href=\"https:\/\/www.gironi.it\/blog\/regressione-multipla-spiegata-semplice\/\">regressione multipla<\/a> &mdash; il passo successivo del percorso.<\/p>\n\n\n<!-- internal-links-section -->\n<h3>Potrebbe interessarti anche<\/h3>\n<ul>\n<li><a href=\"https:\/\/www.gironi.it\/blog\/anomaly-detection\/\">Anomaly detection: come identificare valori anomali nei dati<\/a><\/li>\n<li><a href=\"https:\/\/www.gironi.it\/blog\/intervalli-di-confidenza\/\">Intervalli di confidenza: cosa sono, come calcolarli (e cosa NON significano)<\/a><\/li>\n<\/ul>\n\n\n<hr class=\"wp-block-separator has-alpha-channel-opacity\"\/>\n\n\n\n<h3 class=\"wp-block-heading\">Per approfondire<\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">Per approfondire la regressione con il rigore che merita &mdash; stima, inferenza, diagnostica &mdash; <a href=\"https:\/\/www.amazon.it\/dp\/8891906190?tag=consulenzeinf-21&#038;ascsubtag=regressione-lineare-semplice\" rel=\"nofollow sponsored noopener\" target=\"_blank\"><em>Introduzione all&#8217;econometria<\/em><\/a> di Stock e Watson &egrave; il manuale di riferimento, con un&#8217;attenzione costante all&#8217;interpretazione dei risultati.<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Pi\u00f9 fa caldo, pi\u00f9 gelati si vendono: lo sospettiamo tutti. Ma di quanto? Se domani il termometro segna 27 gradi, quanti gelati conviene preparare? E, spostandoci sul nostro terreno: se alziamo il budget delle campagne, quante conversioni in pi\u00f9 possiamo aspettarci? Concetti come la media o la deviazione standard descrivono una variabile alla volta. Per &hellip; <a href=\"https:\/\/www.gironi.it\/blog\/regressione-lineare-semplice\/\" class=\"more-link\">Leggi tutto<span class=\"screen-reader-text\"> &#8220;Regressione lineare semplice e correlazione: retta, r di Pearson e R\u00b2&#8221;<\/span><\/a><\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_uag_custom_page_level_css":"","footnotes":""},"categories":[629],"tags":[703,705,707,709,677,711,713],"class_list":["post-1807","post","type-post","status-publish","format-standard","hentry","category-statistica-it","tag-coefficiente-di-determinazione-it","tag-correlazione-it","tag-grafico-dispersione-it","tag-r-di-pearson-it","tag-regressione-it","tag-residui-it","tag-scatterplot-it"],"lang":"it","translations":{"it":1807,"en":3340},"uagb_featured_image_src":{"full":false,"thumbnail":false,"medium":false,"medium_large":false,"large":false,"1536x1536":false,"2048x2048":false,"post-thumbnail":false},"uagb_author_info":{"display_name":"paolo","author_link":"https:\/\/www.gironi.it\/blog\/author\/paolo\/"},"uagb_comment_info":24,"uagb_excerpt":"Pi\u00f9 fa caldo, pi\u00f9 gelati si vendono: lo sospettiamo tutti. Ma di quanto? Se domani il termometro segna 27 gradi, quanti gelati conviene preparare? E, spostandoci sul nostro terreno: se alziamo il budget delle campagne, quante conversioni in pi\u00f9 possiamo aspettarci? Concetti come la media o la deviazione standard descrivono una variabile alla volta. Per&hellip;","_links":{"self":[{"href":"https:\/\/www.gironi.it\/blog\/wp-json\/wp\/v2\/posts\/1807","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.gironi.it\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.gironi.it\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.gironi.it\/blog\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/www.gironi.it\/blog\/wp-json\/wp\/v2\/comments?post=1807"}],"version-history":[{"count":6,"href":"https:\/\/www.gironi.it\/blog\/wp-json\/wp\/v2\/posts\/1807\/revisions"}],"predecessor-version":[{"id":4476,"href":"https:\/\/www.gironi.it\/blog\/wp-json\/wp\/v2\/posts\/1807\/revisions\/4476"}],"wp:attachment":[{"href":"https:\/\/www.gironi.it\/blog\/wp-json\/wp\/v2\/media?parent=1807"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.gironi.it\/blog\/wp-json\/wp\/v2\/categories?post=1807"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.gironi.it\/blog\/wp-json\/wp\/v2\/tags?post=1807"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}