32
Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Principi di Econometria lezione 3 AA 2016-2017 Paolo Brunori

Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

  • Upload
    others

  • View
    4

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

Principi di Econometria

lezione 3

AA 2016-2017

Paolo Brunori

Page 2: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

econometria: la ricerca dei processi chegenerano i dati

- domenica era brutto tempo- se mi fermo alla pasticceria a fare colazione troverò:più coda del solito? meno? la stessa?

- cosa determina quante persone decidono di farecolazione al bar un certo giorno a una certa ora?

Page 3: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

dove siamo arrivati?

- quello che vogliamo fare è capire se i dati ci possonoinsegnare qualcosa su come funzionano i fenomenisocioeconomici

- il primo passo - una volta identificata un possibilemodello di funzionamento di un fenomeno - consistenell’approssimare la relazione fra causa ed effetto conun’apporssimazione lineare

- il fenomeno che ci interessa (felicità percepita nelnostro esempio) si avvicina ad un andamentocostituito da una costante e una funzione crescente diuna variable indipendente (PIL pro capite)

- questa relazione è riscontrabile nei dati? di quantoaumenta la felicità per ogni dollaro in più di PIL?

Page 4: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

la migliore approssimazione lineare:retta dei minimi quadrati

- OLS per Ordinary Least Squares in inglese- migliore la capacità di spiegare i dati della rettaminori gli errori commessi

- ui = Yi − [β0 + β1Xi ] è l’errore di interpolazione perl’osservazione i-esima

- gli stimatori dei minimi quadrati β0, β1 minimizzano:

n∑1=1

(Yi − β0 − β1Xi)2 =n∑

1=1u2

i

Page 5: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

l’errore di previsione di un modello lineare

0 20000 40000 60000 80000

34

56

78

PIL pro capite 2011

felic

ità (2

010-

2014

)

AL

DZ

AO

AR

AM

AU

AT

AZ

BDBY

BE

BZ

BJ

BT

BO

BA

BW

BR

BGBF

BI

KH

CM

CA

CF

TD

CL

CN

CO

KM

CR

CI

HR

CY

CZ

DK

DO

EC

EG

SV

EE

ET

FI

FR

GAGE

DE

GH

GR

GT

GN

HT

HN

HK

HU

IS

IN

ID

IQ

IEIL

ITJM

JPJO

KZ

KE

KR

KW

KG

LA

LVLBLS

LR

LT

LU

MK

MG

MW

MY

ML

MT

MR

MU

MX

MD

MN

MEMA

MZ

NP

NL

NI

NE

NG

NO

OM

PK

PA

PY

PE

PHPL

PT

QA

RO

RU

RW

SA

SN

RS

SL

SG

SK

SI

ZA

ES

LKSD

SECH

TJ

TZ

TH

TG

TN

TR

TM

UG

UA

AEGB

US

UYUZ

VE

VN

YEZM

u_i

fonte: World Bank (2011), World Happiness Report (2015)

Page 6: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

interpretazione del modello lineare ingenerale

β0: intercetta, è il valore che ipotizziamo abbia la Yquando X = 0β1: pendenza, mi dice di quanto aumenta Y quandoX aumenta di un’unitàui : errore, mi indica di quanto sbaglio adapprossimare linearmente la relazione che lega X e Y

Page 7: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

stimatori OLS β0, β1

- per ottenere gli stimatori β0, β1 dei due coefficienti sipongono pari a zero le due derivate parziali:

∂β0

n∑1=1

(Yi − β0 − β1Xi)2 = 0

∂β1

n∑1=1

(Yi − β0 − β1Xi)2 = 0

- la dimostrazione potete trovarla sul libro (e in fondoa queste slide)

- le soluzioni sono semplici e vanno ricordate

Page 8: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

stimatori OLS β0, β1

β0 = Y − β1X

dove X , Y sono le medie delle due variabili nel campione

β1 =1n∑n

1=1 (YiXi)− Y X1n∑n

i=1 X2i − X2 =

∑ni=1(Xi − X)(Yi − Y )∑n

i=1(Xi − X)2

Page 9: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

retta dei minimi quadrati

0 20000 40000 60000 80000

34

56

78

PIL pro capite 2011

felic

ità (2

010-

2014

)

AL

DZ

AO

AR

AM

AUAT

AZ

BDBY

BE

BZ

BJ

BT

BO

BA

BW

BR

BGBF

BI

KH

CM

CA

CF

TD

CL

CN

CO

KM

CR

CI

HR

CY

CZ

DK

DO

EC

EG

SV

EE

ET

FI

FR

GAGE

DE

GH

GR

GT

GN

HT

HNHK

HU

IS

IN

ID

IQ

IEIL

ITJMJP

JOKZ

KE

KR

KW

KGLA

LVLBLS

LR

LT

LU

MK

MG

MWMY

ML

MT

MR

MU

MX

MDMN

MEMA

MZ

NP

NL

NI

NE

NG

NO

OM

PK

PA

PYPE

PHPL

PT

QA

RORU

RW

SA

SN

RS

SL

SG

SK

SI

ZA

ES

LKSD

SECH

TJ

TZ

TH

TG

TN

TR

TM

UG

UA

AEGB

USUY

UZ

VE

VN

YEZM

fonte: elaborazione su dati World Bank e WHR

i parametri stimati sono: β0 = 5.19 , β1 = 0.00005come possono essere interpretati?

Page 10: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

interpretazione β0, β1

- β0: se un paese ha PIL pro capite=0 la media dellarisposta della domanda di Cantril è 5.19

- β1: per ogni dollaro in più di PIL mi aspetto unaumento di 0.00005 della media dell’indacatore diCantril (equivalente a dire che per ogni 10 miladollari in più l’aumento è di 0.5 punti

Page 11: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

Come potete ottenere queste stime in pratica?

- otteniamo i dati- sistemiamo i dati in modo leggibile da un software

Page 12: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

i dati caricati su R

dataset ottenuto unendo informazioni da: World Bank (2011), WorldHappiness Report (2015)

Page 13: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

Come potete ottenere queste stime in pratica?

- il nostro modello è:

cantril = β0 + β1GDP_pc

- per alcuni paesi la variabile indipendente GDP_pc(PIL pro capite) non è disponibile

- per questi dati non è possibile stimare la retta diregressione

- utilizziamo quelli per i quali osserviamo sia Y che X

Page 14: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

Come potete ottenere queste stime in pratica?

- il modo più ovvio è ricorrere alle formule:

β1 =∑n

i=1(Xi − X)(Yi − Y )∑ni=1(Xi − X)2

β0 = Y − β1X

- calcoliamo X e Y e poi utilizziamo la formula- i passaggi che vi faccio vedere ora sono disponibili sulfile nella pagina del corso

Page 15: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

Misure di bontà del’adattamento

- quanto bene la retta interpola i dati?- R2 della regressione è la frazione della varianzacampionaria di Y spiegata da X

(var(Yi)/var(Yi)

)- somma dei quadrati spiegata (ESS: Explained Sum ofSquares) =

∑ni=1(Yi − Y )2

- somma dei quadrati totali (TSS) =∑n

i=1(Yi − Y )2

R2 = ESSTSS

Page 16: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

misure di bontà del’adattamento

- somma dei quadrati dei residui (SSR) =∑n

i=1 u2i

R2 = ESSTSS = 1− SSR

TSS

- se β1 = 0 R2 = 0- se Yi = Yi ∀i = 1, ...,n allora R2 = 1

Page 17: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

Quanto bene il reddito spiega la felicità?

- torniamo all’analisi empirica- quanto sbagliamo ad approssimare la relazione fra Xe Y?

- guardiamo ai residui ui

Page 18: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

Quanto bene il reddito spiega la felicità?- il grafico riporta la distribuzione degli errori dellastima di Y dato X

- come possiamo giudicare se si tratta di errori grandio meno?

Histogram of (ols1$residuals)

(ols1$residuals)

Frequency

-3 -2 -1 0 1 2 3

05

1015

2025

30

Page 19: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

Quanto bene il reddito spiega la felicità?

- proviamo ad usare il buon senso, l’errore in valoreassoluto in media è pari a 0.79

- in aggregato il 38.42% della variabilità è spiegata dalmodello

Page 20: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

assunzioni che rendono valido quanto dettofino ad ora

- questo metodo per stimare i parametri della retta(β0, β1) non è sempre valido

- perché i parametri siano una buona stima di quelliveri, β0, β1, devono essere soddisfatte alcunecondizioni

Page 21: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

assunzioni che rendono valido quanto dettofino ad ora

1) la distribuzione di ui condizionata a Xi ha medianulla

2) X ,Y sono indipendentemente e identicamentedistribuite

3) valori estremi (outlier) devono essere improbabili

Page 22: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

la distribuzione di ui condizionata a Xi hamedia nulla

1) E(ui |Xi) = 0 ∀i = 1, ...,n

- gli ‘altri fattori’ che confluiscono in u e determinanoY sono non sono sistematicamente legati a X

Page 23: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

la distribuzione di ui condizionata a Xi hamedia nulla

1) E(ui |Xi) = 0 ∀i = 1, ...,n

Page 24: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

X ,Y i.i.d.

- campionamento semplice dalla stessa popolazione(età e altezza degli studenti di uniba) allora ogniosservazione si distribuisce alla stessa maniera

- se sono estratti in modo casuale sono ancheindipendenti

- esistono casi di non-indipendenza: nel caso dei datidella Banca Mondiale ad esempio sono mancanti ivalori di PIL per paesi molto arretrati

- in questi casi il campionamento non è casuale, ilcampione non rappresenta la popolazione

Page 25: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

gli outlier sono improbabili

- outlier: misure fuori dall’intervallo ‘normale’- potrebbero essere dovuti a errori di imputazione deidati

Page 26: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

β0, β1 sono stimatori non-distorti

- β0, β1 sono variabili casuali: il loro valore dipende dalcampione selezionato

- se valgono le condizioni il loro valore si distribuisceattorno al vero valore (β0, β1)

- come accade per la media di un campione: la mediacampionaria è uno stimatore non distorto della veramedia della popolazione

- così accade per i parametri β0, β1 se si verificano lecondizioni

Page 27: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

Appendice: derivazione stimatori OLS

Le slide che seguono non fanno parte della parteessenziale del programma d’esame. Se avete lacuriosità di capire come si ottengono glistimatori dei minimi quadrati potete consultarle.

Page 28: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

stimatori OLS β0, β1

si pongono pari a zero le due derivate parziali:

∂β0

n∑1=1

(Yi − β0 − β1Xi)2 = 2n∑

1=1(Yi − β0 − β1Xi) = 0

∂β1

n∑1=1

(Yi − β0 − β1Xi)2 = −2n∑

1=1(Yi − β0 − β1Xi)Xi = 0

Page 29: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

stimatori OLS β0, β1

dividendo per n:

1n

n∑1=1

(Yi − β0 − β1Xi) = 0→ Y − β0 − β1X = 0

1n

n∑1=1

(YiXi)− β0X − β11n

n∑i=1

X2i = 0

Page 30: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

stimatori OLS β0, β1

sostituiamoβ0 = Y − β1X

nella seconda equazione:

1n

n∑1=1

(YiXi)−(Y − β1X

)X − β1

1n

n∑i=1

X2i = 0

1n

n∑1=1

(YiXi)− Y X − β1

(1n

n∑i=1

X2i − X2

)= 0

β1 =1n∑n

1=1 (YiXi)− Y X1n∑n

i=1 X2i − X2

Page 31: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

β1 =1n∑n

1=1 (YiXi)− Y X1n∑n

i=1 X2i − X2 =

∑ni=1(Xi − X)(Yi − Y )∑n

i=1(Xi − X)2

numeratore:n∑

i=1(Xi − X)(Yi − Y ) =

n∑i=1

(XiYi −XiY − XYi + XY ) =

n∑i=1

(XiYi)− Yn∑

i=1Xi − X

n∑i=1

Yi + NXY =

n∑i=1

(XiYi)− Y NX − XNY + NXY =n∑

1=1(YiXi)−NY X

Page 32: Principi di Econometria · 2016-10-04 · Principi di Econometria lezione 3 OLS Bontà di adattamento assunzioni OLS Appendice: derivazione stimatori OLS Appendice: derivazionestimatoriOLS

Principi diEconometria

lezione 3

OLS

Bontà diadattamento

assunzioni OLS

Appendice:derivazionestimatori OLS

β1 =1n∑n

1=1 (YiXi)− Y X1n∑n

i=1 X2i − X2 =

∑ni=1(Xi − X)(Yi − Y )∑n

i=1(Xi − X)2

deniminatore

n∑i=1

(Xi − X)2 =n∑

i=1(X2

i − 2XiX + X2) =

n∑i=1

X2i − 2X

n∑i=1

Xi + NX2 =n∑

i=1X2

i −NX2