Transcript
Page 1: Metodološke značilnosti mednarodnih raziskav

Metodološke značilnosti Metodološke značilnosti mednarodnih raziskavmednarodnih raziskav

Mojca Štraus, Pedagoški inštitut

Raziskava PISA 2009 je del aktivnosti projekta 'Ugotavljanje in zagotavljanje kakovosti v izobraževanju in usposabljanju – Evalvacija vzgoje in izobraževanja na podlagi mednarodno priznanih metodologij‘ , ki ga omogoča sofinanciranje Evropskega socialnega sklada Evropske unije in Ministrstva za šolstvo in šport.

Ljubljana, 7. 6. 2011 Ljubljana, 7. 6. 2011

CBA

Posvet: Mednarodne raziskave znanja učencev in dejavnosti za izboljšanje pismenosti učencev

Organizator: Pedagoški inštitut7. junij 2011

Page 2: Metodološke značilnosti mednarodnih raziskav

Mednarodne raziskaveMednarodne raziskave

PISAPISA 2012, 2009, 2006, 2003, 2000 2012, 2009, 2006, 2003, 2000

BRA, MAT, NAR; 15-letniki (1.l SŠ)BRA, MAT, NAR; 15-letniki (1.l SŠ)

TIMSSTIMSS 2011, 2007, …1995, TIMSS-Adv 2008 2011, 2007, …1995, TIMSS-Adv 2008

MAT, NAR; 4.r in 8.r OŠ MAT, NAR; 4.r in 8.r OŠ MAT, NAR 4.l MAT, NAR 4.l

spl.maturaspl.matura

PIRLSPIRLS 2011, 2006, 2001 2011, 2006, 2001

BRA; 4.r OŠBRA; 4.r OŠ

ICCS 2009: ICCS 2009: državljanska vzgoja, 8.r in 9.r.državljanska vzgoja, 8.r in 9.r.

TALIS 2008: TALIS 2008: učitelji 7.-9.r OŠ učitelji 7.-9.r OŠ

ESLCESLC 2011: 2011: ANG, NEM 9.r OŠANG, NEM 9.r OŠ

SITES 2006, ICILS 2013: SITES 2006, ICILS 2013: IKT; 8.rIKT; 8.r

CBA

22

Page 3: Metodološke značilnosti mednarodnih raziskav

Populacije učencevPopulacije učencev

33

PISAPISA TIMSSTIMSS PIRLSPIRLS ICCSICCS 15-letniki15-letniki 4. razred 4. razred 4. 4.

razred razred 8. in 9. 8. in 9.

razred razred (večinoma (večinoma dijaki 1. dijaki 1. letnikov letnikov srednjih šol)srednjih šol)

8. razred8. razred

TIMSS za TIMSS za maturante, maturante, 2008: zadnji 2008: zadnji letnik letnik gimnazijskih gimnazijskih programovprogramov

CBA

Page 4: Metodološke značilnosti mednarodnih raziskav

Ciklično zbiranje podatkovCiklično zbiranje podatkov

44

PISAPISA TIMSSTIMSS PIRLSPIRLS ICCSICCS2000: branje2000: branje2003: mat2003: mat2006: nar2006: nar2009: branje2009: branje2012: mat2012: mat……

1995 1995 mat+narmat+nar 1999 1999 mat+narmat+nar 2003 2003 mat+narmat+nar 2007 2007 mat+narmat+nar 2011 2011 mat+narmat+nar……

(1991 RL)(1991 RL) 2001 2001 branjebranje 2006 2006 branjebranje 2011 2011 branjebranje……

19991999 2009 2009 državljanskdržavljanska vzgojaa vzgoja

CBA

Page 5: Metodološke značilnosti mednarodnih raziskav

55

Instrumenti za zbiranje Instrumenti za zbiranje podatkovpodatkov

Naloge na merjenem področju

v različnih delovnih zvezkih – široko pokritje področja

na računalnikih

Vprašalniki o spremljajočih dejavnikih za šolo (ravnatelja)

za učenca

za učitelje

za starše

za tehnično osebje (uporaba računalnikov)

CBA

Page 6: Metodološke značilnosti mednarodnih raziskav

66

Vzorčenje šol in učencevVzorčenje šol in učencevDvostopenjskoDvostopenjsko vzorčenje vzorčenje

1. stopnja1. stopnja: vzorčenje šol: vzorčenje šol

min št. šol je običajno 150min št. šol je običajno 150

2. stopnja2. stopnja: vzorčenje učencev na izbranih : vzorčenje učencev na izbranih šolahšolah

določeno število učencev ne glede na razred (PISA)določeno število učencev ne glede na razred (PISA)

celoten oddelek ali več oddelkov učencev celoten oddelek ali več oddelkov učencev izbranega razreda (TIMSS, PIRLSizbranega razreda (TIMSS, PIRLS, ICCS, ICCS))

CBA

Page 7: Metodološke značilnosti mednarodnih raziskav

Verjetnostni model sklepanja o znanju

CBA

77

Lestvica dosežkov

1. naloga

Učenec Az nizkimi

kompetencami

Učenec B s srednjimi

kompetencami

Učenec C z visokimi

kompetencami

Naloge z razmeroma

nizko težavnostjo

Naloge s srednjo težavnostjo

Naloge z razmeroma

visoko težavnostjo

2. naloga 3. naloga 4. naloga 5. naloga 6. naloga

Pričakujemo, da učenec A na 2. do 6. nalogo ne bo odgovoril pravilno in da je tudi zelo malo verjetno, da bo odgovoril pravilno na 1. nalogo.

Pričakujemo, da bo učenec B pravilno odgovoril na 1. do 3. nalogo, manj verjetno bo odgovoril pravilno na 4. nalogo, na 5. in 6. nalogo pa najverjetneje ne bo odgovoril pravilno.

Pričakujemo, da bo učenec C pravilno odgovoril na 1. do 5. nalogo in verjetno tudi na 6. nalogo.

Page 8: Metodološke značilnosti mednarodnih raziskav

CA B

88

Lestvica dosežkov

pod 1. ravnjo

1. raven 2. raven 3. raven 4. raven 5. raven 6. raven

334,9 točke

409,5 točke

484,1 točke

558,7 točke

633,3 točke

707,9 točke

KISLI DEŽ5.2 vprašanje (717)(pravilen odgovor)

GENSKO SPREMENJENA HRANA

3. vprašanje (421)

ZAŠČITA PRED SONCEM

4. vprašanje (574)2. vprašanje (588)

OBLAČILA1. vprašanje (567)

KISLI DEŽ5.1 vprašanje (513)

(delni odgovor)

ZAŠČITA PRED SONCEM

3. vprašanje (499)

VELIKI KANJON7. vprašanje (458)

UČINEK TOPLE GREDE

5. vprašanje (709)(pravilen odgovor)

KISLI DEŽ2. vprašanje (506)

TELOVADBA1. vprašanje (545)

TELOVADBA5. vprašanje (583)KISLI DEŽ

3. vprašanje (460)

UČINEK TOPLE GREDE

3. vprašanje (529)

UČINEK TOPLE GREDE

4.1 vprašanje (568)(delni odgovor)

ZAŠČITA PRED SONCEM

5.2 vprašanje (629)(pravilen odgovor)

5.1 vprašanje (616)(delni odgovor)

UČINEK TOPLE GREDE

4.2 vprašanje (659)(pravilen odgovor)

OBLAČILA2. vprašanje (399)

TELOVADBA3. vprašanje (386)

VELIKI KANJON5. vprašanje (411)

MARY MONTAGU2. vprašanje (436)3. vprašanje (431)

VELIKI KANJON3. vprašanje (451)

MARY MONTAGU4. vprašanje (507)

Verjetnostni model sklepanja o znanju

Naravoslovne naloge PISA 2006

Page 9: Metodološke značilnosti mednarodnih raziskav

CBA

Učenci z dosežki na 5. ravni lahko prepoznavajo naravoslovnoznanstvene komponente različnih

zapletenih življenjskih situacij. V njih uporabljajo tako naravoslovne pojme kot znanje o naravoslovnih znanostih. Lahko primerjajo, izbirajo in vrednotijo

ustrezne naravoslovnoznanstvene dokaze, podatke in preverjena dejstva za odzivanje v življenjskih

situacijah. Učenci z dosežki na tej ravni uporabljajo visoko razvite sposobnosti raziskovanja, ustrezno

povezujejo svoje znanje in prinašajo kritične vpoglede v te situacije. Temelječ na kritični analizi

dokazov, podatkov in preverjenih dejstev lahko sestavijo razlage ter utemeljitve. 99

Lestvica dosežkov

pod 1. ravnjo

1. raven 2. raven 3. raven 4. raven 5. raven 6. raven

334,9 točke

409,5 točke

484,1 točke

558,7 točke

633,3 točke

707,9 točke

Učenci z dosežki na 1. ravni imajo zelo omejeno

naravoslovno znanje, ki ga uporabljajo le v maloštevilnih

situacijah, ki so jim blizu. Lahko ponudijo znanstvene razlage, ki so očitne in ki

neposredno izhajajo iz danih podatkov oziroma dokazov.

Učenci z dosežki na 6. ravni zanesljivo prepoznavajo, razlagajo in uporabljajo naravoslovno znanje ter znanje o naravoslovnih znanostih v različnih zapletenih življenjskih

situacijah. Lahko povezujejo različne vire informacij in razlag ter podatke iz teh virov uporabljajo za utemeljevanje

svojih odločitev. Jasno in zanesljivo izkazujejo napredno naravoslovnoznanstveno mišljenje ter utemeljevanje in so

pripravljeni svoje razumevanje uporabiti za podporo rešitvam v novih naravoslovnoznanstvenih ter tehnoloških situacijah. Učenci z dosežki na tej ravni lahko uporabljajo naravoslovno znanje in izpeljujejo utemeljitve za podporo priporočilom in odločitvam, ki so osredotočene na osebne,

družbene in globalne situacije.

Učenci z dosežki na 4. ravni lahko učinkovito delujejo v situacijah in pri

vprašanjih, ki lahko vključujejo pojave, pri katerih morajo sklepati o vlogi

naravoslovnih znanosti ter tehnologije. Lahko izbirajo in združujejo razlage iz različnih naravoslovnih ali tehnoloških

disciplin ter te razlage neposredno povezujejo z življenjskimi situacijami. Učenci z dosežki na tej ravni lahko

razmišljajo o svojih dejanjih in sporočajo svoje odločitve z uporabo naravoslovnega

znanja, dokazov ter podatkov.

Učenci z dosežki na 2. ravni imajo zadovoljivo naravoslovno

znanje, da lahko ponudijo mogoče razlage v kontekstih, ki so jim blizu ali izpeljejo sklepe iz

preprostih raziskav. Lahko neposredno utemeljujejo in

dobesedno interpretirajo rezultate

naravoslovnoznanstvenih raziskav ali reševanja tehnoloških

problemov.

Učenci z dosežki na 3. ravni lahko prepoznavajo jasno opisana

naravoslovna vprašanja v različnih kontekstih. Lahko izbirajo dejstva in

znanje za razlage pojavov ter uporabijo preproste modele ali raziskovalne pristope. Učenci z

dosežki na tej ravni lahko interpretirajo naravoslovne pojme iz različnih disciplin in jih neposredno uporabljajo. Z uporabo podatkov lahko sestavijo kratke izjave in sprejmejo odločitev na podlagi

naravoslovnega znanja.

OECD SVN

94,8 %97,2 %

80,8 %86,1 %

56,7 %63,0 %

29,3 %35,4 %

9,0 %12,9 %

1,3 %2,2 %

Verjetnostni model sklepanja o znanju

Page 10: Metodološke značilnosti mednarodnih raziskav

Območja dosežkov pri NPZObmočja dosežkov pri NPZ CBA

1010

Page 11: Metodološke značilnosti mednarodnih raziskav

Kaj vse gre lahko narobe?Kaj vse gre lahko narobe?

VzorčenjeVzorčenje

Odzivnost vzorca Odzivnost vzorca

Sestava instrumentov, primernost vprašanjSestava instrumentov, primernost vprašanj

Izvedba, motivacija odgovarjajočihIzvedba, motivacija odgovarjajočih

Tehnična obdelava podatkovTehnična obdelava podatkov

Statistične analize: Statistične analize: povprečje je le indikator (kot povprečje je le indikator (kot

lučke na armaturni plošči avtomobila)lučke na armaturni plošči avtomobila)

Težko je sklepati o vzročnosti povezav; Težko je sklepati o vzročnosti povezav;

vzroke za probleme in ukrepe za rešitve je vzroke za probleme in ukrepe za rešitve je

treba iskati v širšem kontekstu treba iskati v širšem kontekstu (nižji dosežki ne (nižji dosežki ne

pomenijo nujno slabšega dela šol in učiteljev)pomenijo nujno slabšega dela šol in učiteljev)

CBA

1111

Page 12: Metodološke značilnosti mednarodnih raziskav

CBA

Hvala za pozornost!

[email protected]@pei.si

www.pei.si1212


Recommended