1
Johannes Gutenberg-Universität Mainz Humboldt-Universität zu Berlin Prof. Dr. Hans Anand Pant Corinna Lautenbach Prof. Dr. Olga Zlatkin-Troitschanskaia Miriam Toepper Kompetenzmodelle und Instrumente der Kompetenzerfassung im Hochschulsektor - Validierungen und methodische Innovationen www.kompetenzen-im-hochschulsektor.de Anlass und Fokus des Forschungsprogramms Die valide Erfassung der im Studium erworbenen Kompetenzen kann Informationen zu den Bedingungen, der Gestaltung und den Wirkungen tertiärer Bildung liefern. In der ersten Förderphase der BMBF-Förderlinie „Kompetenzmodellierung und Kompetenzerfassung im Hochschulsektor“ von 2011 bis 2015 wurden Kompetenzmodelle sowie dazugehörige Instrumente entwickelt und deutschlandweit empirisch erprobt. Im neuen Forschungsprogramm werden von 2016 bis 2020 bestehende Modelle und Instrumente vertiefend validiert, innovative Mess- und Analyseverfahren entwickelt und erprobt. Der Fokus liegt dabei auf längsschnittlich angelegten, mehrere Ebenen umfassenden Analysen im Rahmen von (feld-)experimentellen Studien und dem Transfer in die Hochschulpraxis. Literatur: AERA, APA, & NCME (American Educational Research Association, American Psychological Association & National Council on Measurement in Education) (2014). Standards for Educational and Psychological Testing. Washington, DC: American Educational Research Association. DazKom-Video Performanznahe Messung von Deutsch-als- Zweitsprache-Kompetenz bei (angehenden) Lehrkräften ValiDiS Kompetenzmodellierung und -erfassung: Validierungsstudie zum wissenschaftlichen Denken im naturwissenschaftlichen Studium PRO-SRL-EVA Produkt- und prozessorientierte Modellierung und Erfassung von Kompetenzen zum selbstregulierten Lernen im Studium MultiTex Prozessbasierte Diagnostik des Textverstehens mit multiplen Dokumenten KomPrü Kompetenzorientierte Prüfung kommunikativer Fähigkeiten von Studierenden ASTRALITE Assessment and Training of Scientific Literacy WiWiSET Validierung eines Studieneingangstests in der Fachdomäne Wirtschaftswissenschaften WiWiKom II Die valide Erfassung der Entwicklung der wirtschaftswissenschaftlichen Fachkompetenz im Verlauf des Studiums Ko-NaMa Simulationsbasierte Messung und Validierung eines Kompetenzmodells für das Nachhaltigkeitsmanagement Validierungsarbeiten im Forschungsprogramm KoKoHs (Validierungskriterien nach AERA, APA & NCME 2014) Testinhalt Expertenbefragungen, -workshops und -ratings Delphi-Verfahren Dokumentenanalysen Lehrbuchanalysen … … Interne Struktur IRT Skalierungen Analysen zur Faktorstruktur Mehrdimensionale Raschmodellierungen Querschnittliche und längsschnittliche Analysen … … Beziehungen zu anderen Variablen Prädiktive Merkmale, u.a. Vorhersage von Prüfungsleistungen Diskriminante Merkmale, u.a. Abgrenzung zu allgemeinen kognitiven Fähigkeiten Kriteriumsbezogene Merkmale, u.a. Vergleichsanalysen zwischen Standorten und über den Studienverlauf Zusammenhangsanalysen mit sozio-demographischen Merkmalen, universitären Lerngelegenheiten, selbsteingeschätzten Kompetenzen, etc. … …. Testkonsequenzen Angoff-Verfahren Gruppenvergleiche Testfairness-Prüfungen (DIF-Analysen) … … Wissenschaftliches Transferprojekt Übergeordneter Rahmen für die 16 Forschungsverbünde Kompetenzen in der Lehrerbildung Fachbezogene Kompetenzen (Wiwi/Medizin) Fächerübergreifende Kompetenzen ÄKHOM Ärztliche Kompetenzen: Hamburg-Oldenburg-München BilWiss-UV Ertrag und Entwicklung des universitären bildungswissenschaftlichen Wissens Antwortprozesse Auswertungen von Post- patient Encounter Forms Analysen von Logfiles Eye-Tracking Cognitive Labs/Think- Aloud-Studien … … TEDS-Validierung Validierung der Instrumente aus der internationalen Vergleichsstudie TEDS-M und ihrem Follow-Up TEDS-FU ELMaWi Erfassung von fachspezifischen Kompetenzen bei Lehramtsstudierenden der Fächer Mathematik und Wirtschaftswissenschaften PlanvoLL-D Erfassung von fachspezifischen Kompetenzen bei Lehramtsstudierenden der Fächer Mathematik und Wirtschaftswissenschaften ProfiLe-P+ Professionskompetenz im Lehramtsstudium Physik Pro-KomMa Professionalisierung des frühpädagogischen Studiums

Kompetenzmodelle und Instrumente der Kompetenzerfassung im … · 2018-05-24 · Literatur: AERA, APA, & NCME (American Educational Research Association, American Psychological Association

  • Upload
    others

  • View
    3

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Kompetenzmodelle und Instrumente der Kompetenzerfassung im … · 2018-05-24 · Literatur: AERA, APA, & NCME (American Educational Research Association, American Psychological Association

Johannes Gutenberg-Universität Mainz Humboldt-Universität zu Berlin

Prof. Dr. Hans Anand Pant Corinna LautenbachProf. Dr. Olga Zlatkin-Troitschanskaia Miriam Toepper

Kompetenzmodelle und Instrumente der Kompetenzerfassung im Hochschulsektor - Validierungen und methodische Innovationen

www.kompetenzen-im-hochschulsektor.de

Anlass und Fokus des Forschungsprogramms

Die valide Erfassung der im Studium erworbenen Kompetenzen kann Informationen zu den Bedingungen, der Gestaltung und den Wirkungentertiärer Bildung liefern. In der ersten Förderphase der BMBF-Förderlinie „Kompetenzmodellierung und Kompetenzerfassung im Hochschulsektor“von 2011 bis 2015 wurden Kompetenzmodelle sowie dazugehörige Instrumente entwickelt und deutschlandweit empirisch erprobt. Im neuenForschungsprogramm werden von 2016 bis 2020 bestehende Modelle und Instrumente vertiefend validiert, innovative Mess- undAnalyseverfahren entwickelt und erprobt. Der Fokus liegt dabei auf längsschnittlich angelegten, mehrere Ebenen umfassenden Analysen imRahmen von (feld-)experimentellen Studien und dem Transfer in die Hochschulpraxis.

Literatur: AERA, APA, & NCME (AmericanEducational Research Association, AmericanPsychological Association & National Council onMeasurement in Education) (2014). Standardsfor Educational and Psychological Testing.Washington, DC: American EducationalResearch Association.

DazKom-VideoPerformanznahe Messung von Deutsch-als-Zweitsprache-Kompetenz bei (angehenden)

Lehrkräften

ValiDiSKompetenzmodellierung und -erfassung:

Validierungsstudie zum wissenschaftlichen Denken im naturwissenschaftlichen Studium

PRO-SRL-EVAProdukt- und prozessorientierte Modellierung

und Erfassung von Kompetenzen zum selbstregulierten Lernen im Studium

MultiTexProzessbasierte Diagnostik des Textverstehens

mit multiplen Dokumenten

KomPrüKompetenzorientierte Prüfung

kommunikativer Fähigkeiten von Studierenden

ASTRALITEAssessment and Training

of Scientific Literacy

WiWiSETValidierung eines Studieneingangstests in

der Fachdomäne Wirtschaftswissenschaften

WiWiKom IIDie valide Erfassung der Entwicklung der

wirtschaftswissenschaftlichen Fachkompetenz im Verlauf des Studiums

Ko-NaMaSimulationsbasierte Messung

und Validierung eines Kompetenzmodells für das Nachhaltigkeitsmanagement

Validierungsarbeiten im Forschungsprogramm KoKoHs (Validierungskriterien nach AERA, APA & NCME 2014)

Testinhalt

• Expertenbefragungen, -workshops und -ratings

• Delphi-Verfahren• Dokumentenanalysen• Lehrbuchanalysen• … …

Interne Struktur

• IRT Skalierungen• Analysen zur Faktorstruktur• Mehrdimensionale Raschmodellierungen• Querschnittliche und längsschnittliche Analysen• … …

Beziehungen zu anderen Variablen

• Prädiktive Merkmale, u.a. Vorhersage vonPrüfungsleistungen

• Diskriminante Merkmale, u.a. Abgrenzung zu allgemeinen kognitiven Fähigkeiten

• Kriteriumsbezogene Merkmale, u.a. Vergleichsanalysen zwischen Standorten und über den Studienverlauf

• Zusammenhangsanalysen mit sozio-demographischen Merkmalen, universitären Lerngelegenheiten, selbsteingeschätzten Kompetenzen, etc.

• … ….

Testkonsequenzen

• Angoff-Verfahren• Gruppenvergleiche• Testfairness-Prüfungen (DIF-Analysen)• … …

Wissenschaftliches Transferprojekt

Übergeordneter Rahmen für die 16 Forschungsverbünde

Kompetenzen in der Lehrerbildung

Fachbezogene Kompetenzen

(Wiwi/Medizin)

Fächerübergreifende Kompetenzen

ÄKHOMÄrztliche Kompetenzen:

Hamburg-Oldenburg-München

BilWiss-UVErtrag und Entwicklung des universitären

bildungswissenschaftlichen Wissens

Antwortprozesse

• Auswertungen von Post-patient Encounter Forms

• Analysen von Logfiles• Eye-Tracking• Cognitive Labs/Think-

Aloud-Studien• … …

TEDS-ValidierungValidierung der Instrumente aus der

internationalen Vergleichsstudie TEDS-M und ihrem Follow-Up TEDS-FU

ELMaWiErfassung von fachspezifischen Kompetenzen

bei Lehramtsstudierenden der Fächer Mathematik und Wirtschaftswissenschaften

PlanvoLL-DErfassung von fachspezifischen Kompetenzen

bei Lehramtsstudierenden der Fächer Mathematik und Wirtschaftswissenschaften

ProfiLe-P+Professionskompetenz im Lehramtsstudium Physik

Pro-KomMaProfessionalisierung des

frühpädagogischen Studiums