“Las instrucciones en evaluaciones estandarizadas que miden comprensión lectora”

Marcela Cabrera PommiezUniversidad Alberto Hurtadomcabrera@uc.cl y mecabrera@u.uchile.cl

Las evaluaciones estandarizadas (1)1. Surgimiento: EEUU, principios del siglo

XX, a través de instituciones: College Board, que en 1925 desarrolló la primera prueba que medía aptitudes en vez de conocimientos aislados; y Educational Testing Service (ETS, desprendido de la U.de Princeton), constituido en 1948.

Objetivo de las pruebas estandarizadas:Medir niveles de rendimiento de alumnos

provenientes de distintas escuelas, asumiendo deficiencias en las evaluaciones de los maestros.

Edward Thorndike (1874 – 1949), psicólogo conductista, opinaba:

“las pruebas estandarizadas remediarían la escandalosa falta de confiabilidad de los exámenes aplicados por los maestros de escuela”.

Shepard, L. A. (2006). “Classroom assessment”

Las evaluaciones estandarizadas (2)2. Características de los instrumentos: Incluyen mayoritariamente preguntas

cerradas de selección múltiple, con cuatro o cinco opciones. Propósito máxima objetividad en la medición.

Cada pregunta mide una habilidad específica; el diseño responde a una tabla de especificaciones previa.

Pasan por un proceso de testeo previo.Su ensamblaje está rigurosamente

pauteado.

Las evaluaciones estandarizadas (3)3. Características de su proceso de

aplicación:Aplicación masiva: el mismo instrumento

para grandes poblaciones.Presencia de examinador en la sala, no

es un profesor no puede dar instrucciones aparte de las que aparecen en el cuadernillo; no cumple rol mediador, la instrucción es gravitante en el desempeño del estudiante.

Elementos de medición objetiva de la comprensión lectora (1)Tabla de especificaciones: presenta

contenidos (asociados a lectura) + habilidades.

Habilidades: caracterizar, identificar, inferir, interpretar, sintetizar, evaluar.La instrucción de la pregunta

responde a la ubicación de la tabla que le corresponde, esto es, mide un contenido y una habilidad; y, a su vez, modela la tarea cognitiva del estudiante.

Elementos de medición objetiva de la comprensión lectora (2)

Al responder el ítem, el estudiante aplica la resolución adecuada al problema propuesto.En comprensión lectora, además, la

instrucción determina el nivel que se pide al estudiante:Nivel 1: comprensión literal de la información textual.Nivel 2: síntesis, interpretación local, inferencia.Nivel 3: interpretación global y evaluación de fondo y forma del texto.

Ejemplos:

¿Cuál es la actitud del emisor frente a los hechos que narra en el tercer párrafo?

Pide al estudiante que evalúe la actitud a partir de marcas textuales que deja el emisor. Nivel 3.

Según el texto, ¿qué aspecto tenía el extraño visitante? apunta a rastrear la información en la superficie textual, pertenece al nivel 1.¿Cuál es la idea principal del segundo párrafo? Pide al estudiante extraer la idea principal abstrayéndola a partir del texto, operación de mayor complejidad. Nivel 2.

Importancia de las instruccionesOrientan la resolución óptima de la

pregunta, indicando la tarea cognitiva.

Sitúan al estudiante en el nivel de comprensión que mide cada ítem.

Desafío para los constructores:Redactar instrucciones precisas, considerando que NO se trata de una evaluación en aula.

Preguntas cerradas de comprensión lectora

Fuente: Comité de Lenguaje, DEMRE. 2009. Marco teórico prueba de Lenguaje. S.e.

Preguntas cerradas (1)Constan de un enunciado, seguido de

opciones, de las cuales solo una es la clave.

Enunciado: siempre contiene una pregunta que se responde en las opciones, o una afirmación que debe ser completada.

Puede incluir, además, un estímulo (fragmento de texto, imagen, gráfico, etc.).

Debe redactarse en términos claros, evitando toda ambigüedad y apuntando a la habilidad que se quiere medir.

Preguntas cerradas (2)Ejemplo erróneo: ¿Qué se puede inferir a partir

del diálogo anterior?

¿Qué se puede inferir a partir del diálogo?

¿Qué se infiere…? Pues el ítem debe tener una sola respuesta correcta.El desafío presentado por el enunciado debe tener sentido completo, el estudiante no debe recurrir a fuentes externas de información.Redacción cohesionada con las opciones y que evite proposiciones negativas.

Preguntas cerradas (3)Ejemplo: El personaje abandona su casa debido

aa) La insistencia de sus padres en que se casara.b) Las molestias que ocasiona su hermano menor.c) Los vecinos le hacen preguntas indiscretas.d) La hermana le pide que viva solo.

El personaje abandona su casa debido aa) la insistencia de sus padres en que se casara.b) las molestias que ocasiona su hermano.c) las preguntas indiscretas de los vecinos.d) la petición de su hermana de vivir solo.

OpcionesUna sola respuesta correcta, que debe

resolver la tarea propuesta. Clave.No debe contener términos usados en

el enunciado.Distractores:• No deben ser parcialmente correctos.• Misma longitud, complejidad y sintaxis de la clave.• Evitar proposiciones negativas.

BibliografíaComité de Lenguaje, DEMRE. 2009. Marco teórico prueba de

Lenguaje. S.e.DEMRE. Fascículos publicados en El Mercurio días jueves.BARRENECHEA, Ignacio. 2010. “Evaluaciones estandarizadas:

seis reflexiones críticas”. En Archivos Analíticos de Políticas Educativas 18(8). http://epaa.asu.edu/ojs/article/751

MORENO, Rafael; R. Martínez y J. Muñiz. 2004. “Directrices para la construcción de ítems de elección múltiple”. Revista Psicothema año/vol 16 número 3; Oviedo: Universidad de Oviedo. http: redalyc.uaemex.mx

MARTÍNEZ, Felipe. 2009. “Evaluación formativa en aula y evaluación a gran escala: hacia un sistema más equilibrado”. Revista Electrónica de Investigación educativa, vol 11 n° 2. http://redie.uabc.mx/vol11no2/contenido-mtzrizo2.html