98
Universidad Juárez Autónoma de Tabasco Taller para elaboración de reactivos del EGEL-Pedagogía

Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Embed Size (px)

Citation preview

Page 1: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Universidad Juárez Autónoma de Tabasco

Taller para elaboración de reactivos del EGEL-Pedagogía

Page 2: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

TALLER DE ELABORACIÓN DE REACTIVOS

Erick de Jesús López Morales

Page 3: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Temas a tratar:

• ¿Qué es el Ceneval?• ¿Qué es un EGEL?• ¿Cómo se elabora un EGEL?• Lineamientos para la elaboración de reactivos• Lineamientos para la elaboración de

multirreactivos

Page 4: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

OBJETIVO

1.Los docentes elaboran reactivos de opción múltiple con base en la matriz de especificaciones para incrementar los bancos de reactivos, con lo que se garantizará confiabilidad y validez de los EGEL.

2.Obtener por participante 10 reactivos y 3 multirreactivos

Page 5: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

¿QUÉ ES EL CENTRO NACIONAL DE EVALUACIÓN PARA LA EDUCACIÓN SUPERIOR, A.C.?

CENEVAL

Page 6: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

ANTECEDENTES

o El CENEVAL es una asociación civil sin fines de lucro que se constituyó formalmente en abril de 1994.

o Tiene como fin sustantivo contribuir a mejorar la calidad de la educación media superior y superior mediante evaluaciones externas de los aprendizajes logrados en cualquier etapa de los procesos educativos.

o El Centro obtiene sus ingresos a partir de los servicios que realiza.

Page 7: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

1.- Proporcionar instrumentos válidos y confiables.

2.- Aportar elementos de evaluación externa.

3.- Proporcionar asesoría a las Instituciones de Educación Superior.

4.- Establecer parámetros de comparación a nivelregional y nacional.

5.- Establecer estándares decalidad.

Brindar servicios de evaluación a disposición de las instituciones de educación superior.

Objetivo

Page 8: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

PRINCIPALES PRODUCTOS

1. Exámenes Generales para el Egreso de la Licenciatura (EGEL)

• 23 carreras

2. Exámenes Nacionales de Ingreso (EXANI)

• I Para la educación media superior• II Para la licenciatura • III Para el posgrado• 3. Exámenes por convenio

Page 9: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Estructura de operación• Dirección General• Direcciones Generales Adjuntas• Coordinaciones de Área

CONSEJO TÉCNICO

Page 10: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

¿Qué es el Examen General para el Egreso de la

Licenciatura?• Es un instrumento de evaluación

especializado para cada profesión• Instrumento distinto y complementario a

los instrumentos que utiliza cada IES para realizar la certificación oficial de estudios

• Es un auxiliar de gran valor para las IES: les proporciona información para mejorar la calidad de sus servicios, procedimientos y recursos

Page 11: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

¿Cuáles son las características de un

EGEL?• Es un examen extenso, dividido en varias

secciones; cubre distintas áreas de conocimientos y habilidades de la profesión

• Los contenidos y niveles de exigencia coinciden con lo estipulado por la mayoría de los programas de licenciatura

Page 12: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

¿Quién elabora el examen?

• El CENEVAL construye y opera cada examen y asume la responsabilidad jurídica por sus servicios.• Pero los contenidos y características de cada examen son determinados por un Consejo Técnico externo y sus comités académicos.

Page 13: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Estructura del EGEL

Evaluación de• Conocimientos: reactivos de opción

múltiple• Habilidades: problemas o casos

(reactivos asociados)

Page 14: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

¿Cómo se elabora un EGEL?

Perfilreferencialde validez

Contenido Temático

Identificación conocimientos y habilidadesBanco de

Reactivos

Tabla especificaciones

Distribución y peso de las áreas

Examen

ComitésComitésAcadémicosAcadémicos

Page 15: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

FICHA TÉCNICA DE LA PRUEBA• Número de áreas: 3• Número de subáreas: 18• Número de reactivos: 300• Formato de reactivos: opción múltiple• Opciones de respuesta: 4• Aplicación: 2 sesiones de 4 hrs. cada

una

Page 16: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Lineamientos para la elaboración de

reactivos

Page 17: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

¿QUÉ ES UN REACTIVO?• Materia prima de una prueba.• Cuestionamiento que se dirige a explorar la presencia o ausencia de un conocimiento, habilidad o actitud determinada.

TIPOS:• Completamiento (respuesta simple o breve)• Respuesta alterna (sí-no, falso-verdadero)• Jerarquización (ordenamiento)• Apareamiento (correspondencia)• Localización (identificación)• Opción múltiple

Page 18: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

TIPOS DE REACTIVOS

Según tipo de respuesta CaracterísticasAbierta:

–Ensayo–Respuesta breve–Complementación

•Subjetivos•Difícil calificación e interpretación

Cerrada:–Verdadero-Falso–Correspondencia–Opción múltiple

•Objetivos•Mayor facilidad de calificar•Excento de interpretación

Page 19: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Reactivos de opción múltiple

Están conformados por:

La base es el enunciado que presenta la situación, caso o problema planteado en una pregunta, afirmación o enunciado incompleto.

Las opciones son las posibles respuestas, entre las cuales sólo una responde correctamente y las otras son respuestas incorrectas llamadas distractores.

Page 20: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Reactivo de opción múltiple

¿Quién es el padre de la psicología científica?

A)Sigmund FreudB)B.F. SkinnerC)William JamesD)Wilhem Wundt

Base

Opciones

Page 21: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

•Lenguaje apropiado para la asignatura.•Redacción sencilla y correcta.•Proporcionar únicamente la información necesaria.•Manejar sólo un resultado de aprendizaje.•No evaluar el sentido común del sustentante.•Tomar en cuenta el nivel escolar de los examinados.

Lineamientos

Page 22: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

•Tomar como punto de partida la tabla de especificaciones

•No aumentar la dificultad del reactivo utilizando tecnicismos o contenidos poco significativos

•No se deberán hacer reactivos con citas textuales del material didáctico o que requieran respuestas memorísticas.

•Cada reactivo debe ser independiente uno de otro

Lineamientos

Page 23: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Base

•Cada enunciado debe presentar únicamente un problema.•Incluir los elementos estrictamente necesarios para comprender el sentido.•Evitar términos que confundan o den claves de la respuesta correcta.•Evitar las formas negativas.

Page 24: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Opciones•Tener concordancia gramatical con la base.•Ser homogéneas gramaticalmente entre ellas.•Pertenecer a un mismo campo semántico.•No repetir opciones, ni con el empleo de sinónimos.•Procurar presentar la misma extensión.•No utilizar:TODAS LAS ANTERIORES, NINGUNA DE LAS ANTERIORES, NO SÉ, NO EXISTE, ni opciones en blanco.

Page 25: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Opciones

•Incluir distractores plausibles.•Utilizar enunciados verosímiles pero incorrectos.•Incluir en los distractores los errores más comunes de los estudiantes.•Evitar que una opción ayude a elegir la respuesta correcta por indicios gramaticales o por plausibilidad.•Justificar el tipo de error que se comete para contestar.

Page 26: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Respuesta correcta

Sólo una respuesta correcta.•La respuesta debe resolver el problema satisfactoriamente.•Se debe justificar el razonamiento de la respuesta correcta en términos de qué tienen que saber y hacer para contestar correctamente.

Page 27: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

EJEMPLOS DE ERRORES EN REACTIVOS

Page 28: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Incluya en la base del reactivo la idea lo más completa posible

En las pruebas objetivas, el término objetivas se refiere al método de:

A) calificar la respuesta.B) identificar los resultados de aprendizaje.C) presentar el problema.D) seleccionar el contenido del test.

MEJORADO

Redacción del reactivo

En las pruebas objetivas, el término objetivas:

A) se refiere al método de calificar las respuestas.B) se refiere al método de identificar los resultados de aprendizaje. C) se refiere al método de presentar el problema.D) se refiere al método de seleccionar el contenido del test.

DEFICIENTE

Page 29: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

La construcción negativa requiere ser utilizada en la base del reactivo, debidamente enfatizada. La palabra EXCEPTO posibilita menor desgaste cognitivo para el estudiante.

Al elaborar reactivos de opción múltiple todas las siguientes son prácticas deseables, EXCEPTO: A) acortar la base alargando las opcionescortar la base alargando las opciones.B) subrayar ciertas palabras de la base para recalcarlas.C) enunciar la base de manera afirmativa.D) usar una base que pueda funcionar como ítem de respuesta breve.

MEJORADO

Base negativa¿Cuál de las siguientes no es una práctica deseable cuando se preparan ítemes de opción múltiple?

A) Acortar la base alargando las opciones.A) Acortar la base alargando las opciones.B) Subrayar ciertas palabras de la base para recalcarlas.C) Enunciar la base de manera afirmativa.D) Usar una base que pueda funcionar como ítem de respuesta breve.

DEFICIENTE

Page 30: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

La palabra investigación que aparece en el pie y en la respuesta correcta puede proporcionar una clave al estudiante

Pistas entre la base y la respuesta correcta

¿Cuál de las siguientes publicaciones consultaría en primer lugar para encontrar artículos de investigación sobre pruebas de aprovechamiento?A) Revista de Investigación Educativa.B) Suplemento de Medición y Educación.C) Suplemento de Consulta Psicologica.D) Suplemento de Pscología Educativa.

Page 31: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Los resultados de aprendizaje son más útiles en la elaboración de pruebas cuando están:

A) claramente enunciados en términos conductuales.claramente enunciados en términos conductuales.B) elaborados por maestros y alumnos en colaboración.C) preparados después de que ha ocurrido la enseñanza.D) enunciados en términos generales.

La palabra que enfatiza CLARAMENTE puede dar la clave de la respuesta correcta.

Enfatizar la opción correcta

Page 32: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

La palabra puede es bastante obvia. Observe como las otrasopciones inician de forma distinta. Esta clase de errores, tanto por extensión como el tiempo puede ser una clave para elegir la respuesta correcta.

La falta de atención a los resultados de aprendizaje durante laPreparación de un test:

A) puede producir una prueba menos pertinente con el programa educativo.puede producir una prueba menos pertinente con el programa educativo.B) producirá un mayor uso de las preguntas de ensayo.C) hará más difícil la elaboración de los reactivos.D) disminuirá la calidad técnica de los reactivos.

Falta de homogeneidad en la redacción inicial de la opción A)

Page 33: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

¿Cuál de las siguientes características es la más importante enlos resultados de las pruebas de aprovechamiento? A) pertinencia.B) confiabilidad.C) consistencia.D) objetividad.

Las palabras “consistencia” y “confiabilidad” pueden eliminarse, ya que ambas significan lo mismo.

Sinónimos

Page 34: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

La obtención de una jerarquía confiable del aprendizaje de losestudiantes es de primordial importancia cuando se usan pruebas de:

A) aprovechamiento general.aprovechamiento general.B) inteligencia.C) habilidad verbal.D) velocidad.

DEFICIENTE

Campo semántico

MEJORADO

La obtención de una jerarquía confiable del aprendizaje de losestudiantes es de primordial importancia cuando se usan:

A) pruebas de aprovechamiento general.A) pruebas de aprovechamiento general.B) descripciones conductuales.C) listas de comprobación.D) cuestionarios.

Page 35: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Formato de reactivos

Page 36: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

RESPUESTA CORTA O BREVE

Planteamiento de un problema de forma sencilla, permitiendo hacer cuestionamientos de manera directa.

Recomendaciones:1.- Reducirse al ámbito estrictamente informativo de los contenidos2.- Incorporar a su planteamiento expresiones e instrucciones precisas que no dejen lugar a multiplicidad en la interpretación de la respuesta que se espera

Page 37: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

 Acción que le permite determinar cuál es la situación actual de la escuela. a)     Pronósticob)     Diagnósticoc)      Objetivod)     Estrategia 

EJEMPLO RESPUESTA CORTA O BREVE

Page 38: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Enunciado con espacios en blanco que implica completar la expresión eligiendo la palabra o frase correcta.

COMPLETAMIENTO

Recomendaciones:1.- Evite usar más de dos espacios en blanco en un mismo reactivo.2.- Debe anotarse en primer término la orden de elección y posteriormente el párrafo incompleto.

Page 39: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

EJEMPLO COMPLETAMIENTO

 El enfoque de sistemas aplicado a las organizaciones, considera a la organización como un sistema __________________ integrado por varios subsistemas. a)     psicosocial abiertob)     sociotécnico abiertoc)      sociotécnico establed)     psicosocial cerrado  

Page 40: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

ORDENAMIENTO O JERARQUIZACIÓN

Consisten de una lista de elementos o datos, que tienen que ser ordenados de acuerdo con el criterio que se indica en las instrucciones (cronológico, lógico, evolutivo, por rangos, etc.).

Inician con una instrucción o pregunta y a continuación aparecen las palabras o enunciados que forman parte de la base del reactivo precedidos por un número.  

Page 41: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Recomendaciones:1.- No emplear menos de 4 ni más de 7 cuestiones para ordenar.2.-No mezclar en una misma proposición o enlistado elementos de distinta naturaleza ni distractores.3.-Establecer con claridad el criterio para ordenar o jerarquizar el material.4.-Manejar estos reactivos sólo cuando se trate de explorar objetivos en los que la conducta correspondiente se refiera a discriminar posiciones, ordenar, jerarquizar, etc.

ORDENAMIENTO O JERARQUIZACIÓN

Page 42: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

 Las siguientes son categorías del campo afectivo propuestas por Bloom en su taxonomía para la elaboración de objetivos conductuales. Seleccione la opción que las ordena correctamente.1. respuesta2. organización3. recepción4. valorización5. caracterización por un valor A) 3, 1, 4, 2, 5B) 1, 4, 2, 5, 3C) 4, 2, 5, 3, 1D) 2, 5, 3, 1, 4

EJ. ORDENAMIENTO O JERARQUIZACIÓN

Page 43: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

SELECCIÓN DE ELEMENTOS EN UN LISTADO

Para este formato se presenta una pregunta o instrucción la cual es seguida de una serie de elementos que la responde, sin embargo no todos los elementos corresponden a la respuesta correcta, por lo que hay que seleccionar solamente aquellos correctos.Recomendaciones: 1.- Se sugiere no emplear menos de 4 ni más de 7 cuestiones.2.- No mezclar en una misma proposición o enlistado elementos de distinta naturaleza ni distractores.3.- Manejar estos reactivos sólo cuando se trate de explorar objetivos en los que la conducta correspondiente se refiera a discriminar aprendizajes.

Page 44: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

SELECCIÓN DE ELEMENTOS EN UN LISTADO

A continuación se presenta una lista de características que debe tener la evaluación curricular, según diferentes enfoques. Elija las que correspondan a la tecnología educativa: Características1.       Totalizadora2.       Objetiva3.       Confiable4.       Histórica5.       Válida6.       Transformadora Seleccione aquella opción que considere correcta.

 A)     2, 4, 6B)     1, 3, 4C)      2, 3, 5D)     1, 3, 5 

Page 45: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

RELACIÓN DE COLUMNAS, APAREAMIENTO Y/O CORRESPONDENCIA

Se caracterizan por pedir el establecimiento de relaciones entre elementos de dos grupos o series. Son precedidos de un enunciado que incluye la instrucción de selección o relación.

Recomendaciones:1.- Debe contener instrucciones claras y precisas con el fin de orientar sobre el criterio para establecer relaciones.

2.- Sirve para evaluar objetivos en donde se tengan que llevar a cabo actividades como: relacionar, vincular, clasificar, aplicar principios, inferir, etc.

Page 46: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Recomendaciones:

3.- Construir grupos en que los elementos y relaciones sean, en cada uno, del mismo tipo y naturaleza.

4.- Se puede optar por poner el mismo número de opciones en ambas columnas, así como una de ellas puede contener un menor número de elementos donde se realicen categorías más generales. En una de las columnas se recomienda poner números y en la otra letras.

RELACIÓN DE COLUMNAS, APAREAMIENTO Y/O CORRESPONDENCIA

Page 47: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

 

Relacione correctamente las fases de desarrollo psicosexual, según Freud, con su edad de aparición en el ser humano. Fases Edad de aparición   1. Latencia

a) 0-18 meses 2. Anal

b) 18 meses -3 años 3. Oral

c) 3-6 años 4. Fálica

d) 6-12 años     A)1d, 2b, 3a, 4c.B)1c, 2a, 3b, 4dC)1b, 2c, 3d, 4aD)1a, 2c, 3a, 4c 

RELACIÓN DE COLUMNAS, APAREAMIENTO Y/O CORRESPONDENCIA

Page 48: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL
Page 49: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

El sujeto debe seleccionar la opción que

corresponde al fin, objetivo o propósito

indicado en la base. Se usan expresiones

como: para qué, con qué objetivo.

PROPÓSITO

Page 50: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

¿Para qué es útil la estadística inferencial?   A) Describir la distribución de la población B) Generalizar resultados C) Estudiar el efecto de una variable D) Analizar los resultados

PROPÓSITO

X

Page 51: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Se cuestiona acerca de las causas de un

hecho o fenómeno. Se usan expresiones

como: por qué, cuál es la causa o razón, cuál

es el origen.

CAUSA

Page 52: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Una persona sufre un accidente en el cuál se golpea fuertemente en la cabeza. Después del accidente, tiene problemas para tomar decisiones, planear a futuro y es incapaz de comportarse de acuerdo a las convenciones sociales. El origen de estos problemas es una lesión en el lóbulo ________.

A) temporal

B) occipital

C) frontal

D) parietal

CAUSA

X

Page 53: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Contrario al anterior, cuestiona acerca de los

efectos o consecuencias de un hecho o

fenómeno. Se usan expresiones como: qué

sucede cuando..., cuál es el efecto, qué

provoca; si X entonces Y.

EFECTO

Page 54: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

La administración de 0.25 mg/kg de cipionato de estradiol en perras provoca en seis días:

 X A) Pancitopenia aplástica B) Estro fértil C) Piometra D) Estro anovulatorio

EFECTO

X

Page 55: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Se refiere a la relación entre dos hechos o

fenómenos. Se usan expresiones como:

qué sucede cuando..., cómo se relaciona X

con Y.

ASOCIACIÓN

Page 56: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

La esquizofrenia está asociada con:

A) Disminución en serotoninaB) Aumento en serotoninaC) Disminución en dopaminaD) Aumento en dopamina

ASOCIACIÓN

X

Page 57: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

En una situación específica planteada en la

base del reactivo, el sujeto debe identificar

el principio que se ha olvidado, el tipo de

error que se ha cometido.

IDENTIFICACIÓN DEL ERROR

Page 58: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Unos cerdos han sido tratados con penicilina (22,000 U.I. vía intramuscular) y oxitetraciclina en el alimento (200 g/tonelada) desde hace 6 días sin que haya respuesta ¿Cuál considera que sea la causa de falta de respuesta al tratamiento? A) El tratamiento está equivocadoB) Incorrecta vía de administración de antibióticosC) No son las dosis adecuadas para la edad de los animalesX D) Se debe esperar más tiempo para valorar la respuesta al tratamiento

IDENTIFICACIÓN DEL ERROR

Page 59: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

El sujeto debe elaborar un juicio acerca de la

opción más adecuada para un planteamiento

o condición específica, considerando las

ventajas y desventajas. Se usan expresiones

como: a partir de los datos considera que, lo

más adecuado es, lo ideal es.

VALORACIÓN

Page 60: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

En un terreno de aluvión , de 20 Ha con: ligera tendencia a la sodicidad; fertilidad en N baja, drenaje bueno, rico en potasio, pobre en fósforo, con contenido de materia orgánica bajo, ¿qué tipo de fertilizante es el más adecuado?  A) Nitrato de amonio B) Nitrato de sodioX C) Sulfato de amonio D) Amoniaco anhidro

VALORACIÓN

Page 61: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Lineamientos para elaboración de multireactivos

Page 62: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Multirreactivos

• Propósito:

Evaluar las habilidades del recién egresado para analizar e interpretar información, tomar de decisiones y elaborar juicios de valor, ante problemas específicos

Page 63: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Multirreactivos

Conformados por:• Un planteamiento inicial (material

introductorio) un párrafo, una tabla, una gráfica, un mapa o un dibujo

• Reactivos de opción múltiple vinculados con la situación planteada

Page 64: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Estructura del Multirreactivo

Planteamiento

Reactivo1

Reactivo2

Reactivo3

Reactivo 4

Reactivo5

Reactivo6

Page 65: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Lineamientos

• Tener como referencia situaciones que usted considere que un alumno enfrentará en el ámbito laboral inmediato a su egreso.

Page 66: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Lineamientos

Proporcionar suficiente información, implícita o explícitamente, que permita comprender el sentido correcto del problema y la solución del caso.

Evitar dar detalles innecesarios

Page 67: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

• Cuide que la redacción sea precisa, asimismo evite

utilizar términos que confundan o den claves para

encontrar la respuesta correcta de algún reactivo.

Lineamientos

Page 68: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

• Puede incluir más información sobre el caso

insertándola entre los reactivos a fin de dar una

secuencia lógica a la resolución del caso

Lineamientos

Page 69: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

• Los reactivos o preguntas se hacen a partir de la

información presentada en el planteamiento del

problema.

Lineamientos: Reactivos asociados

Page 70: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

• Los reactivos deben ser independientes entre sí, evitando que al responder uno, se dé la clave para contestar otro.

• Evite que un reactivo apoye la elección de la respuesta

correcta de otros reactivos.

Lineamientos: Reactivos asociados

Page 71: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Defecto: reactivos del tema pero se responden sin leer el plantemiento

Planteamiento

Reactivo1

Reactivo2

Reactivo3

Reactivo 4

Reactivo5

Reactivo6

Page 72: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Defecto: reactivos se contesten entre sí:

Planteamiento

Reactivo1

Reactivo2

Reactivo3

Reactivo 4

Reactivo5

Reactivo6

Page 73: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

• Los reactivos exploran habilidades para la aplicación o

análisis de la información no son de reconocimiento o

identificación.

• No incluya reactivos sobre conocimiento de términos,

conceptos o definiciones.

Lineamientos: Reactivos asociados

Page 74: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

• Las respuestas a los reactivos no deben aparecer, de

manera explícita, en el texto de la escena o planteamiento

(no deben ser preguntas de lectura de comprensión).

Lineamientos: Reactivos asociados

Page 75: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

• Plantee la situación inicial: Escriba la descripción de la situación inicial

incluyendo todos los datos necesarios para que el problema sea reconocido por el recién egresado como si fuera real.

Recomendaciones

Page 76: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

En el planteamiento del problema verifique:

• ¿Incluyó sólo los elementos necesarios?

• ¿El planteamiento es demasiado extenso

o muy corto?

• ¿Es lo suficientemente claro que se

entiende sin leer las preguntas?

Recomendaciones

Page 77: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

• Para elaborar los reactivos: 1° Escriba las preguntas de manera abierta:

¿Cuál sería el primer paso....? Usted considera que lo primero que se debe realizar es...¿Cuál sería el paso más adecuado...? ¿Cómo considera el uso de...?¿De acuerdo con la información usted decide...? ¿Usted considera que...? ¿Qué sugiere...? ¿Usted recomendaría...?

¿Usted concluye que...?

Recomendaciones

Page 78: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

• Convierta las preguntas abiertas a

reactivos de opción múltiple

• Marque la respuesta correcta.

Recomendaciones

Page 79: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Después de elaborar todas las

preguntas, organícelas

considerando una secuencia lógica

Recomendaciones

Page 80: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Al redactar los reactivos verifique:¿Se ordenaron siguiendo una secuencia

lógica? ¿Se evitaron los reactivos de conocimiento

de términos, conceptos o definiciones? ¿Ningún reactivo ayuda a contestar otro?

Recomendaciones

Page 81: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

MULTIRREACTIVO

Una pareja de esposos asiste a terapia por constantes discusiones acerca de los desacuerdos para realizar las labores del hogar. El terapeuta les pide que realicen una lista de todas las labores domésticas y que les asignen un valor en puntos según el tiempo que se necesitara para realizarlas. Posteriormente, les pide que dividan las labores en partes iguales comprometiéndose por escrito a realizarlas. Si alguno de ellos dejara de realizar las tareas estaría obligado a depositar $5 en el fondo que la otra persona está autorizada a gastar. También les pide que se recompensen verbalmente por haber realizado una tarea.

 

Ejemplo 1

Page 82: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

MULTIRREACTIVO

Reactivo Asociado 1

1. ¿Qué tipo de técnica es utilizada en este caso?  A) Reforzamiento aversivoB) Reforzamiento negativoC) Costo de respuestaD) Extinción

Page 83: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Reactivo Asociado 2

2. ¿Qué tipo de modificación de conducta se está utilizando?  A) Mantenimiento de la respuestaB) ExtinciónC) Aumento de frecuenciaD) Adquisición

MULTIRREACTIVO

Page 84: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

MULTIRREACTIVO

Reactivo Asociado 3

3. ¿Desde qué perspectiva teórica se aborda este caso?A) PsicoanálisisB) Cognitivo-conductualC) ConductualD) Gestalt

Page 85: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Observe la siguiente gráfica

0

50

100

150

200

250

300

1990 1992 1994 1996 1998 2000

MULTIRREACTIVO Ejemplo 2

Page 86: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Reactivo 1

El nombre de la gráfica anterior es:

A) dispersión. B) polígono.C) histograma.D) pastel.

¿Cuál es la media de ingresos entre los años 1999 y 2000

A) 150B) 200C) 250D) 300

De acuerdo a los datos de la gráfica ¿cuál es la moda?

A) 150 B) 200C) 250D) 300

Reactivo 2

Reactivo 3

Page 87: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL
Page 88: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Análisis de reactivos

Page 89: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

ANÁLISIS DE REACTIVOS• CUALITATIVA

– Jueceo• Vigencia• Pertinencia

• CUANTITATIVA– Dificultad y discriminación (modelo clásico)– Punto biserial (coeficiente de correlación)

• Global• Áreas y subáreas

– Dificultad y discriminación logística (modelo logístico)

– Análisis de distractores

Page 90: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Grado de dificultad

Es la proporción de personas que Es la proporción de personas que responden correctamente un reactivo, y responden correctamente un reactivo, y los reactivos adecuados deben ubicarse los reactivos adecuados deben ubicarse entre el 20% y el 80% de respuestas entre el 20% y el 80% de respuestas correctas.correctas.

Page 91: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Grado de dificultad Ejemplo:Ejemplo:

Si a un grupo de 40 estudiantes se le Si a un grupo de 40 estudiantes se le aplica una prueba, en cuya primera aplica una prueba, en cuya primera pregunta sólo responden correctamente 18 pregunta sólo responden correctamente 18 personas, el grado de dificultad se obtiene personas, el grado de dificultad se obtiene de la siguiente manera:de la siguiente manera:

El 45% se encuentra entre el 20% y el 80%El 45% se encuentra entre el 20% y el 80%

45%1000.451004018100

NRCGD

Page 92: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Poder de discriminación

Nos permite determinar si el reactivo lo Nos permite determinar si el reactivo lo contestan correctamente con más contestan correctamente con más frecuencia los buenos estudiantes (alto frecuencia los buenos estudiantes (alto desempeño) que los malos estudiantes desempeño) que los malos estudiantes (bajo desempeño).(bajo desempeño).

Los valores obtenidos pueden ser:Los valores obtenidos pueden ser:

+ = el reactivo discrimina en el grupo de + = el reactivo discrimina en el grupo de AD AD - = el reactivo discrimina en el grupo de - = el reactivo discrimina en el grupo de BDBD0 = el reactivo no discrimina0 = el reactivo no discrimina

Page 93: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Poder de discriminación

Con el ejemplo anterior, de los 40 sujetos, se Con el ejemplo anterior, de los 40 sujetos, se ordenan de mayor a menor por la calificación ordenan de mayor a menor por la calificación total de la prueba y se dividen en dos grupos a total de la prueba y se dividen en dos grupos a partir de la medianapartir de la mediana

alto 13

mediana

5bajo

Page 94: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

SELECCIÓN DE REACTIVOS

1. Elaboración de reactivos2. Revisión (autor-coordinación)3. Selección por jueceo (Consejo Técnico)4. Revisión de estilo5. Piloteo y calibración:

• Parámetros estadísticos6. Selección de un reactivo (validación-

calidad)

Page 95: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL
Page 96: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

Criterios mínimos para evaluar el instrumento

Toda prueba tiene un componente de varianza Toda prueba tiene un componente de varianza de error adjudicable al evaluador y no al de error adjudicable al evaluador y no al estudiante; por esto debemos verificar si la estudiante; por esto debemos verificar si la prueba es pertinente al grupo de estudiantes al prueba es pertinente al grupo de estudiantes al que está siendo aplicada.que está siendo aplicada.

Las pruebas tienen dos indicadores clásicos para Las pruebas tienen dos indicadores clásicos para determinar su calidad: determinar su calidad:

ValidezValidez

ConfiabilidadConfiabilidad

Page 97: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

ValidezValidez

Consiste en que la prueba mida lo que pretende medir.Entre los tipos de validez que existen podemos mencionar los siguientes:

Validez de constructo Validez de contenido Validez predictiva

Page 98: Lineamientos Generales para la Elaboración de Reactivos del CENEVAL

ConfiabilidadConfiabilidad

Se refiere a la precisión o permanencia con la que podemos obtener la misma medición en diferentes condiciones:

Estabilidad temporal Equivalencia Consistencia interna