_Por Qué Evaluar Las Habilidades Intelectuales en Los Procesos de Selección El Caso de Los Exámenes Nacionales de Conocimientos, Habilidades y Competencias Docentes

P a r a c i t a r e s t e a r t í c u l o , l e r e c o m e n d a m o s e l s i g u i e n t e f o r m a t o : Mendieta Parra, A., Nájera Sierra, A. L., Bernal Pedraza, R., Ortiz Landeros, I. (2014). ¿Por qué evaluar las

habilidades intelectuales en los procesos de selección? El caso de los exámenes nacionales de conocimientos, habilidades y competencias docentes. Revista de evaluación educativa, 3 (1). Consultado el

día de mes de año en: http://revalue.mx/revista/index.php/revalue/issue/current

Fecha de recepción: 23 de octubre 2013 Fecha de aceptación: 7 de febrero 2014

¿Por qué evaluar las habilidades intelectuales en los procesos de selección? El caso de los exámenes nacionales de

conocimientos, habilidades y competencias docentes

Adriana Mendieta Parra Centro Nacional de Evaluación para la Educación Superior (CENEVAL), México

Ana Lilia Nájera Sierra Centro Nacional de Evaluación para la Educación Superior (CENEVAL), México

Ramón Bernal Pedraza Centro Nacional de Evaluación para la Educación Superior (CENEVAL), México

Iván Ortiz Landeros Centro Nacional de Evaluación para la Educación Superior (CENEVAL), México

Resumen El propósito de este documento es fundamentar de manera cualitativa y cuantitativa la necesidad y la importancia de evaluar las habilidades intelectuales en los procesos de selección de individuos, en particular para elegir a quienes aspiran a ocupar una plaza docente en la educación básica del Sistema Educativo Mexicano. Asimismo, por medio del uso de modelos de ecuaciones estructurales, se pretende identificar posibles relaciones causales entre las variables de estudio (áreas del examen). Palabras clave: educación básica, habilidades intelectuales, evaluación, modelo de ecuaciones estructurales

Abstract The intention of this article is to base in a qualitative and quantitative way the need and the importance of evaluating the intellectual skills in the processes of selection of individuals, especially to choose those who aspire to take up a teacher position in the basic education of the Educational Mexican System. Likewise, one tries to identify possible causal relations between the variables of study (areas of the examination) by means of the models' use of structural equations.

¿Por qué evaluar las habilidades intelectuales en los procesos de selección? El caso de los exámenes nacionales de conocimientos, habilidades y competencias docentes.

REVALUE: Revista de evaluación educativa Vol. 3, No. 1 2014

Keywords: basic education, intellectual skills, evaluation, structural equation models



Antecedentes Los Exámenes Nacionales de Conocimientos, Habilidades y Competencias Docentes (ENCHCD) son instrumentos de evaluación utilizados en el Concurso Nacional para el Otorgamiento de Plazas Docentes como parte de los procedimientos que fortalecen la transparencia e imparcialidad en la selección del profesorado mejor calificado para ingresar a la docencia en la educación básica, y que se efectúan a partir de la Alianza por la Calidad de la Educación, según la cual el ingreso y promoción en todas las plazas nuevas y las vacantes definitivas se realizarán mediante concurso nacional público, convocado y dictaminado de manera independiente. En el proceso de diseño de los ENCHCD para el Concurso Nacional 2012-2013, se consideró relevante evaluar las habilidades intelectuales de los aspirantes a través de una prueba de opción múltiple; es decir, aquellas habilidades que, mínimamente, un docente debe evidenciar en su quehacer diario, incluidas las que todo profesionista posee y aplica en el ámbito laboral. Las habilidades intelectuales son las capacidades de una persona relacionadas con el conocimiento y el uso de la mente, que ha adquirido y desarrollado a través de la práctica. En otras palabras, son el conjunto de aptitudes que optimizan el aprendizaje de nuevos conocimientos. Las habilidades intelectuales se pueden dividir en las dimensiones siguientes:

Aptitud numérica. Habilidad para la precisión numérica.

Comprensión verbal. Habilidad para comprender lo que se lee o lo que se oye y la relación entre las palabras.

Velocidad perceptual. Habilidad para identificar las similitudes y las diferencias que se pueden ver rápidamente y con precisión.

Razonamiento inductivo. Habilidad de identificar la secuencia lógica de un problema y luego resolverlo.

Razonamiento deductivo. Habilidad para usar la lógica y evaluar las implicaciones de un argumento.

Visualización espacial. Habilidad para imaginar la manera en que se vería un objeto al cambiarle de posición en el espacio.

La memoria. Habilidad de retener y recordar experiencias pasadas. En los últimos años, se ha observado que en los procesos de selección o admisión de aspirantes se evalúan diversos aspectos: conocimiento, habilidades, estado de salud, valores y actitudes, como un mecanismo para garantizar la eficiencia tanto en el estudio como en el ejercicio profesional. Estos aspectos, en conjunto, predicen la adquisición de conocimientos y habilidades propios de una disciplina, así como su aplicación a situaciones novedosas, y son fundamentales en el perfil



de entrada del estudiante para el éxito académico en la Universidad, y en áreas y carreras específicas (Cliff & Montero, 2010). Es frecuente que en los procesos de ingreso a instituciones de educación superior se evalúen principalmente los conocimientos y las habilidades de los aspirantes a través de diferentes instrumentos (Cervantes, 2009). El Examen de Conocimientos y Habilidades Básicas (EXHCOBA) explora el lenguaje escrito, el razonamiento matemático y los conocimientos básicos (Instituto de Investigación y Desarrollo Educativo, 1992). El College Board mide el razonamiento matemático y verbal. La Prueba de Aptitudes y Competencias para la Educación Superior (PACES) identifica aptitudes de acuerdo con las necesidades de una determinada disciplina. El Test de Habilidades Múltiples evalúa conocimientos (información general) y habilidades (razonamiento verbal, razonamiento lógico-matemático e ingeniosidad y creatividad) específicos para las ciencias médicas (Espinosa, y otros, 2008). El Examen Nacional de Ingreso a la Educación Superior (EXANI II), del Ceneval, evalúa las habilidades matemáticas y habilidades verbales a través de contenidos relacionados con la comprensión de lectura y la aritmética. En el ámbito laboral, recientemente ha habido un interés por evaluar las competencias y habilidades intelectuales de los aspirantes a incorporarse al servicio profesional, como es el caso del Instituto Federal Electoral, que aplica el Examen de Habilidades Intelectuales y Ciencias Sociales, con el fin de identificar el nivel de dominio de los aspirantes a ingresar al Servicio Profesional Electoral con respecto a sus habilidades intelectuales y conocimientos en ciencias sociales, y seleccionar a quienes demuestren que cuentan con el perfil adecuado (CENEVAL, 2007). Evaluación de las Habilidades intelectuales básicas En el diseño de los ENCHCD, se determinó evaluar las habilidades intelectuales asociadas a la comprensión lectora y el razonamiento matemático a través de la resolución de secuencias lógicas, ya que son consideradas como “habilidades intelectuales para un profesional”, que permiten:

Resolver problemas del área profesional o de la vida, en los que, además de los conocimientos, intervienen las capacidades, aptitudes, conducta intelectual y social, y se debe intervenir a fondo, con conocimiento de las causas que los han ocasionado e introducir acciones para transformar la situación existente.

Fundamentar la aplicación de métodos y procedimientos para resolver problemas de diversas áreas afines a la preparación profesional.

Demostrar proposiciones de diversas áreas del conocimiento afines a la preparación profesional, mediante el uso de conceptos, juicios y razonamientos adecuados.



Entre las pruebas estandarizadas que evalúan el constructo de competencia lectora se encuentran los estudios internacionales conocidos como el Estudio de Alfabetismo y Destrezas de Adultos, el Estudio Internacional sobre el Progreso de la Alfabetización Lectora y el Programa para la Evaluación Internacional de Alumnos, conocidos, respectivamente, como ALL, PIRLS y PISA, por sus siglas en inglés (Lüscher, Castillo, Zúñiga, & Llarena, 2009); de este último (PISA) se revisaron los referentes que tiene sobre la evaluación de la comprensión lectora, tomando en cuenta la clasificación de los tipos de textos, así como los niveles de comprensión (OCDE, 2006); y a escala nacional, el Examen para la Calidad y el Logro Educativos (EXCALE). Por otra parte, desde 1995, el Estudio Internacional de Tendencias en Matemáticas y Ciencias (TIMSS, por sus siglas en inglés) de la Asociación Internacional para la Evaluación del Logro Académico (IEA) ha obtenido datos acerca del logro académico en matemáticas durante la educación básica en distintos países, con el fin de mejorar la enseñanza y el aprendizaje en esta área (Lüscher, Castillo, Zúñiga, & Llarena, 2012). En México, la enseñanza de las matemáticas se está transformando al promoverse las competencias básicas de la disciplina, entendiendo las tareas y procesos matemáticos como habilidades para la vida y no solo de interés académico. En el caso de la educación media superior, destacan los lineamientos de asignatura de los bachilleratos tecnológicos que establecen el objetivo principal de promover una “formación matemática para el funcionamiento efectivo en la sociedad moderna”, lo que conlleva “la habilidad para pensar y trabajar matemáticamente, incluyendo la creación de modelos y la solución de problemas”, de modo que se puedan aplicar los conocimientos y destrezas aprendidos en el aula “en una amplia variedad de contextos personales, sociales y de trabajo” (Lüscher, Castillo, Zúñiga, & Llarena, 2012). Estructura de los ENCHCD En la estructura de los ENCHCD se consideraron aspectos para evaluar la comprensión lectora y el razonamiento numérico -a través de la aplicación de secuencias lógicas-, además de los aspectos propios de la práctica del docente de educación básica, como son el conocimiento del plan y programas de estudio de educación básica y los aspectos disciplinares de la asignatura o área en la que imparte clases (Tabla 1).



Área Subáreas Temas

Habilidades intelectuales

Comprensión lectora

Tipos de texto

Niveles de comprensión

Secuencias lógicas Sucesiones numéricas

Sucesiones de figuras

Conocimiento de la educación básica

Articulación de la educación básica

Normatividad y ética docente

Mapa curricular y articulación de los niveles educativos

Competencias para la vida y Perfil de egreso

Plan de estudios 2011

Principios pedagógicos

Campos de formación

Competencias docentes

Programas de estudio y competencias didácticas

Programa de estudios (conceptos y principios)

Planificación docente (estrategias, gestión de ambientes de aprendizaje, recursos y materiales didácticos y digitales)

Evaluación para el aprendizaje (enfoque, aprendizajes esperados, tipos, instrumentos y estrategias)

Dominio disciplinar (Temas a definir en función del tipo de examen)

Tema 1

Tema 2

Tema n

Tabla 1. Estructura general de los ENCHCD Para fines de diseño de los exámenes, se consideraron las siguientes definiciones conceptuales, que fueron el marco de referencia para el desarrollo de los contenidos específicos y las preguntas que se elaborarían. Cabe mencionar que, partir de estas definiciones, se seleccionaron los contenidos y se precisaron los temas de cada subárea (Tabla 2). Habilidades intelectuales: Razonamiento que engloba capacidades que favorecen el aprendizaje de nuevos conocimientos e incluye el uso de varias estrategias de lectura para reconstruir el significado que el autor quiere comunicar, mediante operaciones mentales al leer un texto, así como para resolver situaciones abstractas, con base en operaciones matemáticas, además de la identificación de figuras y cuerpos desde distintos planos y perspectivas. Comprensión lectora. Capacidad para comprender, analizar y utilizar textos escritos para alcanzar los objetivos de un lector: desarrollar sus conocimientos, posibilidades y participación en la sociedad.



Razonamiento numérico. Habilidad para entender, estructurar, organizar y resolver un problema utilizando un método o fórmula matemática. Implica determinar operaciones apropiadas y realizar los correspondientes cálculos para resolver problemas matemáticos. Incluye problemas verbales, cómputos y series numéricas. Secuencias lógicas. Es una sucesión ordenada de símbolos estructurada bajo un patrón o modelo.

Comprensión lectora

Tipos de texto

Por tipos de texto se entiende un conjunto de escritos agrupados, en sentido general, de acuerdo con el tema y, en sentido particular, con la forma, los modos discursivos y las funciones de la lengua que les corresponden.

Niveles de comprensión

Serie de tareas que están asociadas a conocimientos y habilidades que se unen para conseguir un objetivo en la lectura. Estos niveles comparten también una serie de propiedades y dificultades que pueden ir de un grado inferior a un superior, es decir se espera que un lector pueda obtener información explícita e implícita y emitir juicios de valor.

Secuencias lógicas

Sucesiones numéricas

Secuencias lógicas de sucesiones de números a partir de una regla dada; que pueden ser crecientes o decrecientes. Se consideraron dos formas para generarlas: 1) De acuerdo con una razón: aritmética o geométrica (números enteros y fraccionarios), o potencial (números enteros). 2) Utilizando la sucesión de Fibonacci (suma de los dos términos anteriores para encontrar el siguiente).

Sucesiones de figuras

Secuencias lógicas de figuras planas y cuerpos, relacionados por transformaciones sucesivas (reflexiones, rotaciones y traslaciones).

Tabla 2. Definición de las subáreas de los ENCHCD Ejemplos de reactivos Comprensión lectora Lea el siguiente texto y conteste las preguntas Ladrón de sábado Hugo, un ladrón que solo roba los fines de semana, entra en una casa un sábado por la noche. Ana, la dueña, una treintañera guapa e insomne empedernida, lo descubre in fraganti. Amenazada con la pistola, la mujer le entrega todas las joyas y cosas de valor, y le pide que no se acerque a Pauli, su niña de tres años. Sin embargo, la niña lo ve, y él la conquista con algunos trucos de magia. Hugo piensa: «¿Por qué irse tan pronto, si se está tan bien aquí?». Podría quedarse todo el fin de semana y gozar plenamente la situación, pues el marido –lo sabe



porque los ha espiado– no regresa de su viaje de negocios hasta el domingo en la noche. El ladrón no lo piensa mucho: se pone los pantalones del señor de la casa y le pide a Ana que cocine para él, que saque el vino de la cava y que ponga algo de música para cenar, porque sin música no puede vivir.

1. ¿A qué tipo de texto corresponde la lectura?

A) Nota informativa B) Crónica C) Cuento D) Leyenda

2. ¿Cuál de las siguientes oraciones expresa el modo discursivo del texto?

A) Menciona cualidades de objetos, hechos y personas B) Presenta hechos o acciones en una secuencia temporal y causal C) Plantea razonamientos que intentan persuadir al lector D) Contiene información que explica hechos o conceptos sobre un tema

3. ¿Cuál es la función comunicativa del texto?

A) Emotiva B) Referencial C) Poética D) Apelativa



Secuencias Lógicas

12121

Seleccione la figura que corresponde a la posición siguiente.

A)

C)

B)

D)

Aplicación de los ENCHCD y resultados obtenidos Los ENCHCD se aplicaron el 15 de julio de 2012 a un total de 134,689 sustentantes, distribuidos entre los 24 exámenes como se muestra en la Tabla 3.

No. Examen Nacional de Conocimientos, Habilidades y Competencias Docentes para…

Acrónimo Sustentantes

No. Examen Nacional de Conocimientos, Habilidades y Competencias Docentes para…

Acrónimo Sustentantes

1 Educación inicial INI 93

13 Formación cívica y ética en Secundaria FCE 6,354

2 Educación Preescolar PRE 25,146

14 Inglés en Secundaria IN 3,622

3 Educación Preescolar indígena PRE-IN 655

15 Telesecundaria TS 10,684

4 Primaria PRIM 30,687

16 Educación Física EF 11,137

5 Primaria indígena PRIM-IN 996

17 Educación Tecnológica en Secundaria TEC 6,870

6 Español en Secundaria ES 6,039

18 Educación Especial EED 6,739

7 Matemáticas en Secundaria MT 7,160

19 Educación Especial (Psicólogo) EEP 4,239

8 Biología en Secundaria BI 4,049

20 Artes Visuales en Secundaria VIS 526

9 Física en Secundaria FI 1,663

21 Danza en Secundaria DAN 450

10 Química en Secundaria QUI 1,819

22 Teatro en Secundaria TEA 120

11 Geografía en Secundaria GE 1,785

23 Música en Secundaria MUS-SEC 246

12 Historia en Secundaria HI 3,329

24 Acompañamiento de Música en Preescolar

MUS-PRE 281

Total de sustentantes 134,689

Tabla 3. ENCHCD, acrónimos y número de sustentantes. Cada sustentante debía responder 30 preguntas correspondientes al área de Habilidades intelectuales y 70 relacionadas con aspectos de la práctica docente. Para cada examen se derivaron sus estadísticos (dificultad media, desviación estándar, discriminación media y confiabilidad), utilizando la Teoría Clásica de los Test.

1. .



Con el propósito de analizar el Área de Habilidades intelectuales de manera específica, se obtuvieron los estadísticos de las subáreas Comprensión lectora y Secuencias lógicas, mismos que se muestran en la Tabla 4.

Tabla 4. Estadísticos globales de los ENCHCD. Al obtener los estadísticos globales de la subárea de Comprensión lectora se observó que la dificultad media se ubicó en 7.7 aciertos (de 14 posibles), equivalente al 55%, con una varianza de 5.70, un alfa de Cronbach de 0.5, un error estándar de 1.68 y una media de correlación punto biserial de 0.48. Al revisar la dificultad obtenida por los sustentantes en los diversos exámenes, se encontró que los que obtuvieron menores puntajes en promedio fueron los sustentantes de Preescolar indígena y Educación inicial con 46% y 48% de respuestas correctas, respectivamente; mientras que los sustentantes que obtuvieron un mejor puntaje fueron los de Teatro, con un promedio de 61% de respuestas correctas.

ExamenTotal de

sustentantes

Media de

aciertosVarianza

Alfa de

Cronbach

Error

Estándar

Porcentaje

de

Aciertos

Correlación

P. Bis.

Media de

aciertosVarianza

Alfa de

Cronbach

Error

Estándar

Porcentaje

de

Aciertos

Correlación

P. Bis.

INI 93 6.7 6.3 0.6 1.6 48% 0.5 6.4 7.8 0.6 1.7 40% 0.5

PRE 25,146 7.3 5.4 0.5 1.7 52% 0.5 7 7.8 0.6 1.8 44% 0.5

PRE-IN 655 6.4 6.1 0.5 1.7 46% 0.5 5.9 7.2 0.6 1.8 37% 0.5

PRI 30,687 8 5.9 0.5 1.7 57% 0.5 7.9 10.2 0.7 1.7 49% 0.6

PRI-IN 996 7.1 5.5 0.5 1.7 51% 0.5 6.4 7.9 0.6 1.8 40% 0.5

ES 6,039 8.3 5.5 0.5 1.7 60% 0.5 7.1 8.2 0.6 1.8 44% 0.5

MT 7,160 7.9 5.3 0.5 1.7 57% 0.5 10.3 8.8 0.7 1.7 64% 0.6

BI 4,049 7.6 5.6 0.5 1.7 54% 0.5 7.4 8.6 0.6 1.8 47% 0.5

FI 1,663 7.8 5.4 0.5 1.7 56% 0.5 8.9 9.8 0.7 1.7 56% 0.6

QUI 1,819 8 5.3 0.5 1.7 57% 0.5 8.4 9 0.7 1.7 52% 0.5

GE 1,785 7.3 5.6 0.5 1.7 52% 0.5 7.2 8.6 0.6 1.8 45% 0.5

HI 3,329 7.5 5.8 0.5 1.7 54% 0.5 7 8.6 0.6 1.8 44% 0.5

FCE 6,354 7.6 5.7 0.5 1.7 55% 0.5 7.1 8.6 0.6 1.8 44% 0.5

IN 3,622 8.3 5.1 0.5 1.7 60% 0.5 7.9 8.5 0.6 1.7 49% 0.5

TS 10,684 7.5 5.4 0.5 1.7 54% 0.5 7.4 9 0.7 1.8 47% 0.5

EF 11,137 7.2 6.3 0.5 1.7 51% 0.5 7.7 8.7 0.7 1.7 48% 0.5

TEC 6,870 7.5 5.6 0.5 1.7 54% 0.5 8.4 9.4 0.7 1.7 53% 0.6

EED 6,739 7.7 5.1 0.4 1.7 55% 0.5 7.6 7.9 0.6 1.7 47% 0.5

EEP 4,239 8.1 5 0.4 1.7 58% 0.5 7.6 8.1 0.6 1.7 48% 0.5

VIS 526 8 5.8 0.5 1.7 57% 0.5 8 8.7 0.7 1.7 50% 0.5

DAN 450 7.3 6.1 0.5 1.7 52% 0.5 7.1 7.8 0.6 1.7 44% 0.5

TEA 120 8.6 4.7 0.4 1.7 61% 0.5 8.1 8.5 0.6 1.7 51% 0.5

MUS-SEC 246 7.8 6.3 0.6 1.7 55% 0.5 8.1 10.1 0.7 1.7 51% 0.6

MUS-PRE 281 7.4 6.3 0.6 1.7 53% 0.5 7.2 9.2 0.7 1.7 45% 0.5

Comprensión Lectora Secuencias Lógicas



Gráfica 1. Porcentaje de respuestas correctas obtenido en la subárea de Comprensión Lectora. Los puntajes más altos se asocian a sustentantes que compiten por una plaza en Español, Inglés y Teatro. Para Secuencias lógicas la dificultad media se encontró en 7.68 aciertos (de 16 posibles), equivalente al 48%, una varianza de 9.4, un alfa de Cronbach de 0.68, un error estándar de 1.74 y una media de correlación punto biserial de 0.54. Al revisar la dificultad obtenida por los sustentantes en los diversos exámenes, se advirtió que quienes obtuvieron menores puntajes en promedio fueron los sustentantes de Preescolar indígena, con 37% de respuestas correctas en promedio; mientras que los de mayor puntaje fueron los sustentantes de Matemáticas, con 64% de respuestas correctas en promedio.

Gráfica 2: Porcentaje de respuesta correcta obtenido en la subárea de Secuencias Lógicas. Los puntajes más altos se asocian a sustentantes que compiten por una plaza en el área de Ciencias (Matemáticas, Física, Química) y Educación tecnológica.

0%

10%

20%

30%

40%

50%

60%

70%

PR

E-IN IN

I

PR

I-IN EF

PR

E

GE

DA

N

MU

S-P

RE BI

HI

TS

TEC

FCE

EED

MU

S-SE

C FI

PR

I

MT

QU

I

VIS

EEP ES IN

TEA

Porcentaje de Respuesta Correcta Comprensión Lectora

0%

10%

20%

30%

40%

50%

60%

70%

PR

E-IN IN

I

PR

I-IN

PR

E ES HI

FCE

DA

N GE

MU

S-P

RE BI

TS

EED EF

EEP

PR

I

IN VIS

TEA

MU

S-SE

C

QU

I

TEC FI

MT

Porcentaje de Respuesta Correcta Secuencias Lógicas



Con el objetivo de constatar empíricamente la relación existente entre las Habilidades intelectuales y los conocimientos y habilidades relacionadas con la práctica profesional docente, evaluados a través de las áreas de Conocimiento de la educación básica y Competencias docentes, se realizó un análisis estadístico inferencial a partir de los porcentajes de respuesta correcta obtenidos por los sustentantes en las subáreas de la prueba. Estos puntajes porcentuales se analizaron con ayuda del programa estadístico EQS 6.1, a través de ecuaciones estructurales. Se probó un modelo de regresión estructural con tres variables latentes (que correspondieron a las áreas del examen) y seis observadas (que correspondieron a las subáreas). De este modo, los porcentajes de aciertos obtenidos por los sustentantes en Comprensión lectora y Secuencias lógicas se utilizaron como indicadores de la variable latente “Habilidades intelectuales”, los de Articulación de la educación básica y Plan de estudios 2011 para “Conocimientos de la educación básica” y los de Programas de estudio y competencias didácticas y Dominio disciplinar para “Competencias docentes”. En el modelo se especificó también una relación causal entre los factores, proponiendo que Habilidades intelectuales determinara a Conocimientos de la educación básica y Competencias docentes, y a su vez, esta última fuera determinada también por Conocimientos de la educación básica. Es importante mencionar que se propusieron otros modelos y relaciones entre las variables, además de que se evaluó estadísticamente si era necesario realizar modificaciones al modelo; sin embargo, con estas pruebas se comprobó que el modelo propuesto es el de mejor ajuste para todos los exámenes. El diagrama del modelo se muestra a continuación:



Figura 1. Modelo propuesto de regresión estructural con tres variables latentes. Se obtuvo la solución estandarizada de este modelo para cada uno de los exámenes y sus correspondientes índices de ajuste; los que se consideraron fueron el CFI (Comparative Fit Index) y el RMSEA (Root Mean Square Error of Aproximation). Cabe aclarar que la prueba de Chi cuadrada no fue considerada por trabajar con muestras de gran tamaño para algunos exámenes. Se consideró un buen ajuste cuando simultáneamente se obtuvo un CFI igual o mayor a 0.98 y un RMSEA menor o igual 0.05, el ajuste se consideró marginalmente aceptable con un CFI entre 0.95 y 0.97 y un RMSEA entre 0.06 y 0.1. Otros valores se consideraron indicadores de un mal ajuste (Hooper, Coughlan, & Mullen, 2008).



Índices de Ajuste

Figura 2. Índices de Ajuste (CFI y RMSA) obtenidos por examen. Se encontró que 9 de los 24 exámenes (Música preescolar, Preescolar, Historia, Educación especial psicólogo, Educación especial docente, Formación cívica y ética, Danza, Primaria y Educación tecnológica) obtienen un buen ajuste con el modelo propuesto, es decir, ambos indicadores de ajuste están dentro de las significancias propuestas. Asimismo, 10 exámenes (Primaria indígena, Educación física, Artes visuales, Música en secundaria, Preescolar indígena, Español, Biología, Inglés, Geografía y Física) obtienen un ajuste marginalmente aceptable; mientras que 4 obtuvieron un mal ajuste (Química, Teatro, Matemáticas y Educación inicial) significativo. Se especula que el mal ajuste presente en estos 4 exámenes puede deberse a 3 factores: los relacionados con la prueba, la posibilidad de que en esa población los factores pueden asociarse de forma distinta y, finalmente, el efecto de otras variables intervinientes no consideradas en el modelo. Queda para futuras investigaciones profundizar en estas posibilidades.

0

0.1

0.2

0.3

0.4

0.5

0.6

0.7

0.8

0.9

1

MU

S-P

RE

PR

E HI

EED

FCE

EEP

DA

N

PR

I

TEC

PR

I-IN TS EF VIS

MU

S-SE

C

PR

E-IN ES B

I

IN GE FI

QU

I

TEA

MT

INI

CFI RMSA

CFI RMSAMUS-PRE 1 0PRE 1 0.02HI 1 0.03EED 1 0.03FCE 1 0.04EEP 0.99 0.04DAN 0.99 0.04PRI 0.99 0.05TEC 0.99 0.05PRI-IN 0.99 0.06TS 0.99 0.06EF 0.99 0.06VIS 0.99 0.06MUS-SEC 0.99 0.06PRE-IN 0.98 0.07ES 0.98 0.08BI 0.98 0.08IN 0.98 0.08GE 0.98 0.09FI 0.98 0.1QUI 0.96 0.13TEA 0.96 0.14MT 0.93 0.18INI 0.92 0.18



Conclusiones El Concurso Nacional para el Otorgamiento de Plazas Docentes ha sido, desde el año 2008, un proceso que ha permitido llevar a cabo la selección de docentes de educación básica de manera transparente y equitativa. Debido al impacto de este Concurso Nacional, se han tomado las decisiones que posibilitan realizar una evaluación más precisa de los aspirantes y una mejor toma de decisiones. Entre estas acciones, se ha buscado que los Exámenes Nacionales de Conocimientos, Habilidades y Competencias Docentes (ENCHCD), instrumentos que al día de hoy permiten la evaluación de más de 100 mil docentes o recién egresados de instituciones formadoras de docentes, cumplan con estándares de calidad, validez y confiabilidad. Los resultados obtenidos de este análisis muestran que los contenidos de los ENCHCD permiten realizar una evaluación adecuada de los aspirantes, proporcionando información sobre el nivel de conocimientos y habilidades mínimas necesarias para un óptimo desempeño profesional. Al revisar los índices de ajuste del modelo propuesto, se observa que los puntajes obtenidos por los sustentantes de la mayoría de los exámenes corresponden a lo que se esperaría si las habilidades intelectuales, medidas con el instrumento utilizado, influyeran positivamente sobre el nivel de conocimiento que tienen los sustentantes en aspectos relacionados con la educación básica, y además, acerca de sus competencias docentes. Adicionalmente, es pertinente destacar que los propios conocimientos sobre la educación básica también influyen positivamente sobre las competencias docentes. Debido a que en 2012 se aplicaron por primera vez los Exámenes Nacionales con la estructura referida en este documento, será necesario continuar el análisis de la información para confirmar los resultados obtenidos y fortalecer los exámenes. Asimismo, deberá impulsarse el uso de otros instrumentos de evaluación que permitan evaluar, de manera más amplia, los conocimientos, las habilidades y competencias de los aspirantes a ocupar una plaza en el servicio docente.



Referencias CENEVAL. (2007). Guía para el sustentante. Examen de Ingreso al Servicio Profesional Electoral del IFE. Habilidades Intelectuales y Ciencias Sociales. México: CENEVAL.

Cervantes, A. (2009). Diagnóstico de 27 habilidades intelectuales de los alumnos de primer y tercer semestre de la Escuela Normal Superior Veracruzana. Dr. Manuel Suárez Trujillo. Veracruz: X Congreso Nacional de Investigación Educativa.

Cliff, A., & Montero, E. (2010). El balance entre excelencia y equidad en pruebas de admisión: Contribuciones de experiencias en Sudáfrica y Costa Rica. Revista Iberoamericana de evaluación educativa, 3(2), 7-28.

Espinosa, L., Gómez, D., Arriaga, D., Mercado, M., Sepúlveda, J., Caudillo, C., . . . Márquez, S. (2008). Habilidades intelectuales de los estudiantes de psicología al ingreso y término de la licenciatura. Enseñanza e Investigación en Psicología, 13(1), 5-13.

Hooper, D., Coughlan, J., & Mullen, M. (2008). Structural equation modelling: guidelines for determining model fit. Articles, 2.

Lüscher, S., Castillo, A., Zúñiga, A., & Llarena, R. (2009). La evaluación objetiva de la Habilidad Lectora en la Educación Media Superior. México: CENEVAL.

Lüscher, S., Castillo, A., Zúñiga, A., & Llarena, R. (2012). Niveles de Dominio en Habilidad Matemática: la estrategia de evaluación de ENLACE Media Superior. México: CENEVAL.

OCDE. (2006). Marco de la Evaluación. Conocimientos y Habilidades en Ciencias, Matemáticas y Lectura. España: Santillana.

Documents

_Por Qué Evaluar Las Habilidades Intelectuales en Los Procesos de Selección El Caso de Los Exámenes Nacionales de Conocimientos, Habilidades y Competencias Docentes