En esta edición, nuestros autores narran el desarrollo de las pruebas estandarizadas a lo largo de los 28 años de existencia del Ceneval.
5 REVISTA DE EVALUACIÓN E INVESTIGACIÓN EDUCATIVA Número 5 | 2022
LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
CENEVAL INVESTIGA
Revista de evaluación e investigación educativa Ceneval Investiga
Presentación
El Centro Nacional de Evaluación para la Educación Superior (Ceneval) tiene el agrado de presentar a la comunidad de académicos e investigadores en educación, evaluación y al público en general, como parte de su línea editorial digital sobre temas de evaluación e investigación educativa, el quinto número de la revista Ceneval Investiga . Esta publicación periódica que aparece tres veces al año busca constituirse en un foro para mostrar investigaciones y ensayos realizados por personal del Ceneval y de otros especialistas, organismos e instituciones interesados en temas de educación y evaluación educativa. En esta ocasión el número está dedicado a presentar temas relacionados con la labor que ha realizado el Centro a largo de sus 28 años de existencia y su compromiso con la pertinencia de sus evaluaciones. En este sentido, se incluyen dos artículos que hacen un recorrido por la evolución de los Exámenes Nacionales de Ingreso ( EXANI ) y los Exámenes Generales para el Egreso de la Licenciatura ( EGEL ), desde su surgimiento en los años noventa hasta nuestros días, en los cuales se recoge información sobre los antecedentes que les dieron origen, las transformaciones más relevantes de las que han sido objeto, su alcance a nivel nacional, entre otros datos de interés. Asi - mismo, se habla sobre la importancia de la evaluación externa en la educación superior como un componente imprescindible para el aseguramiento de la calidad educativa y se hace una reflexión en torno a la información que proporcionan las pruebas estandarizadas para la toma de decisiones y sus consecuencias. Finalmente, se aborda un tema central para garantizar que los resultados de los exámenes sean imparciales para los distintos subgrupos de las poblaciones evaluadas, el análi - sis del funcionamiento diferencial de reactivos. Nuevamente, se invita a los académicos e investigadores interesados en los temas de esta revis - ta a enviar sus colaboraciones a: revista.investigacion@ceneval.edu.mx, para que sean evaluadas e incluidas en los números subsecuentes de esta publicación. El propósito es que la revista de evaluación e investigación educativa Ceneval Investiga se constituya en un instrumento más que contribuya a nuestro mandato social, la mejora de la calidad educativa en nuestro país.
CENEVAL INVESTIGA | REVISTA DE EVALUACIÓN E INVESTIGACIÓN EDUCATIVA
D.R. © 2022 Centro Nacional de Evaluación para la Educación Superior, A.C. (Ceneval) Av. Camino al Desierto de los Leones 19
Col. San Ángel, Alc. Álvaro Obregón C.P. 01000, México, Ciudad de México www.ceneval.edu.mx
Junio de 2022
Contenido
06 10 16 34 42 50
Ceneval, 28 años contribuyendo al desarrollo de la educación
Los EXANI: 28 años y contando
Surgimiento y desarrollo de los Exámenes Generales para el Egreso de la Licenciatura (EGEL)
La trascendencia de la evaluación externa en la educación superior
Pruebas estandarizadas
Análisis del funcionamiento diferencial de reactivos
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL NÚMERO 2 | INNOVACIONES EN LA NUEVA GENERACIÓN DE EXÁMENES DEL CENEVAL
6
ANIVERSARIO Buenas decisiones abren nuevos caminos.
Ceneval, 28 años contribuyendo al desarrollo de la educación
El pasado mes de abril el Centro Nacional de Evaluación para la Educación Superior (Cene- val) cumplió 28 años, tiempo en el cual ha de - mostrado su sostenido interés y compromiso con la mejora de la educación en México por medio de sus evaluaciones. En el marco de este XXVIII aniversario, es oportuno reflexionar en torno a la importancia de la evaluación externa y las ventajas que esta supone en cuanto a la independencia, equidad, transparencia, impar -
cialidad y confianza que brinda a las institucio - nes y al sistema educativo en su conjunto. En este sentido, también es particularmente rele - vante destacar la gran cantidad de proyectos de evaluación que se han logrado concretar a lo largo de estos años para atender demandas importantes de la sociedad. Como es sabido, la principal tarea del Cene - val es elaborar instrumentos de medición que proporcionen información sólida, pertinente y
CENEVAL INVESTIGA 7
válida sobre variables educativas que pueda ser utilizada por las autoridades e instituciones para la toma de decisiones y, a la vez, que sirva como fuente de retroalimentación, diagnósti - co y mejora para los estudiantes. En el caso de los Exámenes Nacionales de Ingreso ( EXANI ), dicha información se encuen - tra asociada a identificar las características, conocimientos y habilidades de los estudiantes que desean ser admitidos en alguna institución de tipo medio superior o superior; en este sentido, desde su creación, estas pruebas han permitido res - ponder a la necesidad de contar con un mecanismo válido, transparente y justo para los procesos de ingreso que además, dada su cobertura nacional, permite contrastar los resultados entre las diferentes regiones del país. En lo que respecta a los Exámenes Generales para el Egreso de la Licenciatura ( EGEL ), destaca el doble propósito con el que fueron diseñados, tanto para permitir identificar si los egresados de distintas carreras reunían los requisitos mínimos para desempeñarse profesio - nalmente, como para conocer en qué medida las instituciones educativas estaban cumpliendo con la promesa de brindar una formación de calidad a sus estudiantes, finalidades que hasta hoy se conservan. De manera adicional a los instrumentos mencionados, el Centro también ha desarrollado centenares de pruebas es - tandarizadas de diagnóstico, acreditación y certificación. A manera de ejemplo, en el año 2000 el Centro fue la primera instancia en hacer realidad la política pública de reconocer los conocimientos adquiridos de forma autodidacta o por expe - riencia laboral fuera de los recintos escolares, dando respuesta a una sentida solicitud de un sector de la población al que le era imposible demostrar que contaba con los conocimientos necesarios para obtener un certificado de bachillerato o un tí - tulo profesional.
8
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
Otra de las tareas obligadas del Ceneval ha sido ofrecer evaluaciones cada vez más precisas, integrales, confiables, eficaces y equitativas. En ese sentido, cabe destacar que en 2021, aun cuando la pandemia amenazaba con frenar nuestros esfuerzos, se logró poner en operación la nueva generación de instrumentos de evaluación con contenidos actualizados y alineados a sus respectivos propósitos que incorporan la evaluación de habilidades comunicativas, reconociendo así su indiscutible papel en la apropiación de nuevos conocimientos y el desarrollo educativo y profesional. Asimismo, estas prue - bas incluyen la medición de habilidades socioemocionales que ayudan a las instituciones a personalizar y adaptar su servicio educativo a las características de sus estudiantes. En cuanto a las innovaciones que nos hemos planteado, el próximo año se estrenarán nuevas plataformas tecnológicas que permitirán la implementación de avances psicométricos adicionales y facilitarán a nuestros usuarios los procesos de registro y aplicación de las pruebas. Por otro lado, se alentará un uso más intensivo de los millones de datos que se generan año con año —y que representan un insumo que ninguna otra institución posee—, para que las instituciones educativas, los investigadores o cualquier persona interesada puedan cono - cer más acerca del segmento más promisorio de la población mexicana: las nuevas generaciones. Para ello, se promoverán alianzas con instituciones y organizaciones públicas y privadas, tanto nacionales como internacionales, a fin de impulsar la in - vestigación en evaluación educativa y fomentar la divulgación y discusión de temas de interés en este campo, tal como se hace con esta revista. De manera adicional a lo anterior, se ha puesto en marcha una estrategia de difusión que privilegia un acercamiento más constante, estrecho y esmerado con nues - tras instituciones usuarias para atender sus inquietudes y acla - rar sus dudas.
CENEVAL INVESTIGA 9
No me resta más que celebrar el esfuerzo y compromiso de la comunidad Ceneval y de los destacados especialistas que colaboran en nuestros diversos cuerpos colegiados por todo lo alcanzado hasta ahora. Les invito a que sigamos buscando nue - vos caminos para tomar las mejores decisiones ante los retos venideros, con la eficiencia y profesionalismo que distinguen al Centro. Finalmente, reconozco y agradezco el apoyo y confian - za de nuestras instituciones usuarias por permitirnos continuar con nuestra encarecida labor al servicio de la educación.
Antonio Ávila Díaz Director General del Ceneval
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL NÚMERO 2 | INNOVACIONES EN LA NUEVA GENERACIÓN DE EXÁMENES DEL CENEVAL
10
Los EXANI: 28 años y contando
Marisol Higuera Aguilar y María del Rosario Cruz Rodríguez Dirección de los Exámenes Nacionales de Ingreso, Ceneval El Centro Nacional de Evaluación para la Educa- ción Superior (Ceneval) se crea hace 28 años en respuesta a una propuesta de la Asociación Na- cional de Universidades e Instituciones de Edu - cación Superior ( ANUIES ), cuyo propósito era contribuir desde la evaluación a la mejora de la calidad del sistema educativo mexicano. Se pre - tendía contar con un organismo independiente, no gubernamental, responsable de elaborar y
administrar los instrumentos de evaluación, y que además trabajara en colaboración con dis - tintas instancias expertas en materia educativa. En unas oficinas rentadas al sur de la Ciu - dad de México, en abril de 1994 queda legal - mente constituido el Centro y se formaliza la elaboración de dos instrumentos de evalua - ción: el Examen Nacional Indicativo de Ingreso a la Educación Media Superior y a la Educa - ción Superior y el Examen General de Calidad Profesional, que a la postre se convertirían en los Exámenes Nacionales de Ingreso ( EXANI ) y los Exámenes Generales para el Egreso de la Licenciatura ( EGEL ), respectivamente.
CENEVAL INVESTIGA 11
Desde entonces, el objetivo del Centro ha sido atender las necesidades de evaluación de las instituciones de educación media superior y superior para que cuenten con información útil, válida y confiable que les permita orientar la toma de deci - siones en torno al ingreso y egreso de sus estudiantes y, desde luego, mejorar la calidad educativa. Los EXANI , particularmente, han evaluado de manera inte - gral habilidades académicas y conocimientos específicos de los aspirantes a ingresar a distintos niveles educativos, con el propósito no solo de ofrecer a las instituciones educativas ele - mentos que orienten sus procesos de ingreso al brindar infor - mación diagnóstica fundamental para conocer a la población, sino también para determinar acciones académicas institucio - nales de preparación propedéutica o de fortalecimiento acadé - mico: el EXANI - I para el ingreso a la educación media superior, el EXANI - II , a nivel de técnico superior universitario o licencia - tura, y el EXANI - III , a una especialidad, maestría o doctorado.
La evolución de los EXANI
Desde su creación, se han modificado las estructuras y los con - tenidos por evaluar de acuerdo con las reformas educativas y las necesidades de evaluación de las instituciones usuarias, como se muestra en el siguiente esquema (véase la Figura 1).
12
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
Figura 1. Los EXANI a través del tiempo
Se crean los EXANI-I y II Miden las habilidades intelectuales básicas (verbal y matemática) y conocimientos disciplinarios de 8 asignaturas Se crea el EXANI-III Mide las habilidades intelectuales y los conocimientos indispensables para ingresar a los niveles de especialidad, maestría o doctorado
Se modifica la longitud del EXANI-I de 120 a 128 preguntas
1994
1996
Se crean 10 módulos optativos del EXANI-II
1997
1999
Se actualiza la estructura del EXANI-III y se divide en dos perfiles: programas de posgrado de investigación y de profesionalización
Se ajustan los contenidos por evaluar en el EXANI-I de acuerdo con los cambios curriculares nacionales
2001
2008
Se crean dos instrumentos para los EXANI-I y II : Examen de selección y Examen de diagnóstico
Se ajusta la estructura del Examen diagnóstico del EXANI-I
2009
2014
Se comienza a aplicar la nueva generación de los EXANI (I, II y III)
Se rediseña la estructura del EXANI-III
2021
2015
La última generación de los EXANI , que entró en operación en el verano de 2021, surgió como resultado de un proceso de re - visión de los instrumentos existentes y de un análisis detallado del contexto educativo actual.
CENEVAL INVESTIGA 13
Los EXANI en cifras
En poco menos de tres décadas, la cantidad de aplicaciones de estos exámenes ha ido creciendo y hoy un número importante de instituciones los emplean como instrumentos auxiliares en sus procesos de ingreso. Si bien es visible el efecto que la pan - demia tuvo en el ámbito académico, es de destacar que desde su creación hasta el año pasado más de 23 millones de estu - diantes habían presentado un EXANI (véanse las Tablas 1 y 2).
Tabla 1. Numeralia de los EXANI
Exámenes aplicados desde 1994
Más de 23 millones
Instituciones usuarias
Más de 600
Aplicaciones anuales de los EXANI-I, II y III
Más de 1 800
Sustentantes aproximados por año
Más de 1 260 000
Entidades federativas que utilizan los EXANI
32
Tabla 2. Exámenes aplicados desde que inició la operación de los EXANI
Año
EXANI-I
EXANI-II 65 345 93 596 114 987 126 124 161 456 225 909 234 283 252 774
EXANI-III
1994 1995 1996 1997 1998 1999 2000 2001
· · ·
299 973 395 669 177 663 186 211 171 237 207 846 228 270 265 011
1 808 2 922 3 961 5 816 6 252
»
14
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
Año
EXANI-I
EXANI-II 258 660 296 395 354 112 391 603 418 692 538 264 533 185 559 418 595 871 642 295 659 679 720 993 729 429 748 562 756 956 739 861 772 524 816 375 389 132 430 327 12 626 807
EXANI-III
2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014 2015 2016 2017 2018 2019 2020 2021
270 267 302 673 338 340 413 008 483 603 445 714 480 285 496 487 494 600 508 404 487 122 457 545 460 921 437 695 492 073 478 096 450 708 469 978 169 762 166 112
6 857 8 963
10 439 13 405 13 604 14 892 17 280 20 422 22 522 23 610 25 524 25 988 29 092 29 364 29 835 28 610 30 207 30 922 16 958 14 258 433 511
Total
10 235 273
Miles de especialistas en las distintas áreas de conocimien - to de los exámenes, provenientes de instituciones públicas y privadas de todo el país, junto con expertos en educación, eva - luación, medición y psicometría, han participado en el diseño y construcción de los EXANI , y cuya colaboración es la piedra angular que sustenta las inferencias que se hacen a partir de los resultados.
CENEVAL INVESTIGA 15
Permanecer durante 28 años como uno de los proyectos de evaluación de mayor cobertura y aceptación nacional es el resultado del trabajo constante y conjunto entre el Ceneval y las instituciones comprometidas con el mejoramiento de la calidad de la educación media superior y superior. Los EXANI han sido, desde su origen, sinónimo de trans - parencia y equidad en los procesos de ingreso a las distintas instituciones educativas que los utilizan. Con su desarrollo y actualización constante, el Ceneval refrenda su compromi - so con las instituciones usuarias y la sociedad, pero particu - larmente con los sustentantes y sus familias, de diseñar ins - trumentos de evaluación técnicamente sólidos que permitan seguir cumpliendo con su razón de ser: contribuir, desde la evaluación, a la mejora de la calidad educativa.
Lecturas recomendadas
Centro Nacional de Evaluación para la Educación Superior. (2016). Anuario 2015 . Centro Nacional de Evaluación para la Educación Superior. (2017). Anuario 2016 . Centro Nacional de Evaluación para la Educación Superior. (2018). Anuario 2017 . Centro Nacional de Evaluación para la Educación Superior. (2019). Anuario 2018 . Centro Nacional de Evaluación para la Educación Superior. (2004). Evalua- ción de la educación en México. Indicadores del EXANI-I . Centro Nacional de Evaluación para la Educación Superior. (2006). Evalua- ción de la educación en México. Indicadores del EXANI-II . Centro Nacional de Evaluación para la Educación Superior. (2002). La pri- mera etapa: 1994∙2001 . Gago Huguet, A. (2002). Apuntes acerca de la evaluación educativa . Secreta- ría de Educación Pública. Centro Nacional de Evaluación para la Educación Superior. (2021). Ceneval Investiga , 2 . Centro Nacional de Evaluación para la Educación Superior. (2022). Ceneval Investiga , 4 .
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL NÚMERO 2 | INNOVACIONES EN LA NUEVA GENERACIÓN DE EXÁMENES DEL CENEVAL
16
Surgimiento y desarrollo de los Exámenes Generales
para el Egreso de la Licenciatura (EGEL)
Filiberto Antonio Solano Moreno Wilson Jesús Pool Cibrián Priscila Guido García Daniel Chávez Maldonado Alejandra Zúñiga Bohigas Dirección de los Exámenes Generales para el Egreso de la Licenciatura, Ceneva l
to, tanto de la población escolar de este nivel educativo como de las instituciones educativas que la atenderían. Para la década de los ochenta, continúa el proceso de introducción de la evaluación de la educación superior en México, en un pri - mer momento con el impulso de la autoeva- luación de las universidades, y después con la evaluación de pares que inició por medio de los Comités Interinstitucionales para la Eva - luación de la Educación Superior ( CIEES ), en su primera etapa. Asimismo, ante un escenario de crisis económica nacional, la evaluación estuvo ligada a un condicionamiento del otorgamien - to de apoyos económicos extraordinarios en función del cumplimiento y aprovechamiento de los requerimientos, recursos y condiciones gubernamentales. En los años noventa, la evaluación de la edu - cación superior se implementó como una herra - mienta que apoyaría las medidas de regulación
Antecedentes
Para hablar de la evolución de los Exámenes Generales para el Egreso de la Licenciatura ( EGEL ) es importante considerar sus orígenes y los lineamentos de política pública en materia de evaluación de la educación superior que se han desarrollado en México. Los primeros ejercicios de evaluación de la educación superior en nuestro país datan de la década de los setenta, y están vinculados con los procesos de planeación del crecimien-
CENEVAL INVESTIGA 17
y control de las funciones sustantivas de las Instituciones de Educación Superior ( IES ), teniendo que rendir cuentas por su ac - cionar. Es en ese entonces cuando se instaura todo un sistema nacional de evaluación de la educación superior en México. Se crean o ajustan diversos organismos como la Comisión Nacional de Evaluación ( CONAEVA ), en realidad un año antes de iniciar la década, en 1989; los CIEES , en 1991; la Federación de Institu - ciones Mexicanas Particulares de Educación Superior ( FIMPES ) y el Centro Nacional de Evaluación para la Educación Superior (Ceneval), en 1994. El proceso descrito denota una estrategia gubernamental que ha tenido como finalidad establecer, aun con toda la com - plejidad del ámbito de la educación superior en nuestro país, la calidad del servicio que dicho nivel ofrece a la población que la demanda. En ese contexto, en 1993 se aprueba la creación del Ce - neval con el fin de realizar la evaluación “a) a los estudiantes que egresan de la educación secundaria y solicitan ingreso al bachillerato y otras modalidades de educación media superior, b) a los estudiantes que solicitan ingreso a la licenciatura y c) a los egresados de la educación superior mediante un Examen General de Calidad Profesional”. 1
La evolución de los EGEL
Los Exámenes Generales de Calidad Profesional ( EGCP ) –que a la postre serían los Exámenes Generales para el Egreso de la Licenciatura ( EGEL )– se crearon con el fin de atender diversas recomendaciones, entre ellas la del Consejo Nacional de la Asociación Nacional de Universidades e Instituciones de Edu - cación Superior ( ANUIES ); en principio, generar las pruebas de
1 Gago Huguet (como se cita en Centro Nacional de Evaluación para la Educación Superior, 2017, p. 22).
18
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
las carreras y especialidades que la ley reglamentaria de los artículos 4º y 5º constitucional establece que tienen como re - quisito para su ejercicio profesional el contar con un título y cédula profesional, así como aquellas con mayor demanda de ingreso. Por lo anterior, el diseño, la elaboración y la aplicación de los exámenes de egreso recayó en las carreras y especialida - des propuestas en un documento de trabajo entregado para su análisis durante la XXV Sesión Ordinaria de la Asamblea Ge - neral de la ANUIES realizada en Mérida, Yucatán, a finales de abril de 1993. En 1994, cuando el Ceneval inicia la evaluación de los egre - sados del nivel licenciatura, solo se aplicó el examen de la ca - rrera de Contaduría ( EGCP - CONTA ) a 234 sustentantes, los cuales provenían de 25 instituciones de educación superior ( IES ) de 16 entidades federativas, la mayoría de procedencia pública (72%) (véase la Tabla 1).
Tabla 1. Aplicación nacional del EGCP-CONTA en 1994
Sostenimiento privado Sostenimiento público
Total usuarios
Total de IES
Región a
Usuarios
IES
Usuarios
IES
30 49
3 4 2 5 7 4
Centro-Occidente
21
2
9
1
·
·
Centro-Sur
49
4
4
Metropolitana
3
1
1
1
11 98 42
Noreste
1
1
10
4
Noroeste
7
3
91
4
·
·
Sur-Suroeste
42
4
Total
32
7
202
18
234
25
Nota. Elaboración propia. a Clasificación de la ANUIES.
CENEVAL INVESTIGA 19
Para 1995 continúa el proceso de elaboración y aplicación de nuevos EGEL incrementando con ello las posibilidades de que más IES adopten dichas pruebas. Pero, no es sino hasta el año 2000 cuando el Ceneval logra alcanzar la meta fijada para su primera etapa de existencia, consistente en elaborar los instrumentos de evaluación de las profesiones establecidas en 1994. Asimismo, se acuerda que a partir de entonces la de - cisión de elaborar EGEL adicionales es asunto de la Asamblea de Asociados del Ceneval. En función del incremento de la demanda, y a partir de es - tudios de factibilidad, se agregaron exámenes de forma pro - gresiva, los cuales se organizaron en tres áreas disciplinares para conformar los 40 exámenes que actualmente están vi - gentes (véanse la Tabla 2 y la Tabla 3). En la tabla 2 se enuncian los exámenes y el año de su creación, con el número de sus - tentantes de su primera aplicación.
Tabla 2. Desarrollo de los EGEL
Áreas de los exámenes Exámenes/número de sustentantes
Total de sustentantes por año
Número de exámenes añadidos por año
Ciencias de la Vida y la Conducta (CVC)
Año a
Diseño, Ingenierías y Arquitectura (DIA)
Ciencias Sociales y Humanidades (CSH)
1994
·
·
1
I. Contaduría (234)
234
I. Enfermería (220) II. Medicina Veterinaria y Zootecnia (139)
II. Administración (485)
1995
·
3
3 353
III. Odontología (749)
I. Ingeniería Civil (209)
1996
3
III. Turismo (531)
8 294
IV. Medicina
General (469)
1997
·
·
2
V. Químico
9 325
Farmacéutico Biólogo (192)
»
20
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
Áreas de los exámenes Exámenes/número de sustentantes
Total de sustentantes por año
Número de exámenes añadidos por año
Ciencias de la Vida y la Conducta (CVC)
Año a
Diseño, Ingenierías y Arquitectura (DIA)
Ciencias Sociales y Humanidades (CSH)
IV. Ingeniería
Química (76) Informática y Computación (525) b
VI. Psicología (722) VII. Ciencias Agrícolas (164)
1999
·
3
18 065
IV. Derecho (3 860) V. Pedagogía-
V. Ingeniería
2000
·
3
Ciencias de la Educación (1 025)
24 122
Industrial (78)
VI. Ingeniería
Mecánica (180)
2001
·
·
2
VII. Ingeniería Mecánica
28 666
Eléctrica (216)
VI. Comercio/ Negocios
Internacionales (997) VII. Mercadotecnia (674)
2002
·
·
37 674
2
2003
·
·
1
VIII. Química (20)
48 427
VIII. Ciencias
Computacionales (640)
IX. Informática (2091) X. Ingeniería
2005
·
·
60 800
4
Computacional (1219)
XI. Ingeniería
de Software (1475)
2006
·
·
1
VIII. Economía (568)
75 254
»
CENEVAL INVESTIGA 21
Áreas de los exámenes Exámenes/número de sustentantes
Total de sustentantes por año
Número de exámenes añadidos por año
Ciencias de la Vida y la Conducta (CVC)
Año a
Diseño, Ingenierías y Arquitectura (DIA)
Ciencias Sociales y Humanidades (CSH) IX. Ciencias de la Comunicación (3164) X. Trabajo Social (572)
IX. Biología (310) X. Nutrición (747) XI. Química Clínica (486) XII. EGEPT-ENFER c (1534)
XII. Ingeniería
2009
7
Mecatrónica (372)
96 916
XI. Ciencia
Política y Administración Pública (429)
XIII. Arquitectura d (837) XIV. Diseño Gráfico (489) XV. Ingeniería en Alimentos (491)
2013
·
XII. Gastronomía (935) XIII. Relaciones
139 664
6
Internacionales (436)
Total de exámenes
40
13
12
15
Nota. Elaboración propia. a En 2004, 2007, 2008, 2010, 2011 y 2012 no inició la operación de algún nuevo EGEL.
b De 1999 a 2004 este examen estaba constituido por cuatro perfiles, y a partir de 2005 se separó en 4 EGEL: Ciencias Computa - cionales, Informática, Ingeniería Computacional e Ingeniería de Software, razón por la cual no se numera ni se toma en cuenta en las sumatorias. c Examen General para el Egreso del Profesional Técnico en Enfermería. d A su estructura se incorporó un Proyecto Integrador, evaluado por jueces por medio de una rúbrica.
22
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
Tabla 3. Sustentantes de los EGEL en cada año de aplicación
Ciencias Sociales y Humanidades (CSH)
Ciencias de la Vida y la Conducta (CVC)
Diseño, Ingenierías y Arquitectura (DIA)
Año
Total
1994 1995 1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014 2015 2016 2017 2018 2019 2020 2021
234
0
0 0
234
2 994 6 314 6 786 7 904
359
3 353 8 294 9 325
1 771 2 496 2 731 6 005 6 987 8 237
209
43
379
11 014 18 065 24 122 28 666 37 674 48 427 53 730 60 800 75 254 76 991 84 781 96 916 101 981 111 440 127 157 139 664 159 127 182 936 187 384 198 168 199 918 211 955 114 710 195 872
10 976 15 091 16 954 22 083 26 987 28 717 31 825 38 526 40 038 42 693 49 111 50 471 53 053 58 487 63 616 69 424 78 628 79 962 81 950 81 965 90 718 47 071 79 801
1 084 2 044 3 475 5 218 9 540
10 373 11 900 13 761 16 758 20 112 20 651 23 881 28 464 30 675 34 674 39 724 43 355 50 794 59 534 62 370 70 467 72 249 74 744 46 612 77 200 836 884
11 252 12 217 16 616 16 302 18 207 19 341 20 835 23 713 28 946 32 693 38 909 44 774 45 052 45 751 45 704 46 493 21 027 38 871 548 695
Total
1 182 379
2 567 958
Nota. Elaboración propia.
CENEVAL INVESTIGA 23
Como se observa, la demanda de los EGEL se ha incremen - tado cada año, excepto en el 2020 por motivos de la contin - gencia sanitaria del SARS -CoV-2. A diferencia de su inicio de operaciones en 1994, en la aplicación nacional 2021 los EGEL tienen presencia en toda la República Mexicana (en las 32 en - tidades federativas) y también cuentan con la participación de múltiples IES tanto de carácter público como privado (véase la Tabla 4).
Tabla 4. Aplicación nacional de los EGEL en 2021
Sostenimiento privado Sostenimiento público
Total Usuarios
Total de IES
Región a
IES
Usuarios
IES
Usuarios
Centro-Occidente
9 340
190
28 329
110
37 669
300
Centro-Sur
15 576
228
18 269
151
33 845
379
Metropolitana
8 240
85
344
22
8 584
107
Noreste
8 725
77
20 788
77
29 513
154
Noroeste
5 017
81
13 854
61
18 871
142
294
Sur-Suroeste
7 419
162
13 241
132
20 660
Total usuarios e IES b
553
54 317
823
94 825
149 142
1 376 b
Nota. Elaboración propia. a Clasificación de la ANUIES. b Algunas IES tienen campus en diferentes regiones, por lo que el total de IES considera a los campus como si fueran instituciones diferentes.
24
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
Para 2021 los diez EGEL que tuvieron mayor demanda acu - mulada fueron: Administración, Comercio/Negocios Interna - cionales, Contaduría, Derecho, Enfermería, Medicina General, Nutrición, Odontología, Psicología e Ingeniería Industrial. El total de sustentantes con estas pruebas en la actualidad reba - sa el millón seiscientos mil, que representa el 64% del total de exámenes aplicados en 28 años; es decir, de cada diez egresa - dos del nivel licenciatura de las IES usuarias de los EGEL , seis han sido evaluados con alguno de ellos (véase la Tabla 3).
Desarrollo de aspectos técnicos
Existen tres grandes periodos de actualización de los exáme - nes que incorporan los avances en materia de evaluación edu- cativa desarrollados internacionalmente, lo que influye en la mejora de la calidad de estos instrumentos. Los EGEL en su primera etapa (1994-2009) trataban de incluir los aspectos referidos a los currículos, y en el caso de las inge - nierías incluían aspectos de ciencias básicas, ciencias de la in - geniería, ingeniería aplicada y ciencias sociales y humanidades. En la segunda etapa (2009-2019), denominada 2G, se buscó que estos exámenes se centrasen en la medición de conoci - mientos y habilidades esenciales para el inicio de la profesión; para ello se implementó el método del job analysis , por lo cual se diseñó una encuesta que se aplicó a profesionistas de todo el país, para efectos de la validación de las actividades y tareas asociadas a la profesión de cada EGEL . La tercera etapa, denominada EGEL Plus, inició en 2019, y llevó a un proceso reflexivo que involucró el análisis de los propósitos y longitud de las pruebas, los tipos de reactivos que se utilizan, el modelo de calificación, así como los usos y las inferencias que se derivan de los resultados de los exámenes; esto resultó en la concepción de la evaluación como un con- junto de cuatro instrumentos articulados que se le denominó
CENEVAL INVESTIGA 25
Proyecto Egresa de Licenciatura , que tiene como propósito rea - lizar una evaluación integral de los estudiantes que culminaron su formación de nivel licenciatura. El instrumento principal es el EGEL Plus, el cual está compuesto por dos secciones: una Disciplinar y otra Transversal de Lenguaje y Comunicación, que inició operaciones en diciembre del 2021. Cabe referir que el análisis comparativo de las característi - cas del EGEL Plus respecto a la generación anterior se puede encontrar en el sitio web del Ceneval; asimismo, en la misma fuente se puede profundizar en las características de estos instrumentos de evaluación. Por otro lado, para la revisión de las estructuras y conteni - dos de los exámenes, así como para la elaboración, validación y piloteo de reactivos, y la determinación de los estándares de desempeño de los sustentantes (puntos de corte), se ha continuado con la participación de especialistas con una des - tacada trayectoria en los procesos de enseñanza-aprendizaje, con conocimiento en diseño curricular, gestión educativa y de su contexto, provenientes de diversas instituciones públicas y privadas del país. Muestra de lo anterior son los consejeros técnicos de cada examen, que actualmente en el área de Ciencias Sociales y Humanidades ( CSH ) son 164 especialistas provenientes de 47 IES , en Ciencias de la Vida y la Conducta ( CVC ) 129 especia - listas de 56 IES , y en Diseño, Ingenierías y Arquitectura ( DIA ) 176 especialistas de 84 IES , cuyos nombres e instituciones de procedencia se pueden consultar en los documentos públicos denominados Guías para los sustentantes que se encuentran disponibles en el sitio web del Ceneval. A la fecha, han partici - pado más de 5 mil especialistas de diversas IES (véase la Tabla 5).
26
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
Tabla 5. Consejeros técnicos que participan en los EGEL Plus y cantidad de instituciones de las que provienen
CSH
CVC
DIA
Especialistas
Instituciones
Especialistas
Instituciones
Especialistas
Instituciones
2 485
526
1 603
458
1 703
611
Nota . Elaboración propia.
Implicaciones de los EGEL en los sustentantes e instituciones usuarias
Los EGEL son instrumentos de evaluación sumativa de alto im - pacto debido a las consecuencias importantes y directas que tienen para los sustentantes y programas o instituciones. En este marco, con base en los resultados de los EGEL desde el 2011 el Ceneval desarrolla y pone en marcha dos proyectos con el propósito de reconocer tanto el rendimiento académico de los programas de licenciatura como el de sus egresados, y con ello promover la cultura del mérito y la excelencia acadé - mica en las IES del país: el Padrón- EGEL : Programas de Alto Rendimiento Académico y el Premio Ceneval al Desempeño de Excelencia- EGEL . El Padrón- EGEL : Programas de Alto Rendimiento Académico consiste en: 1 Establecer un referente basado exclusivamente en los re - sultados obtenidos en el EGEL por el total de egresados (o una muestra representativa) del programa. 2
2 Las Instituciones de Educación Superior usuarias deciden la opción de participación de los programas de licenciatura en la convocatoria para la incorporación al Padrón-EGEL, ya sea a través de la evaluación del total de su egreso, o bien, de una muestra representativa del total de los estudiantes que egresen en el periodo establecido en la convocatoria. Para mayor información respecto a este proyecto, consulte: https://reconocimiento.ceneval.edu.mx/pa - dron-egel/
CENEVAL INVESTIGA 27
2 Definir niveles de referencia para la evaluación del rendi - miento académico de los programas de licenciatura de las IES . 3 Identificar los programas que quedan clasificados en alguno de los niveles. El Padrón- EGEL se integra por los programas de licenciatura de las IES usuarias que registran una proporción elevada de sus egre - sados con resultados satisfactorios o sobresalientes en el EGEL . Desde su creación, este proyecto ha tenido una buena acep - tación entre las IES usuarias, ya que representa un medio para reconocer los esfuerzos realizados en los procesos de mejora continua y aseguramiento de la calidad de sus programas de licenciatura. Esto se refleja en el aumento de solicitudes de incorporación al Padrón y en la alta proporción de programas incorporados. A continuación se presenta la numeralia general del Padrón (véanse las Figuras 1 a 3).
Figura 1. Solicitudes de incorporación al Padrón-EGEL por régimen de las IES y convocatoria.
26.8%
1 900 1 800 1 700 1 600 1 500 1 400 1 300 1 200 1 100 1 000
32.6%
33.4%
36.3%
32.6% 36.7%
Pública Particular
28.4%
900 800 700 600 500 400 300 200 100 0
31.1%
79.7% 68.9% 71.6% 67.4% 63.3% 63.7% 66.6% 67.4% 73.2% 20.3%
1a conv | 182 | Ago 2010 oct 2011
2a conv | 821 | Jul 2011 jun 2012
3a conv | 893 | Jul 2012 jun 2013
4a conv | 1 083 | Jul 2013 jun 2014
5a conv | 1 113 | Jul 2014 jun 2015
6a conv | 1 216 | Jul 2015 jun 2016
7a conv | 1 385 | Jul 2016 jun 2017
8a conv | 1 568 | Jul 2017 jun 2019
9a conv | 1 869 | Jul 2019 nov 2021
28
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
Figura 2. Programas incorporados al Padrón-EGEL por régimen de las IES y convocatoria.
1 000 1 050
34.8% 34.3%
950 900 850 800 750 700 650 600 550 500 450 400 350 300 250 200 150 100 50 0
32.4%
33.8%
33.2%
31.8%
Pública Particular
27.0%
27.8%
89.4% 72.2% 73.0% 68.2% 66.8% 66.2% 67.6% 65.2% 65.7% 10.6%
1a conv | 94 | Ago 2010 oct 2011
2a conv | 381 | Jul 2011 jun 2012
3a conv | 496 | Jul 2012 jun 2013
4a conv | 550 | Jul 2013 jun 2014
5a conv | 581 | Jul 2014 jun 2015
6a conv | 717 | Jul 2015 jun 2016
7a conv | 854 | Jul 2016 jun 2017
8a conv | 993 | Jul 2017 jun 2019
9a conv | 1 002 | Jul 2017 jun 2019
CENEVAL INVESTIGA 29
Figura 3. Programas incorporados al Padrón-EGEL por nivel de rendimiento académico y convocatoria.
1 000 1 050
14.5%
12.0%
950 900
8.8%
9.2% 850 800 750 700 650 600 550 500 450 400 350 300 250 200 150 100 50 0 25.5% 34.6% 38.7% 40.0% 42.2% 42.0% 45.3% 46.1% 40.6% 74.5% 65.4% 61.3% 60.0% 57.8% 48.8% 45.9% 41.9% 44.9%
1a conv | 94 | Ago 2010 oct 2011
2a conv | 381 | Jul 2011 jun 2012
3a conv | 496 | Jul 2012 jun 2013
4a conv | 550 | Jul 2013 jun 2014
5a conv | 581 | Jul 2014 jun 2015
6a conv | 717 | Jul 2015 jun 2016
7a conv | 854 | Jul 2016 jun 2017
8a conv | 993 | Jul 2017 jun 2019
9a conv | 1 002 | Jul 2019 nov 2021
Por otra parte, el Premio Ceneval al Desempeño de Exce - lencia- EGEL fue creado con la finalidad de reconocer y moti - var a los egresados de los diversos programas de licenciatura que alcanzan un desempeño excepcional en el EGEL . Desde su establecimiento, en septiembre de 2011 hasta noviembre de 2021, este reconocimiento se ha otorgado a 26 600 egresados que representan 1.6% del total de sustentantes (1 677 458). Los acreedores al premio alcanzaron el nivel de desempeño sobresaliente en todas las áreas que conforman el examen que presentaron, además de que cumplieron con los requisitos de haber sustentado por primera vez el EGEL y de haber tenido máximo un año de haber egresado de la licenciatura.
30
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
El premio que se les entrega a los acreedores a este galar - dón consiste en un diploma y un distintivo conmemorativo, además del reconocimiento en una ceremonia, ya sea presen - cial o virtual, organizada por el Ceneval. 3 Desde su creación, el Premio Ceneval ha tenido una bue - na aceptación tanto en las IES usuarias como por parte de los egresados de licenciatura (véanse la Figura 4 y la Tabla 6).
Figura 4. Acreedores al Premio Ceneval (septiembre 2011 a noviembre 2021).
3 800 3 600 4 000 3 400 3 200 3 000 2 800 2 600 2 400 2 200 2 000 1 800 1 600 1 400 1 200 1 000
3 849
2 785
2 649
2 349
1 826
1 572
1 410
1 060
1 037
1 029
954
913 903
844 864 803
782
800 600 400 200 0
578
393
3 Para mayor información respecto a este proyecto, consulte: https://reconocimiento.ceneval.edu.mx/premio-ceneval/
CENEVAL INVESTIGA 31
Tabla 6. Numeralia general del Premio Ceneval (septiembre 2011 a noviembre 2021).
Sustentantes
Número
%
Sustentantes
1 677 458
100.0
Premiados
26 600
1.6
Mujeres
13 076
49.2
Hombres
13 524
50.8
IES
Número
%
IES con sustentantes premiados
291
100.0
IES públicas
117
40.2
IES privadas
174
59.8
IES con sustentantes premiados
Públicas
Privadas
Número de premiados
13 324
13 276
% respecto al número de premiados
50.1
49.9
% respecto al número total de sustentantes
0.8
0.8
32
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL
A lo largo de sus diez años de existencia, el Padrón- EGEL y el Premio Ceneval al Desempeño de Excelencia- EGEL se han consolidado como referentes de la calidad de los programas de licenciatura a nivel nacional, lo cual se ve reflejado en la gran aceptación entre las IES usuarias y organismos evaluadores y acreditadores como CIEES y COPAES , respectivamente, por lo que continuarán operando en el marco de la aplicación de los EGEL Plus. Como se ha mostrado, al revisar el desarrollo de los EGEL desde su creación, resulta evidente que el Ceneval, por medio de la Dirección de los Exámenes Generales para el Egreso de la Licenciatura ( DEGEL ) tiene como meta continuar evolucionan - do y ajustándose a las demandas contemporáneas. De hecho, todo el equipo de la DEGEL trabaja de forma colaborativa y cercana con las IES y sus especialistas, con miras a contribuir con la mejora de la calidad educativa y la difusión de la cultura de la evaluación educativa en nuestro país.
Lecturas recomendadas
Asociación Nacional de Universidades e Instituciones de Educación Superior. (1993). Examen General de Calidad Profesional. Revista de la Educación Superior , 22 (86). http://publicaciones.anuies.mx/revista/86/2/3/es/ examen-general-de-calidad-profesional Centro Nacional de Evaluación para la Educación Superior, & Asociación Nacional de Universidades e Instituciones de Educación Superior. (1999). Acerca del Ceneval y los exámenes generales para el egreso de la licenciatura . Centro Nacional de Evaluación para la Educación Superior. Centro Nacional de Evaluación para la Educación Superior. (2017). Origen y evolución del Ceneval . Centro Nacional de Evaluación para la Educación Superior. (s.f.). Exámenes Generales para el Egreso de la Licenciatura (EGEL). Recuperado el 27 de mayo de 2022 de https://ceneval.edu.mx/instituciones-egel/ Centro Nacional de Evaluación para la Educación Superior. (s.f.). Guías EGEL Plus aplicación de agosto de 2022. Recuperado el 27 de mayo de 2022 de https://ceneval.edu.mx/examenes-egreso-egel/#:~:text=los%20 EGEL%20Plus-,Gu%C3%ADas,-EGEL%20Plus%20aplicaci%C3%B3n
CENEVAL INVESTIGA 33
Centro Nacional de Evaluación para la Educación Superior. (s.f.). Proyecto Egresa de Licenciatura. Recuperado el 27 de mayo de 2022 de https:// ceneval.edu.mx/examenes-egreso-egel/#:~:text=EGEL%20Plus- ,Proyecto,-Egresa%20de%20Licenciatura Da Rocha Silva, M. A. (2008). Políticas públicas para la educación superior: La implementación de la evaluación en Brasil y México . Perfiles Educativos , 30 (122), 7-37. https://doi.org/10.22201/ iisue.24486167e.2008.122.60718 Gago Huguet, A. (1995). Los exámenes nacionales y el Examen General de Calidad Profesional. Revista de la Educación Superior , 24 (95). http:// publicaciones.anuies.mx/revista/95/2/3/es/los-examenes-nacionales- y-el-examen-general-de-calidad-profesional García García, C., & Hervás Torres, M. (2020). Los sistemas de evaluación de la Educación Superior en México y España. Un estudio comparativo. Revista de la Educación Superio r, 49 (194), 113-134. http://resu.anuies. mx/ojs/index.php/resu/article/view/1127 Raymond, M. R. (1995, 19-21 de abril). Job analysis and the development of test specifications for licensure and certification examinations [Presentación de escrito]. Annual meeting of the National Council on Measurement in Education, San Francisco, CA. https://eric.ed.gov/?id=ED430095 Sánchez-Mendiola M., & Delgado-Maldonado, L. (2019). Exámenes de alto impacto: Implicaciones educativas. Investigación en Educación Médica , 6 (21), 52-62. https://doi.org/10.1016/j.riem.2016.12.001 Zúñiga Bohigas, A., & Prieto López, L. T. (2021). El EGEL Plus Disciplinar del Proyecto Egresa de Licenciatura. Ceneval Investiga , 3 , 26-33.
NÚMERO 5 | LA RELEVANCIA DE LA EVALUACIÓN ESTANDARIZADA EXTERNA A 28 AÑOS DE LA CREACIÓN DEL CENEVAL NÚMERO 2 | INNOVACIONES EN LA NUEVA GENERACIÓN DE EXÁMENES DEL CENEVAL
34
La trascendencia de la evaluación externa en la educación superior
Ángel Andrade Rodríguez Director de Acreditación y Certificación del Conocimiento, Ceneval La educación siempre ha tenido un papel sig - nificativo para la sociedad. En el caso de la educación superior, lejos de ser una aspiración, es una condición fundamental para materiali - zar planes de vida libremente elegidos, ya que tiene como finalidad la provisión de las herra - mientas necesarias para concretarlos; además de que está conectada estrechamente con la obtención de determinados objetivos colecti - vos, vinculados con el desarrollo económico,
social, cultural y científico. 1 Esas son, entre otras, las razones que brindan relevancia al reto de atender con calidad los servicios edu- cativos e impulsar los mecanismos necesarios para el aseguramiento de que los estudiantes desarrollen las competencias relevantes para un buen acceso al mercado laboral. En la última década, el marco que regula a la educación a nivel constitucional y legal ha sido 1 DERECHO A LA EDUCACIÓN SUPERIOR. SU CONTENIDO Y CA - RACTERÍSTICAS, Primera Sala de la Suprema Corte de Justicia de la Nación [S.C.J.N.], Semanario Judicial de la Federación y su Gace - ta, Décima Época, Libro 47, tomo I, Octubre de 2017, Tesis: 1a./J. 83/2017 (10a.), Página 182 (México). Registro digital 2015298. ht - tps://sjf2.scjn.gob.mx/detalle/tesis/2015298
Page 1 Page 2 Page 3 Page 4 Page 5 Page 6 Page 7 Page 8 Page 9 Page 10 Page 11 Page 12 Page 13 Page 14 Page 15 Page 16 Page 17 Page 18 Page 19 Page 20 Page 21 Page 22 Page 23 Page 24 Page 25 Page 26 Page 27 Page 28 Page 29 Page 30 Page 31 Page 32 Page 33 Page 34 Page 35 Page 36 Page 37 Page 38 Page 39 Page 40 Page 41 Page 42 Page 43 Page 44 Page 45 Page 46 Page 47 Page 48 Page 49 Page 50 Page 51 Page 52 Page 53 Page 54 Page 55 Page 56 Page 57 Page 58 Page 59 Page 60Made with FlippingBook - professional solution for displaying marketing and sales documents online