NÚMERO 7 | UN INSTRUMENTO DE EVALUACIÓN EDUCATIVA ES TAMBIÉN UN MEDIO DE APRENDIZAJE Antonio Gago Huguet (1940-2023)
34
Método
Para determinar la comparabilidad de las puntuaciones obteni- das con las diferentes modalidades de evaluación se utilizaron los datos de la sección disciplinar de los EGEL Plus correspon- dientes a las aplicaciones nacionales de diciembre de 2021 y marzo de 2022, descartando aquellos que incluyeron reacti - vos de innovación. Se contó con 30 grupos de sustentantes que respondieron los ítems de opción múltiple en alguna de las modalidades: examen impreso y examen desde casa (véa - se la Tabla 1). A partir de estas dos modalidades de aplicación se constituyeron de manera natural dos grupos que, aunque fueron diferentes en términos de tamaño y composición so - ciodemográfica, respondieron versiones alternas del mismo instrumento. Para controlar las diferencias en la composición sociodemo - gráfica de los grupos, se utilizó el método completo de empa - rejamiento ( full matching ) con la puntuación de propensión, 9 el cual permite emular la distribución de las covariables como si los grupos hubieran sido conformados por medio de la asig - nación aleatoria en un experimento controlado 10 ; esto fue de utilidad para detectar diferencias en la puntuación total del instrumento que pudieran adjudicarse con mayor certeza a la modalidad de aplicación del examen y no a diferencias en la habilidad de los sustentantes. 11 Las variables que se utilizaron para emparejar al grupo de Examen desde casa con el grupo de Examen impreso, por me - dio de la puntuación de propensión ( propensity score matching ), 9 Jiménez-Pacheco, S. E. (2022). Métodos alternativos para estudios observacionales en inves - tigación educativa: puntuación de propensión y emparejamiento para estimar efectos cau - sales. Revista de Evaluación e Investigación Educativa , 6(1). https://online.flippingbook.com/ view/917214422/16/ 10 Rosenbaum, P. R., & Rubin, D. B. (1985). Constructing a Control Group Using Multivariate Mat - ched Sampling Methods That Incorporate the Propensity Score. The American Statistician , 39(1), 33-38. 11 Kim, S., & Walker, M. (2021). Assessing mode effects of at home testing without a randomized trial. ETS Research Report Series , 2021(1), 1-21.
Made with FlippingBook - Online magazine maker