42
NÚMERO 9 | FOMENTO DE LA CULTURA DE LA EVALUACIÓN
partir de sus respuestas a estos reactivos se les categorizó con una habilidad baja, media y alta. De acuerdo con estas catego - rías se eligió el siguiente testlet que contestaron y, por lo tanto, la dificultad de los reactivos que resolvieron fue cercana a la habilidad calculada (así se emparejó la habilidad de los susten - tantes con la dificultad de los reactivos por presentar). Poste - riormente, de acuerdo con las respuestas de los estudiantes al segundo grupo de reactivos presentado, se eligió un tercer testlet , el cual fue el último que contestaron. Se realizó un estudio de simulación diseñado para reflejar específicamente los resultados obtenidos con la prueba PISA , manipulando las interacciones entre los reactivos y los países, las respuestas omitidas y los reactivos no contestados. Se en - contró que los parámetros de los reactivos (discriminación y dificultad) y de los estudiantes (habilidades) fueron calculados de manera aceptable y robusta. Se comprobó que el método adaptativo de etapas múltiples con este diseño es robusto y es válido implementarlo en la prueba de PISA , permitiendo la comparabilidad entre países y periodos. La siguiente presentación estuvo a cargo de Peter van Rijn, investigador del ETS , quien expuso el trabajo titulado “Ensam - ble por pasos para pruebas adaptativas de múltiples etapas: una aplicación para la prueba de matemáticas de PISA 2022” ( Stepwise Assembly for Multistage Adaptive Testing: An Applica - tion to PISA 2022 Mathematics ). Indicó que una de las metas principales de la metodología adaptativa es encontrar la mejor pareja entre las dificultades de los reactivos y las habilidades de los sustentantes y que en el marco de PISA esto debe obte - nerse en la diversidad de los países donde se aplica para pro - porcionar datos adecuados. Esto fue lo que buscó probar para el diseño de Matemáticas, que mostró en la Figura 1.
Made with FlippingBook. PDF to flipbook with ease