CENEVAL INVESTIGA 41
Avvisati hizo una descripción del contexto particular de PISA , ya que la aplicación de su prueba presenta condiciones que pueden ser muy distintas a otros exámenes que imple - mentan la metodología adaptativa. Indicó que es una prueba que se administra a grupos específicos; su aplicación debe ser en línea; se presenta en escuelas alrededor de todo el mun - do y los algoritmos adaptativos deben apoyar óptimamente la calibración de los reactivos para obtener sus parámetros de dificultad y discriminación, así como la estimación de las habi - lidades de los estudiantes. Además, tiene algunas restricciones no estadísticas, como la representación del constructo, la ex - posición de los reactivos y el manejo del tiempo. En cuanto a la población, debido a que la prueba se aplica en distintos países, existe una gran variabilidad entre sus habilidades y finalmente, con respecto a la información obtenida, la prueba de PISA está diseñada para generar reportes de resultados a nivel de grupo. Hyo Jeong Shin, de la Universidad de Sogang, presentó un trabajo realizado en colaboración con el Educational Testing Service ( ETS ) y otros investigadores pilares en la investigación de pruebas adaptativas, llamado “Robustez de los diseños de pruebas adaptativas de múltiples etapas en evaluaciones edu - cativas a gran escala” ( Robustness of Multistage Adaptive Testing Designs in Educational Large-Scale Assessments ). La investigado - ra explicó que algunas de las metas de las pruebas adaptati - vas son disminuir el error de medida, controlar el contenido de cada forma para que sean equitativas y facilitar el uso de dife - rentes formatos de reactivos. En este estudio se usaron como factores de análisis el tamaño de la muestra, las proporciones de reactivos presentados a cada país, las proporciones de res - puestas omitidas y las preguntas no alcanzadas (aquellas que los estudiantes no llegaron a contestar). Describió brevemente el diseño de estas pruebas para la prueba de lectura PISA de 2018. Se proporcionó un grupo de reactivos o testlet inicial idéntico a todos los sustentantes y a
Made with FlippingBook. PDF to flipbook with ease