NÚMERO 1 | LA EVALUACIÓN EDUCATIVA EN TIEMPOS DE PANDEMIA
50
tamiento estadístico de las preguntas, como el porcentaje de examinados que responden correctamente (grado de dificul - tad) y su tendencia a que los mejores examinados los contesten acertadamente (discriminación). Adicionalmente, se estudió el mismo efecto ocasionado por el cambio de orden de los con- tenidos evaluados. La literatura al respecto es amplia; sin em - bargo, sus conclusiones son contradictorias. Muchos estudios indican que el cambio de posición sí afecta el rendimiento de los examinados y las propiedades estadísticas de las pruebas y sus preguntas, pero otros tantos afirman que no hay tal efecto. Esta diferencia de conclusiones originó que, en 2018, un grupo de investigadores en evaluación, entre los que destaca el prestigioso Ronald K. Hambleton, director ejecutivo del Centro de Evaluación Educativa de la Universidad de Massachusetts, realizaran un estudio tratando de esclarecer el asunto. Una de las observaciones fue que los estudios previos se habían reali- zado siguiendo metodologías muy diferentes, por lo que los re - sultados no eran completamente comparables; además de ello, utilizaron una muestra bastante grande. Su conclusión fue que puede haber diferencias considerables entre las propiedades estadísticas de las preguntas localizadas en diferente orden, por lo que consideraron esencial el análisis de las propieda- des estadísticas de las versiones de examen utilizadas, antes de proceder con su aplicación en procesos de evaluación. Si se demuestra que el orden de los elementos influye, se de - ben utilizar medidas correctivas. Lo curioso es que, después de este estudio, se realizó otro que concluye que no hay efectos observables por el cambio de posición de reactivos. Investigadores de la Universidad McGill de Montreal, Ca - nadá, implementaron métodos probabilísticos para detectar la ocurrencia de conductas indebidas que se llevan a cabo en el momento en que los alumnos resuelven sus exámenes. Observaron que cuando se administran múltiples formas de examen en las que se cambia la posición de las preguntas y los examinados son acomodados en sus asientos de forma
Made with FlippingBook Annual report maker