NÚMERO 4 | INICIO DE OPERACIONES DE LA NUEVA GENERACIÓN DE EXÁMENES DEL CENEVAL
50
examinado de este grupo pudiera contestar correctamente cierto reactivo. Cada juez realiza la tarea de forma individual y después se discute de manera grupal. Finalmente, se establece el punto de corte como la suma de “unos” acordados por el grupo de jueces, o la suma de las probabilidades resultantes de promediar los juicios de todos los jueces para cada reactivo. Otro método muy conocido para asignar los puntos de cor - te es el método del marcador o Bookmark. Al igual que el mé - todo de Angoff, éste se basa en un conjunto de actividades con las cuales se determina el punto de corte a partir de la revisión de las preguntas de una prueba. Dicho método recibe este nombre debido a que los jueces colocan marcadores en un cuadernillo especialmente diseñado, en el cual se ordenan todos los reactivos de menor a mayor grado de dificultad. Cabe mencionar que esta dificultad se calcula empíricamente, por lo que este método necesariamente requiere que la prueba haya sido aplicada a una muestra representativa de sustentantes. Cada juez asigna un marcador en su cuadernillo, por ejemplo, en el reactivo 40, para distinguir entre los niveles 1 y 2, por lo que para que un sustentante quede asignado en la categoría 2 deberá tener al menos 40 aciertos. Una ventaja de este método es que puede simplificar la tarea de los jueces, sobre todo si existen varias categorías o niveles de logro. Por ejemplo, en una prueba con cuatro ni - veles de logro y 100 reactivos, con el método de Angoff se tendrían que realizar tres tipos de juicios para distinguir entre los niveles (entre el nivel 1 y el 2, el nivel 2 con el 3 y el nivel 3 con el 4), lo que ocasiona un total de 300 juicios de probabili - dad con los 100 reactivos involucrados. En cambio, en el caso del método de Bookmark, los jueces tendrían que revisar las 100 preguntas, pero explícitamente sólo emitir tres juicios en los que evalúan qué reactivo ya no será probable que un sus - tentante borderline de un nivel determinado pudiera contestar correctamente (en este método se les pide que indiquen si
Made with FlippingBook Annual report maker