Revista Ceneval Investiga #11

24

NÚMERO 11 | 30 AÑOS DEL CENEVAL

Algunas afirmaciones que se muestran en la tabla 2 son las siguientes: a) en 15 ocasiones el juez 1 y el juez 2 asignaron el nivel 0 (coincidencias exactas); b) en una ocasión el juez 1 asignó el nivel 2, en tanto que el juez 2 asignó el nivel 1 (discre - pancia adyacente), y c) no hay discrepancias extremas (celdas en color blanco). A partir de cada tabla de frecuencias se obtiene el valor es - tadístico Kappa de Cohen ( k ). La fórmula para obtenerlo es la siguiente: k = (Suma de acuerdos observados) - (Suma de acuerdos atribuidos al azar) (Total de observaciones) - (Suma de acuerdos atribuidos al azar) El coeficiente de Kappa de Cohen ( k ) puede tomar valores que van de -1 a +1. De manera típica, la estimación del valor estadístico puede interpretarse como se muestra en la tabla 3.

Tabla 3. Interpretación Kappa de Cohen

Kappa ( k ) -1 a 0.0 0.0 a 0.2 0.2 a 0.4 0.4 a 0.6 0.6 a 0.8 0.8 a 1.0 Grado de consenso Sin consenso Ínfimo Escaso Moderado Bueno Muy bueno

Elaboración propia con base en Abraira. 9

El total de tablas de frecuencia y los cálculos del grado de consenso de los ocho criterios que se evalúan en el Proyecto Integrador en Arquitectura se muestran en la tabla 4. En todos los casos se obtiene un valor superior a 0.7, lo cual significa que se tienen niveles buenos o muy buenos en el consenso de las calificaciones (Stemler, 2008). 8

9 Abraira, V. (2001). El índice Kappa. Semergen-Medicina de Familia , 27 (5), 247-249.

Made with FlippingBook - Share PDF online