Psicometria-Menesesetal

Editorial UOC 125 Capítulo II. Fiabilidad
de Pearson altos (si la ordenación entre los dos evaluadores es similar), a pesar
de que ninguna valoración fuera coincidente. El coeficiente de concordancia
propuesto por Lin (1989) permite valorar el grado en el que los valores absolutos
otorgados por cada evaluador son concordantes. El coeficiente viene definido
por la expresión siguiente:
2rxySxSy
CC
S
2 2 2
x S y ( x y )
r xy : Valor del coeficiente de correlación de Pearson entre las dos valoraciones.
S x y S y : Corresponden respectivamente a la desviación típica del evaluador 1 y del evaluador
2.
2 2
S x y S y : Corresponden respectivamente a la varianza del evaluador 1 y del evaluador
2.
x y y : Corresponden respectivamente a la media de las evaluaciones realizadas por
el evaluador 1 y 2.
El coeficiente puede tomar valores entre 1 y –1, pero por la cuestión que interesa
valorar (coincidencia de las puntuaciones entre los evaluadores) solo tendrá
sentido cuando este tome valores positivos. Por otro lado, hay que tener en
cuenta que a la hora de valorar el resultado, este coeficiente interpreta el grado
de acuerdo de manera mucho más exigente: valores superiores a 0,99 se interpretan
como una concordancia casi perfecta; entre 0,95 y 0,99 se habla de una
concordancia sustancial; entre 0,90 y 0,95, moderada, y por debajo de 0,90 se
considera que la concordancia es pobre.
Ejemplo
Dos evaluadores corrigen de manera independiente los trabajos de 40 alumnos. La correlación
de Pearson entre los dos evaluadores es de 0,96. La media de las calificaciones
del evaluador A es de 7,23, con una desviación típica de 3,44, mientras que para
el evaluador B la media es de 6,33, con desviación típica de 2,88. ¿Cuál es el coeficiente
de concordancia entre los dos evaluadores?