Sobre Estándares y Evaluaciones en América Latina. - Observatorio ...

LOS PRÓXIMOS PASOS93DIFERENCIAS METODOLOGICAS1. La definición de lo que se vaa medir2. La definición de prueba3. La evidencia de validez4. Los procedimientos decálculo de la confiabilidad yde análisis de ítems.Pruebas referidas a normasSuele ser una definición generaly vaga. Generalmente consisteen listados de conocimientos amanera de temarios o en listadosde objetivos más o menosdefinidos.La prueba es el conjunto de ítemsque forman una muestra representativade todos los conocimientos,destrezas y habilidadesque se quiere medir. El criteriode representatividad puede sermuy variado.Para esta evidencia será muyimportante:(a) la certeza de que los ítemstienen las características adecuadasen su construcción;(b) el proceso de juicio por elcual se recoge información acercade la relación del ítem con elcontenido que pretende medir; y(c) la evidencia que se necesitaobtener sobre el ajuste entre losítems seleccionados para constituirla prueba definitiva y las especificacionescontenidas en latabla correspondiente.a) Los modelos empleados paraestos efectos se fundamentan enla maximización de la variabilidadde dos variables que estáncorrelacionadas, lo que permiteasegurarse que la magnitudde la correlación entre esas dosvariables será más alta. La correlaciónes la tñcnica fundamentalempleada en el cálculode la confiabilidad.b) Los parámetros resultantes delanálisis de ítems, principalmentela dificultad y la discrimi-Pruebas referidas a criteriosLa definición tiene que ser claray específica, detallando el “dominiodel conocimiento” queabarca el contenido por medir ylas reglas básicas de estructuraciónde los ítems con que se mediráese dominio. A estas definicionesse las conoce como“especificaciones de contenido”.La prueba es el conjunto de “n”ítems, aleatoriamente seleccionadosde una población infinitade ítems, que se emplea paramedir únicamente una especificaciónde contenido. En otraspalabras, se mide un solo conocimiento,habilidad o destreza.Aquí es importante:(a) la certeza de que los ítemsestén construidos de acuerdocon las características propiasde las preguntas de selecciónmúltiple; y(b) un valor aceptable en el índicede congruencia entre cadaítem y su especificación de contenido.a) Se da más importancia a la consistenciaentre los resultados obtenidospor un grupo de alumnos alos cuales se les aplica la mismaprueba o una prueba paralela endos oportunidades distintas. El índicede confiabilidad resulta de laproporción de estudiantes cuyasrespuestas en ambas oportunidadesdemuestren que sí (o no) dominanuna competencia o especificaciónde contenidos.b) La selección de ítems queconstituirán la prueba definitiva02-Ravela y otros 938/1/07, 19:31