Sobre Estándares y Evaluaciones en América Latina. - Observatorio ...

110SOBRE ESTÁNDARES Y EVALUACIONES EN AMÉRICA LATINAGeneralizabilidad de los resultados reportadosLa teoría de la generalizabilidad (Cronbach, Gleser, Nanda y Rajaratnam,1972) constituye un modelo integral para analizar los puntajesalcanzados por los estudiantes en las pruebas y los reportes de losmismos. Es una expansión y extensión del modelo tradicional de confiabilidad,erigida sobre la noción de que los ítems de las pruebas y lascondiciones de aplicación y calificación de las mismas constituyenmuestras extraídas de universos más amplios de ítems y condiciones deaplicación y calificación. Así, por ejemplo, en una prueba de capacidadde expresión escrita, se puede pedir a los estudiantes que respondan porescrito a cada una de varias preguntas o reactivos. Estos buscarían provocarla redacción de textos narrativos, informativos o de otra naturaleza.Esto significa que serían muestras de textos de una muestra de tiposde redacción. Más aún, la calificación de los textos redactados estaría acargo de una muestra de docentes. El objetivo es generalizar el desempeñode los estudiantes a los universos correspondientes de preguntas oreactivos para la redacción, tipos de textos y docentes-calificadores.En la teoría de la generalizabilidad, la confiabilidad de los puntajesde las pruebas es considerada desde la perspectiva de la generalización apartir de muestras a las poblaciones relevantes. El análisis de generalizabilidadimplica la determinación de la variabilidad de la muestra en diferentescomponentes medidos por el desempeño en las pruebas. En particular,el objetivo es determinar qué partes de la variación de los puntajesde las pruebas se deben a características estables de los individuos ygrupos que son independientes de los ítems particulares y de las condicionesde aplicación, y qué parte de la variación obedece a característicasde los ítems y de las circunstancias de la aplicación de las pruebas.Esto último es considerado como “error de medición”.La aplicación de la teoría de la generalizabilidad al diseño de evaluacioneseducacionales requiere la definición cuidadosa y formal de las poblacioneso universos de ítems y de las condiciones de medición. Las tablas deespecificaciones convencionales de las pruebas son un buen punto de partida,pero es necesario añadirles una definición formal de las poblaciones ouniversos de ítems que corresponden a cada una de las celdas de la tabla, yde una especificación igualmente explícita acerca de las condiciones demedición, incluyendo los tipos de ítems, las maneras de administrar la prueba,los procedimientos de calificación o las condiciones de replicación (si esque la prueba en cuestión ha sido ya administrada en anterior oportunidad).02-Ravela y otros 1108/1/07, 19:31