Sobre Estándares y Evaluaciones en América Latina. - Observatorio ...

112SOBRE ESTÁNDARES Y EVALUACIONES EN AMÉRICA LATINASe basa en un modelo sofisticado que sugiere cómo se encuentransituados teóricamente los estudiantes y los ítems de las pruebasen una escala numérica común y cómo las respuestas de los estudiantesa los ítems están estadísticamente determinadas por sus posicionesrelativas en dicha escala. De ese modelo se ha derivadotoda una tecnología que parece resolver varios problemas difícilesen la equiparación de formas de prueba, en la calibración de losresultados a lo largo del tiempo y en la construcción de medicionesparalelas por vías más “fuertes” que los métodos estadísticos clásicos.Un importante ejemplo de esa fortaleza es que es posible estableceruna relación entre los estudiantes en un nivel de puntaje particulary los ítemes que ellos dominan. Esto se realiza de unamanera referida a criterios, sin tener que tomar en cuenta poblacionesnormativas de estudiantes o de ítems.El hecho de que esta referencia funcione o que los problemas decomparabilidad sean realmente resueltos, depende de la adecuación delos modelos con respecto a un sistema de pruebas específico, es decir,con respecto a poblaciones particulares de ítems y de estudiantes. Unaspecto cuestionable del modelo, por lo menos en muchas aplicacioneseducacionales, es que presupone que fundamentalmente existe una soladimensión en la variación en la dificultad de los ítems y en la capacidadde los estudiantes.El uso de los métodos IRT en el análisis estadístico y la interpretaciónde los resultados de las evaluaciones educacionales requiere programacionesy análisis estadísticos sofisticados, aunque esto es tambiéncierto para los métodos convencionales. Es muy importante recordar quelos sistemas de análisis, sean el clásico o el IRT, son solo instrumentosestadísticos para resolver algunos problemas técnicos de análisis de ítems,de equiparación y calibración de pruebas y de evaluación de la precisiónestadística de los resultados. Los problemas fundamentales tantoconceptuales como pedagógicos son, por un lado, la definición de losuniversos de ítems y, por otro, la construcción y selección de una muestrade esos universos.El dilema respecto a las escalas de reporteEl requerimiento clave para el desarrollo de escalas de reporte apropiadaspara las evaluaciones educacionales es que la interpretación que sehaga a partir de los resultados sea auténtica. Esto significa:02-Ravela y otros 1128/1/07, 19:31