Figura 17LA ESTRUCTURA FUNCIONAL DE LA EVALUACIÓNSEGÚN STAKE: LA EVALUACIÓN RELOJ10Esquema para uso<strong>de</strong> la audiencia11Reunir <strong>los</strong> informesformales si <strong>los</strong> hay12Hablar con <strong>los</strong> clientes,el personal <strong>de</strong>l programay las audiencias1I<strong>de</strong>ntificar el alcance<strong>de</strong>l programa2Panorama <strong>de</strong> las activida<strong>de</strong>s<strong>de</strong>l programa9Validación: confirmación,búsqueda <strong>de</strong> evi<strong>de</strong>nciaspara la no confirmación8Desarrollar temas, preparar<strong>de</strong>scripciones y estudiarcasos concretos7Observar <strong>los</strong> antece<strong>de</strong>ntes,las transecciones y <strong>los</strong>resultados propuestos6Seleccionar observadores,jueces e instrumentos,si <strong>los</strong> hay3Descubrir <strong>los</strong> propósitose intereses4Conceptualizar las cuestionesy <strong>los</strong> problemas5I<strong>de</strong>ntificar <strong>los</strong> datosnecesarios para investigar<strong>los</strong> problemasLa evaluación internaes más útil que laexterna y lasautoevaluaciones sonmás útiles que lasevaluacionescentralizadasComo consecuencia, recomienda a <strong>los</strong> evaluadores que recopileny presenten las perspectivas <strong>de</strong> distintas personas y grupos. Lesadvierte que no crean que sólo <strong>los</strong> resultados cuantificables pue<strong>de</strong>nhablar <strong>de</strong>l valor <strong>de</strong> un programa; dice que existen muy pocos datoscríticos en un estudio y que <strong>los</strong> resultados <strong>de</strong>ben ser valorados aveces, pero otras veces no. Destaca que <strong>los</strong> evaluadores pue<strong>de</strong>n escogerdistintos caminos para revelar la utilidad <strong>de</strong> un programa y aña<strong>de</strong>que ni <strong>los</strong> tests escritos ni otros datos concretos <strong>de</strong>ben ser contempladoscomo absolutamente esenciales, aun que tampoco <strong>de</strong>ben serautomáticamente excluidos.En opinión <strong>de</strong> Stake, la evaluación interna es más útil que la externay las autoevaluaciones son más útiles que las evaluaciones centralizadas.En conjunto, recomienda a <strong>los</strong> evaluadores que utilicen cualquiertécnica y fuente <strong>de</strong> información que les parezca relevante para<strong>de</strong>scribir la complejidad y la realidad múltiple <strong>de</strong> un programa y paracomunicar esa complejidad, aunque el resultado sea dudoso y dificultela toma <strong>de</strong> <strong>de</strong>cisiones.En cuanto al papel <strong>de</strong>l evaluador, Stake señala que una tarea fundamentalen cualquier evaluación es <strong>de</strong>terminar su propósito y <strong>los</strong>110
criterios que <strong>de</strong>ben ser valorados. Apuntando que existen, por lomenos, siete propósitos legítimos en una evaluación:1. Documentar <strong>los</strong> acontecimientos.2. Informar <strong>de</strong>l cambio.3. Determinar la vitalidad institucional.4. Localizar la raíz <strong>de</strong> <strong>los</strong> problemas.5. Colaborar en la toma <strong>de</strong> <strong>de</strong>cisiones administrativas.6. Proponer una acción correctiva.7. Intensificar nuestra comprensión <strong>de</strong> la enseñanza y el aprendizaje,o combinaciones entre <strong>los</strong> propósitos anteriores.Así, cada evaluador <strong>de</strong>be tomar su propia <strong>de</strong>cisión sobre estosproblemas, y ser, en este aspecto, reduccionista y convergente. Stakerecomienda a <strong>los</strong> evaluadores que no trabajen con nociones <strong>de</strong> éxitopreconcebidas. En lugar <strong>de</strong> eso, les sugiere que, en primer lugar,presten mucha atención al hecho <strong>de</strong> “por qué ha sido encargada laevaluación”, luego analicen lo que suce<strong>de</strong> y, finalmente, negocien yescojan las cuestiones <strong>de</strong> valor y <strong>los</strong> criterios.3. LA EVALUACIÓN INNOVATIVAEn este caso se expone el método <strong>de</strong> evaluación innovativa que, adiferencia <strong>de</strong> <strong>los</strong> dos mo<strong>de</strong><strong>los</strong> anteriores, está especialmente vinculadaa la evaluación en un ámbito temático específico como es el educativopero que, en su planteamiento y concepción generales resultatrasladable a otros ámbitos.De un modo característico, <strong>los</strong> métodos <strong>de</strong> evaluación convencionaleshan seguido las tradiciones experimentales o psicométricasdominantes en la investigación educativa. Los evaluadores innovativoscreen que estos métodos tienen un alcance limitado e ina<strong>de</strong>cuadopara dilucidar <strong>los</strong> complejos problemas con que se enfrentan <strong>los</strong>evaluadores.La evaluación innovativa se presenta vinculada a un paradigma <strong>de</strong>investigación antropológica opuesto. Los intentos <strong>de</strong> valoración <strong>de</strong><strong>los</strong> productos educativos <strong>de</strong>jan paso a un estudio intensivo <strong>de</strong>l programacomo totalidad: su base lógica, su evolución, sus operaciones,sus logros y sus dificulta<strong>de</strong>s.La crítica principal que se hace al mo<strong>de</strong>lo basado en objetivos esque valora sin explicar, mientras que la metodología innovativa, contemplandoel programa como un todo, utiliza más la <strong>de</strong>scripción quelas cuantificaciones.Los intentos <strong>de</strong>valoración <strong>de</strong> <strong>los</strong>productos educativos<strong>de</strong>jan paso a unestudio intensivo <strong>de</strong>lprograma comototalidad: su baselógica, su evolución,sus operaciones, suslogros y susdificulta<strong>de</strong>s111
- Page 1 and 2:
28ORGANIZACIÓNY DISEÑO DE LOSPROC
- Page 3 and 4:
COLECCIÓN: CUADERNOS DE TRABAJO-FO
- Page 5 and 6:
ÍNDICEHITZAURREA/PREFACIO . . . .
- Page 7 and 8:
HITZAURREAPREFACIOInolako zalantzar
- Page 9 and 10:
PRESENTACIÓNLa evaluación se ha c
- Page 11 and 12:
1. La evaluaciónConceptos
- Page 13 and 14:
una intervención, proyecto o progr
- Page 15 and 16:
adican en que los métodos utilizad
- Page 17 and 18:
• Captar los efectos e impactos p
- Page 19 and 20:
que en el caso norteamericano, el d
- Page 21 and 22:
❏ TransparenciaEl principio de tr
- Page 23 and 24:
no monetarias; en el ACU los efecto
- Page 25 and 26:
ado un plan o un programa resulta o
- Page 27 and 28:
2. La evaluación de programasen la
- Page 29 and 30:
• Objetivo nº 4: Adaptación de
- Page 31 and 32:
ción de los indicadores, las técn
- Page 33 and 34:
2.3.1. Fase A : Mandato de Evaluaci
- Page 35 and 36:
• Cuáles son los problemas econ
- Page 37 and 38:
• Asegurar que se han cumplido lo
- Page 39 and 40:
1996 14 una serie de orientaciones
- Page 41 and 42:
Figura 5SEGUIMIENTOREALIZACIÓN(Eje
- Page 43 and 44:
Figura 7EJEMPLO DE ARTICULACIÓN
- Page 45 and 46:
Realizaciones, resultados e impacto
- Page 47 and 48:
ciones, resultados y objetivos, seg
- Page 49 and 50:
minar si los objetivos fijados en l
- Page 51 and 52:
Figura 8ESTIMACIÓN DE EFECTOS E IM
- Page 53 and 54:
Por su parte, las técnicas de los
- Page 55 and 56:
3. Programa MEANSIdentificación y
- Page 57 and 58:
• ¿Cómo distinguir los efectos
- Page 59 and 60: de empleo, provisión de nuevas dem
- Page 61 and 62: gibles como beneficiarios de dicha
- Page 63 and 64: 4. Prácticas de evaluación
- Page 65 and 66: Figura 12MODELO CIPPCONTEXTOIMPUTPR
- Page 67 and 68: • Eficacia: Definida como el grad
- Page 69 and 70: • Pertinencia: La evaluación de
- Page 71 and 72: • Grupos de trabajo para:• El d
- Page 73 and 74: económica y social de las regiones
- Page 75 and 76: • Utilización de diversas fuente
- Page 77 and 78: Figura 14ESTRUCTURA CONCEPTUAL Y CR
- Page 79 and 80: “Eficacia innovadora” 35 . Del
- Page 81 and 82: METODOLOGÍAEl enfoque metodológic
- Page 83 and 84: 4.2.5. EVALUACIÓN EX-POST DE PROGR
- Page 85 and 86: egionales sobre los resultados gene
- Page 87 and 88: gráfica, los movimientos migratori
- Page 89 and 90: obtención de conclusiones sobre la
- Page 91 and 92: 5. Consideraciones finalesAtendiend
- Page 93 and 94: • Una lógica de pluralidad, que
- Page 95 and 96: • Directos Complejos: vinculados
- Page 97 and 98: AnexoModelos de Evaluación
- Page 99 and 100: Tanto la información útil (para e
- Page 101 and 102: MODELO CIPP. DIMENSIONES DEL PROCES
- Page 103 and 104: lo mismo. Las metas y procedimiento
- Page 105 and 106: 2. La evaluación desempeña un pap
- Page 107 and 108: PRINCIPALES DISTINCIONES ENTRE LA E
- Page 109: debe proporcionar una estructura ad
- Page 113 and 114: sociales o los historiadores natura
- Page 115 and 116: Bibliografía Básica“Orientacion