Estos planes <strong>de</strong>ben incluir una amplia gama <strong>de</strong> elecciones referentesa la realización <strong>de</strong> la evaluación, como por ejemplo las audiencias ycuestiones clave; si es más apropiada una evaluación <strong>de</strong>l contexto, <strong>de</strong>linput, <strong>de</strong>l proceso y/o <strong>de</strong>l producto; el objeto que <strong>de</strong>be ser valorado; eltiempo y lugar <strong>de</strong>l estudio; el alcance y naturaleza <strong>de</strong> <strong>los</strong> controles que<strong>de</strong>ben imponerse; las comparaciones que <strong>de</strong>ben efectuarse; las fuentes<strong>de</strong> información necesarias; <strong>los</strong> métodos, instrumentos y esquemas parala recopilación <strong>de</strong> informaciones; las formas y procedimientos para<strong>de</strong>signar, archivar y conservar la información; <strong>los</strong> métodos <strong>de</strong> análisis einterpretación; las disposiciones para comunicar <strong>los</strong> resultados; y <strong>los</strong> criteriosy acuerdos para valorar <strong>los</strong> resultados <strong>de</strong> la evaluación.Las <strong>de</strong>cisiones acerca <strong>de</strong> estas activida<strong>de</strong>s evaluativas se constituyenen la base que soporta la contratación y financiación <strong>de</strong>l trabajoevaluativo, el seguimiento/retroalimentación <strong>de</strong> las relaciones con lasinstituciones implicadas, la configuración <strong>de</strong>l equipo evaluador, asícomo la programación y dirección <strong>de</strong> las activida<strong>de</strong>s <strong>de</strong>l mismo.Sin embargo, conviene apuntar que las cualida<strong>de</strong>s dinámicas einteractivas <strong>de</strong> muchas evaluaciones y la orientación <strong>de</strong> su serviciohacen difícil, si no imposible, la proyección correcta y a largo plazo<strong>de</strong> las necesida<strong>de</strong>s informativas específicas. Como consecuencia, <strong>los</strong>planes técnicos para la recopilación <strong>de</strong> datos y <strong>los</strong> análisis previos,están basados, a menudo, en presuposiciones erróneas y vienen aresultar inapropiados o incompletos. Un rígido seguimiento <strong>de</strong> la planificaciónevaluativa inicial –especialmente si se ha <strong>de</strong>finido en términosmuy específicos– a menudo va en <strong>de</strong>trimento <strong>de</strong> la utilidad <strong>de</strong>lestudio al dirigirlo hacia cuestiones equivocadas o no esenciales, yguiarlo mediante presuposiciones erróneas. Por lo tanto, <strong>los</strong> evaluadoresse enfrentan a un dilema. Por una parte, necesitan diseñar cuidadosamentesus activida<strong>de</strong>s evaluativas con el fin <strong>de</strong> realizarlas coneficiencia y aceptable rigor, así como para convencer a sus clientes <strong>de</strong>que saben lo que están haciendo. Por otra, necesitan un método evaluativoflexible y realizar una revisión y modificación periódicas <strong>de</strong>ldiseño para que la evaluación siga respondiendo a las necesida<strong>de</strong>s <strong>de</strong>las audiencias. Este dilema es especialmente problemático para <strong>los</strong>evaluadores, puesto que <strong>los</strong> clientes, a menudo, esperan o exigen diseñostécnicos <strong>de</strong>finitivos y más tar<strong>de</strong> se <strong>de</strong>silusionan cuando un rígidoseguimiento <strong>de</strong>l diseño original proporciona mucha información queno resulta útil o su utilidad se agota inmediatamente.A menudo, <strong>los</strong> clientes perciben que, <strong>de</strong> algún modo, <strong>los</strong> evaluadores<strong>de</strong>bían haber sabido proyectar las necesida<strong>de</strong>s informativas yajustar las activida<strong>de</strong>s <strong>de</strong> recopilación <strong>de</strong> datos. Para enfrentarse aeste dilema <strong>los</strong> evaluadores <strong>de</strong>ben abordar el diseño como un proceso,no como un producto, y necesitan conducir a sus clientes a hacerConviene apuntar quelas cualida<strong>de</strong>sdinámicas einteractivas <strong>de</strong> muchasevaluaciones y laorientación <strong>de</strong> suservicio hacen difícil, sino imposible, laproyección correcta y alargo plazo <strong>de</strong> lasnecesida<strong>de</strong>sinformativasespecíficas102
lo mismo. Las metas y procedimientos evaluativos <strong>de</strong>ben ser esquematizados<strong>de</strong> antemano, pero también analizados, revisados, ampliadosy modificados periódicamente. Fundamentalmente, este proceso<strong>de</strong>be estar guiado por un concepto justificable <strong>de</strong> lo que es una evaluaciónsolvente, por una sensibilidad a <strong>los</strong> factores <strong>de</strong>l mundo realque a menudo interfieren en el trabajo evaluativo y por una comunicacióncontinua entre <strong>los</strong> evaluadores y sus audiencias, acerca <strong>de</strong> lapertinencia y propiedad <strong>de</strong> la planificación.Al principio <strong>de</strong>l proceso, es importante escuchar e investigar.¿Quiénes son <strong>los</strong> principales clientes? ¿Qué pi<strong>de</strong>n <strong>de</strong> la evaluación?¿Por qué? ¿Qué tipo(s) <strong>de</strong> evaluación (<strong>de</strong>l contexto, <strong>de</strong> entrada, <strong>de</strong>lproceso o <strong>de</strong>l producto) pue<strong>de</strong>(n) ser más efectivo(s)? ¿Cómo creen <strong>los</strong>clientes que <strong>de</strong>be ser realizada la evaluación? ¿Qué perspectivas tienenen mente? ¿Quiénes consi<strong>de</strong>ran que son la audiencia principal? ¿Quiénpue<strong>de</strong> salir perjudicado a consecuencia <strong>de</strong> la evaluación? ¿Por qué?¿Qué cooperación será esencial? ¿De qué información se dispone?¿Cuáles son <strong>los</strong> antece<strong>de</strong>ntes? Des<strong>de</strong> un punto <strong>de</strong> vista realista, ¿Québeneficios positivos pue<strong>de</strong>n esperarse <strong>de</strong> la evaluación? ¿Qué efectosnocivos pue<strong>de</strong>n producirse, y cómo pue<strong>de</strong>n ser evitados? ¿Qué competenciasse requieren para realizar el trabajo?, y así sucesivamente.Siempre que sea posible una elección, el equipo evaluador <strong>de</strong>be plantearsecuestiones como éstas antes <strong>de</strong> <strong>de</strong>cidir si una evaluación pue<strong>de</strong>realizarse o si se dan las condiciones apropiadas para hacerla.Cuando haya asumido una <strong>de</strong>cisión positiva para seguir a<strong>de</strong>lante,el equipo evaluador <strong>de</strong>be hacer un esquema global <strong>de</strong>l plan. Este plan<strong>de</strong>be tener en cuenta si dicho equipo conoce el marco <strong>de</strong> <strong>de</strong>sarrolloy las necesida<strong>de</strong>s concretas <strong>de</strong> la evaluación, y <strong>de</strong>be ajustarse a lasnormas generalmente aceptadas para la realización <strong>de</strong> una evaluaciónsolvente. A<strong>de</strong>más, <strong>de</strong>be hablar, por lo menos <strong>de</strong> un modo general, <strong>de</strong>toda la gama <strong>de</strong> tareas que <strong>de</strong>bería realizar.El esquema incluido a continuación proporciona una visión general<strong>de</strong> <strong>los</strong> aspectos que <strong>de</strong>ben ser abordados en un diseño evaluativo.Estos puntos son aplicables al <strong>de</strong>sarrollar el plan inicial o más tar<strong>de</strong>,al revisarlo y explicarlo. Des<strong>de</strong> luego, sólo sirven como indicacióngeneral <strong>de</strong> la información <strong>de</strong>tallada que probablemente <strong>de</strong>berá serproporcionada a la hora <strong>de</strong> operativizar el diseño.Finalmente, conviene subrayar la necesidad <strong>de</strong> evaluar las evaluaciones.Si las evaluaciones <strong>de</strong>ben proporcionar una guía oportuna,las propias evaluaciones <strong>de</strong>ben ser solventes. Entre otras consi<strong>de</strong>raciones,<strong>de</strong>berían centrarse en las cuestiones a<strong>de</strong>cuadas, ser exactas ensus <strong>de</strong>finiciones, no ser ten<strong>de</strong>nciosas, ser comprensibles y ser justaspara aquel<strong>los</strong> cuyo trabajo se está examinando. Valorar las evaluacionessegún estas consi<strong>de</strong>raciones es a<strong>de</strong>ntrarse en la literatura queFinalmente, convienesubrayar la necesidad<strong>de</strong> evaluar lasevaluaciones. Si lasevaluaciones <strong>de</strong>benproporcionar una guíaoportuna, las propiasevaluaciones <strong>de</strong>ben sersolventes103
- Page 1 and 2:
28ORGANIZACIÓNY DISEÑO DE LOSPROC
- Page 3 and 4:
COLECCIÓN: CUADERNOS DE TRABAJO-FO
- Page 5 and 6:
ÍNDICEHITZAURREA/PREFACIO . . . .
- Page 7 and 8:
HITZAURREAPREFACIOInolako zalantzar
- Page 9 and 10:
PRESENTACIÓNLa evaluación se ha c
- Page 11 and 12:
1. La evaluaciónConceptos
- Page 13 and 14:
una intervención, proyecto o progr
- Page 15 and 16:
adican en que los métodos utilizad
- Page 17 and 18:
• Captar los efectos e impactos p
- Page 19 and 20:
que en el caso norteamericano, el d
- Page 21 and 22:
❏ TransparenciaEl principio de tr
- Page 23 and 24:
no monetarias; en el ACU los efecto
- Page 25 and 26:
ado un plan o un programa resulta o
- Page 27 and 28:
2. La evaluación de programasen la
- Page 29 and 30:
• Objetivo nº 4: Adaptación de
- Page 31 and 32:
ción de los indicadores, las técn
- Page 33 and 34:
2.3.1. Fase A : Mandato de Evaluaci
- Page 35 and 36:
• Cuáles son los problemas econ
- Page 37 and 38:
• Asegurar que se han cumplido lo
- Page 39 and 40:
1996 14 una serie de orientaciones
- Page 41 and 42:
Figura 5SEGUIMIENTOREALIZACIÓN(Eje
- Page 43 and 44:
Figura 7EJEMPLO DE ARTICULACIÓN
- Page 45 and 46:
Realizaciones, resultados e impacto
- Page 47 and 48:
ciones, resultados y objetivos, seg
- Page 49 and 50:
minar si los objetivos fijados en l
- Page 51 and 52: Figura 8ESTIMACIÓN DE EFECTOS E IM
- Page 53 and 54: Por su parte, las técnicas de los
- Page 55 and 56: 3. Programa MEANSIdentificación y
- Page 57 and 58: • ¿Cómo distinguir los efectos
- Page 59 and 60: de empleo, provisión de nuevas dem
- Page 61 and 62: gibles como beneficiarios de dicha
- Page 63 and 64: 4. Prácticas de evaluación
- Page 65 and 66: Figura 12MODELO CIPPCONTEXTOIMPUTPR
- Page 67 and 68: • Eficacia: Definida como el grad
- Page 69 and 70: • Pertinencia: La evaluación de
- Page 71 and 72: • Grupos de trabajo para:• El d
- Page 73 and 74: económica y social de las regiones
- Page 75 and 76: • Utilización de diversas fuente
- Page 77 and 78: Figura 14ESTRUCTURA CONCEPTUAL Y CR
- Page 79 and 80: “Eficacia innovadora” 35 . Del
- Page 81 and 82: METODOLOGÍAEl enfoque metodológic
- Page 83 and 84: 4.2.5. EVALUACIÓN EX-POST DE PROGR
- Page 85 and 86: egionales sobre los resultados gene
- Page 87 and 88: gráfica, los movimientos migratori
- Page 89 and 90: obtención de conclusiones sobre la
- Page 91 and 92: 5. Consideraciones finalesAtendiend
- Page 93 and 94: • Una lógica de pluralidad, que
- Page 95 and 96: • Directos Complejos: vinculados
- Page 97 and 98: AnexoModelos de Evaluación
- Page 99 and 100: Tanto la información útil (para e
- Page 101: MODELO CIPP. DIMENSIONES DEL PROCES
- Page 105 and 106: 2. La evaluación desempeña un pap
- Page 107 and 108: PRINCIPALES DISTINCIONES ENTRE LA E
- Page 109 and 110: debe proporcionar una estructura ad
- Page 111 and 112: criterios que deben ser valorados.
- Page 113 and 114: sociales o los historiadores natura
- Page 115 and 116: Bibliografía Básica“Orientacion