13.07.2015 Views

La evaluación en la biblioteca pública: indicadores y otros ... - sinic

La evaluación en la biblioteca pública: indicadores y otros ... - sinic

La evaluación en la biblioteca pública: indicadores y otros ... - sinic

SHOW MORE
SHOW LESS

You also want an ePaper? Increase the reach of your titles

YUMPU automatically turns print PDFs into web optimized ePapers that Google loves.

<strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong>pública: <strong>indicadores</strong> y <strong>otros</strong>elem<strong>en</strong>tos de controlCartag<strong>en</strong>a de Indias (Colombia)7-11 de abril de 2003


COME UNA FALENA“Per mel’ago del<strong>la</strong> bi<strong>la</strong>nciasei sempre tu.M’hanno chiesto chi sei. Se lo sapessiLo direi a gran voce. E sarei chiusoTra quelle sbarre donde non s’esce più.”E. MONTALENon incolparmi dei segreti che ho per te,Perché da lì ricomincerà <strong>la</strong> mia vita quando non saremo più insieme.


<strong>La</strong> evaluación d<strong>en</strong>tro delproceso p<strong>la</strong>nificador30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 3


ANTES DE EVALUAR<strong>La</strong> evaluación no es un objetivo <strong>en</strong> sí mismaPreviam<strong>en</strong>te hay que• Determinar <strong>la</strong>s necesidades de los usuarios• Definir <strong>la</strong> misión y objetivos a medio y <strong>la</strong>rgop<strong>la</strong>zo. P<strong>la</strong>nificación estratégica del servicio• Fijar unidades de medida (<strong>indicadores</strong> decalidad) y el sistema de medición queinforman a <strong>la</strong> bca. sobre su comportami<strong>en</strong>to<strong>en</strong> re<strong>la</strong>ción con <strong>la</strong>s necesidades y expectativasde los usuarios30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 4


El CICLO DE LA PLANIFICACIÓNESTRATÉGICA• PLANIFICAR (p<strong>la</strong>n). Definir sobre quéproceso o materia de <strong>la</strong> bca. se quiere trabajar<strong>en</strong> <strong>la</strong> mejora de <strong>la</strong> calidad. Id<strong>en</strong>tificar <strong>la</strong>s áreasde mejora• HACER (do). Ejecutar <strong>la</strong>s decisiones tomadas<strong>en</strong> <strong>la</strong> fase de p<strong>la</strong>n• EVALUAR (check). Medir <strong>en</strong> qué medida sehan logrado <strong>la</strong>s mejoras propuestas• MEJORAR (Act)30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 5


POR QUÉ DEBEMOS PLANIFICAR• Cambios <strong>en</strong> <strong>la</strong> sociedad• Impacto de <strong>la</strong>s TIC• Cambios <strong>en</strong> el modelo de gestión de <strong>la</strong>sAdministraciones públicas• Nuevas funciones de <strong>la</strong> <strong>biblioteca</strong> pública30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 6


NUEVO MODELO DE LAADMINISTRACIÓN• Organización tradicional/ burocrática• Organización moderna/ger<strong>en</strong>cial“Crear una Administración pública quefuncione mejor y cueste m<strong>en</strong>os”30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 7


NUEVO MODELO DE LAADMINISTRACIÓN• Demanda de un nuevo modelo de gestión para<strong>la</strong>s Ad. Públicas•Servicios de calidad y r<strong>en</strong>tables para losciudadanos•Servicios eficaces que satisfagan <strong>la</strong>sexpectativas y necesidades de los cli<strong>en</strong>tes•Servicios efici<strong>en</strong>tes. Servicios de calidad alm<strong>en</strong>or coste posible30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 8


CALIDAD DE LOS SERVICIOSPÚBLICOSResultado de <strong>la</strong> comparación que haceel cli<strong>en</strong>te (ciudadano) <strong>en</strong>tre lo quepercibe del servicio (percepción) y <strong>la</strong>sexpectativas que ti<strong>en</strong>e30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 9


P<strong>la</strong>nificación de <strong>la</strong> calidad de los serviciospúblicosDetectar <strong>la</strong>snecesidadesSatisfaccióndecli<strong>en</strong>tesTraducir <strong>la</strong>snecesidadesPrestarel servicioEvaluacióndelServicio30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 10


FUNCIONES ACTUALES DE LABIBLIOTECA• Puerta de acceso a <strong>la</strong> sociedad de <strong>la</strong>información y el conocimi<strong>en</strong>to• Proveedora de recursos para <strong>la</strong>educación y el autoapr<strong>en</strong>dizaje continuo• Creadora y pot<strong>en</strong>ciadora del hábitolector30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 11


FUNCIONES ACTUALES DE LABIBLIOTECA• C<strong>en</strong>tro de desarrollo cultural y tiempolibre• C<strong>en</strong>tro de información local• Facilitadora de <strong>en</strong>cu<strong>en</strong>tros, conviv<strong>en</strong>cia,solidaridad y participación <strong>en</strong> valoresdemocráticos30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 12


PLANIFICACIÓN EN LA BIBLIOTECA<strong>La</strong> p<strong>la</strong>nificación permite que:• <strong>La</strong> bca ati<strong>en</strong>da más y mejor <strong>la</strong>snecesidades de <strong>la</strong> comunidad• <strong>La</strong> <strong>en</strong>tidad rectora, <strong>la</strong> dirección y elpersonal <strong>en</strong>ti<strong>en</strong>dan sus objetivos• Los fondos económicos de <strong>la</strong>comunidad se gast<strong>en</strong> de forma eficaz yefici<strong>en</strong>te30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 13


PLANIFICACIÓN EN LA BIBLIOTECA• Haya una continuidad del servicioaunque haya cambios <strong>en</strong> el personal• <strong>La</strong> bca. se implique cada vez más con <strong>la</strong>comunidad al ver ésta at<strong>en</strong>didas susdemandas• <strong>La</strong> bca. se adapte eficazm<strong>en</strong>te alcambio30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 14


GESTIÓN DEL CAMBIO• “Ha de formu<strong>la</strong>rse una política c<strong>la</strong>raque defina objetivos, prioridades yservicios <strong>en</strong> re<strong>la</strong>ción con <strong>la</strong>snecesidades de <strong>la</strong> comunicad.• <strong>La</strong>s <strong>biblioteca</strong>s públicas deb<strong>en</strong>organizarse eficazm<strong>en</strong>te y mant<strong>en</strong>ernormas profesionales defuncionami<strong>en</strong>toManifiesto de <strong>la</strong> Unesco para <strong>la</strong> Biblioteca Pública30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 15


GESTIÓN DEL CAMBIO“...es necesario definir <strong>la</strong>s finalidades de<strong>la</strong> bca pública, sus objetivos a corto y a<strong>la</strong>rgo p<strong>la</strong>zo, así como de <strong>la</strong>s estrategias yde evaluación de su r<strong>en</strong>dimi<strong>en</strong>to para unaprestación equitativa, eficaz y efici<strong>en</strong>te deservicios de bcas. accesibles a todos lossectores de <strong>la</strong> comunidad...”Directrices If<strong>la</strong>/Unesco para el desarrollo de <strong>la</strong>s <strong>biblioteca</strong>spúblicas30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 16


GESTIÓN DEL CAMBIO• <strong>La</strong>s Bibliotecas públicas deb<strong>en</strong> p<strong>la</strong>nificar yorganizar el conjunto de sus procesos,actividades y tareas de forma eficaz yefici<strong>en</strong>te.• Sus políticas de desarrollo se deb<strong>en</strong> basar <strong>en</strong>p<strong>la</strong>nes de gestión, defini<strong>en</strong>do parámetros e<strong>indicadores</strong> que permitan evaluar resultadosde los p<strong>la</strong>nes y el nivel de satisfacción de loscli<strong>en</strong>tes.(Pautas sobre los servicios de <strong>biblioteca</strong>s públicas)30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 17


TALLERAnálisis de <strong>la</strong> situación de<strong>la</strong> <strong>biblioteca</strong> <strong>en</strong> el contextode <strong>la</strong> p<strong>la</strong>nificación y de <strong>la</strong>evaluación30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 18


TallerEvaluación:argum<strong>en</strong>tos a favor y <strong>en</strong>contra30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 19


RAZONES PARA EVALUAR. 1Argum<strong>en</strong>tos sociales• <strong>La</strong>s autoridades responsables de <strong>la</strong>financiación desean conocer el grado decumplimi<strong>en</strong>to de los objetivos marcados y losresultados obt<strong>en</strong>idos• Los ciudadanos pid<strong>en</strong> control y seguimi<strong>en</strong>tode los recursos públicos• <strong>La</strong> importancia de <strong>la</strong> información <strong>en</strong> todos lossectores y <strong>la</strong> necesidad de obt<strong>en</strong>er<strong>la</strong> de formarápida y con calidad30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 20


RAZONES PARA EVALUAR. 2Argum<strong>en</strong>tos profesionales• Los gestores/responsables necesitan gestionarlos recursos efici<strong>en</strong>tem<strong>en</strong>te• <strong>La</strong> <strong>biblioteca</strong> pública necesita argum<strong>en</strong>tospara obt<strong>en</strong>er apoyo financiero, mejorar elfuncionami<strong>en</strong>to de los servicios y satisfacer atodos los implicados• Facilitar el proceso de toma de decisiones30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 21


RAZONES PARA EVALUAR. 3Argum<strong>en</strong>tos profesionales• Asegurar que <strong>la</strong>s actividades del servicio<strong>biblioteca</strong>rio se realizan correctam<strong>en</strong>te a lo<strong>la</strong>rgo del tiempo• <strong>La</strong> inexist<strong>en</strong>cia de objetivos y <strong>la</strong> falta demedida del cumplimi<strong>en</strong>to induce a <strong>la</strong>desmotivación• Los trabajadores desean que su trabajo t<strong>en</strong>gavalor• Los usuarios ti<strong>en</strong><strong>en</strong> derecho a conocer cómose gestiona <strong>la</strong> <strong>biblioteca</strong> y los resultadosobt<strong>en</strong>idos30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 22


RAZONES PARA NO EVALUAR. 1• Los costes <strong>en</strong> términos de tiempo y dinero• <strong>La</strong> dificultad del proceso y su mant<strong>en</strong>imi<strong>en</strong>to<strong>en</strong> el tiempo• Los métodos de evaluación “corroboran” loque ya se conoce de forma intuitiva y porobservación• Los resultados desal<strong>en</strong>tadores que se pued<strong>en</strong>obt<strong>en</strong>er30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 23


RAZONES PARA NO EVALUAR. 2• <strong>La</strong> dificultad de medir aspectos subjetivos conmedidas objetivas (satisfacción de usuarios ypersonal, impacto...)• <strong>La</strong> calidad del servicio es inapr<strong>en</strong>sible. No sepuede traducir a datos cuantitativos• <strong>La</strong> escasa relevancia que ti<strong>en</strong><strong>en</strong> los procesosevaluadores <strong>en</strong> <strong>la</strong> aplicación de medidascorrectoras y mejoras y <strong>la</strong> frustración queproduce <strong>en</strong> el personal• <strong>La</strong> evaluación se ve como control delr<strong>en</strong>dimi<strong>en</strong>to personal30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 24


El sistema de evaluación.Elem<strong>en</strong>tos y medidas30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 25


CONDICIONES PREVIAS• Cada <strong>biblioteca</strong>/sistema/red debehaber definido los objetivos estratégicosque desea alcanzar <strong>en</strong> cada servicio y<strong>en</strong> el conjunto• Deb<strong>en</strong> ser congru<strong>en</strong>tes con <strong>la</strong> misión yvisión de <strong>la</strong> <strong>biblioteca</strong>/sistema/red30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 26


UN SISTEMA DE INFORMACIÓNque permita a cada unidad:• Medir su grado de eficacia, efici<strong>en</strong>cia y <strong>la</strong>satisfacción de los usuarios• Evaluar objetivam<strong>en</strong>te <strong>la</strong> evolución de <strong>la</strong>gestión de <strong>la</strong> <strong>biblioteca</strong> <strong>en</strong> el tiempo• Comparar con otras organizaciones simi<strong>la</strong>res• Disponer de un sistema objetivo que ofrezcadatos de <strong>la</strong> gestión a los ciudadanosMagnitudes físicas y financieras30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 27


¿QUÉ SE EVALÚA?• Los recursos de <strong>la</strong> bca (inputs)• Los procesos de trabajo• Los servicios producidos (outputs)• Los costes (r<strong>en</strong>dimi<strong>en</strong>to)• <strong>La</strong> satisfacción de los usuarios y de <strong>la</strong>spersonas que integran <strong>la</strong> organización• Los resultados• El impacto30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 28


LOS RECURSOS (INPUTS)Conjunto de recursos necesarios para eldesarrollo de <strong>la</strong> actividad de <strong>la</strong> <strong>biblioteca</strong>• Presupuesto anual• Edificio• Equipami<strong>en</strong>tos. Insta<strong>la</strong>ciones• Personal. Horas de trabajo• Colección/InformaciónMedidas cuantitativas g<strong>en</strong>eralm<strong>en</strong>teMedidas cualitativas con mayor frecu<strong>en</strong>cia30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 29


LOS PROCESOSConjunto de operaciones realizadas conlos recursos para conseguir un objetivo.Se mide su r<strong>en</strong>dimi<strong>en</strong>to y eficaciaEj. Cuánto tiempo se tarda <strong>en</strong> el proceso técnicode <strong>la</strong>s novedades desde su selección hasta supuesta a disposición de los usuarios30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 30


LOS RESULTADOS (OUTPUTS). 1Son los servicios que produce ysuministra <strong>la</strong> organización: su cantidad ycalidad• Préstamos realizados• Puestos de lectura ocupados• Visitas recibidas <strong>en</strong> el sitio web30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 31


LOS RESULTADOS (OUTPUTS). 2• El número de terminales de accesopúblico a Internet• El tiempo de espera para acceder a unpuesto de internet• El nivel de precisión <strong>en</strong> <strong>la</strong>s respuestasMedidas cuantitativas y cualitativas30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 32


COSTES (nivel de r<strong>en</strong>dimi<strong>en</strong>to)Se mid<strong>en</strong> combinando los recursos y losservicios• ¿Cuánto cuesta un servicio o un producto?¿ Un préstamo, una actividad de formación?• ¿Cómo se divid<strong>en</strong> los costos de un servicio<strong>en</strong>tre costes de personal, administrativos,equipami<strong>en</strong>tos, etc?30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 33


LA SATISFACCIÓNSe mid<strong>en</strong> los resultados de los serviciosvistos por los usuarios y por <strong>la</strong>s personas de<strong>la</strong> organización• Percepción de los usuarios de <strong>la</strong> calidad de losrecursos• Satisfacción respecto a cada servicio (calidad,fiabilidad, etc.)• Motivación, logros y satisfacción del personal30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 34


ELEMENTOS DE CALIDAD DE UN SERVICIO.1• Capacidad de respuesta y agilidad.Disposición a prestar el servicio de formarápida y personalizada• Seguridad. Capacidad para transmitircredibilidad y confianza a través delconocimi<strong>en</strong>to y at<strong>en</strong>ción mostrados• Fiabilidad. Habilidad para prestar el serviciode forma precisa y sin errores. (Hacerlo bi<strong>en</strong> a<strong>la</strong> primera)30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 35


ELEMENTOS DE CALIDAD DE UN SERVICIO.2• Empatía. At<strong>en</strong>ción individualizada. El usuariosi<strong>en</strong>te que es tratado como persona individual.Capacidad para <strong>en</strong>t<strong>en</strong>der al cli<strong>en</strong>te y decomunicarse con él• Elem<strong>en</strong>tos tangibles.Elem<strong>en</strong>tos físicos queestán <strong>en</strong> <strong>la</strong> prestación: insta<strong>la</strong>ciones, equiposinformáticos, señalización, condicionesambi<strong>en</strong>tales, colecciones, etc.30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 36


CUALIDADES DE LOS SERVICIOS• Intangibles• Heterogéneos. Varían los actores• Simultáneos <strong>en</strong>tre <strong>la</strong> producción y elconsumo• <strong>La</strong> calidad <strong>la</strong> defin<strong>en</strong> los cli<strong>en</strong>tes• Evolucionan• <strong>La</strong> calidad se da <strong>en</strong> el propio servicio y<strong>en</strong> <strong>la</strong> prestación que se realiza30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 37


IMPACTOLos logros de los servicios <strong>biblioteca</strong>rios y susefectos <strong>en</strong> <strong>la</strong>s personas y <strong>la</strong> sociedad <strong>en</strong> suconjunto a nivel local, regional, etc.• A <strong>la</strong>rgo p<strong>la</strong>zo• Difícil de medir porque concurr<strong>en</strong> diversosfactoresAum<strong>en</strong>to del índice de lectura, de libroseditados, etc. como consecu<strong>en</strong>cia de <strong>la</strong> <strong>la</strong>borde <strong>la</strong> <strong>biblioteca</strong>30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 38


PROYECTO DE EVALUACIÓN1. Conformar el equipo de evaluación2. Definir los aspectos a evaluar y fijarlos <strong>indicadores</strong>3. Id<strong>en</strong>tificar <strong>la</strong>s herrami<strong>en</strong>tas másadecuadas de recogida de datos4. Determinar <strong>la</strong> forma de proceder:información y formación de <strong>la</strong>spersonas, cal<strong>en</strong>dario, recursosnecesarios, etc.30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 39


TallerInstrum<strong>en</strong>tos de evaluación.Recogida y uso de datosestadísticos30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 40


HERRAMIENTAS DE EVALUACIÓNEvaluación cuantitativa• Estadísticas• Evaluación comparativa (b<strong>en</strong>chmarking)• Indicadores de r<strong>en</strong>dimi<strong>en</strong>to, valor eimpacto30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 41


HERRAMIENTAS DE EVALUACIÓNEvaluación cualitativa• Cuestionarios: <strong>en</strong>cuestas y <strong>en</strong>trevistas• Análisis de quejas y rec<strong>la</strong>maciones• Suger<strong>en</strong>cias30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 42


ELECCIÓN DE UN SISTEMA DEEVALUACIÓNEl conjunto de medidas que se establezcadebe• adaptarse a <strong>la</strong>s circunstancias locales• evaluar el r<strong>en</strong>dimi<strong>en</strong>to de acuerdo alos recursos disponibles• re<strong>la</strong>cionar el r<strong>en</strong>dimi<strong>en</strong>to de losservicios <strong>biblioteca</strong>rios con <strong>la</strong>snecesidades de los usuarios30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 43


ESTADÍSTICAS• Recog<strong>en</strong> el movimi<strong>en</strong>to de <strong>la</strong> <strong>biblioteca</strong>cuantitativam<strong>en</strong>te• M<strong>en</strong>suales/Anuales (memoria)• Apoyan <strong>la</strong> gestión ante los responsablespolíticos30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 44


ESTADÍSTICASCar<strong>en</strong>cias:• Oportunidad (se publican con retraso)• Amplitud (incompletas temporalm<strong>en</strong>te)• Normalización internacional (no sigu<strong>en</strong><strong>la</strong>s definiciones de <strong>la</strong>s normasinternacionales)(Red Pullmann)30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 45


ESTADÍSTICAS• Pres<strong>en</strong>tación y acceso (pres<strong>en</strong>tacióninadecuada y difícil de conseguir<strong>la</strong>s)• Apropiadas a su propósito (no cubr<strong>en</strong>los temas que interes<strong>en</strong> a políticos,usuarios, etc.)(Red Pullmann)30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 46


EVALUACIÓN COMPARATIVA(b<strong>en</strong>chmarking)Comparar nuestra <strong>biblioteca</strong> con otra simi<strong>la</strong>rpara apr<strong>en</strong>der y mejorar. Se estudian políticasg<strong>en</strong>erales, servicios concretos, procesos, etc.• Comparación cuantitativa o descriptiva(comparación estadística usando estadísticasseleccionadas para <strong>la</strong> ocasión)• Comparación de procesos. Se estudia cómotrabajan otras <strong>biblioteca</strong>s para obt<strong>en</strong>er susresultados30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 47


TallerInstrum<strong>en</strong>tos de evaluación.Elem<strong>en</strong>tos de un indicador30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 48


INDICADORESDefiniciónSon valores numéricos que mid<strong>en</strong> elcomportami<strong>en</strong>to y evolución de unservicio, actividad, etc. con el objetivo decontro<strong>la</strong>r y servir de refer<strong>en</strong>cia paramejorar30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 49


TIPOS DE INDICADORESIndicadores primarios o Medidores• Referidos a <strong>la</strong>s estadísticas• Obt<strong>en</strong>idos directam<strong>en</strong>te del recu<strong>en</strong>to• Se expresan <strong>en</strong> valores totales(absolutos)30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 50


TIPOS DE INDICADORESIndicadores secundarios o Indicadores• Se establec<strong>en</strong> a partir de una re<strong>la</strong>ción<strong>en</strong>tre dos variables o <strong>indicadores</strong>primarios• Se expresan <strong>en</strong> valores re<strong>la</strong>tivos (%)30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 51


Sistema de <strong>indicadores</strong>Tipología de <strong>indicadores</strong>30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 52


SISTEMA DE INDICADORESDefiniciónConjunto de <strong>indicadores</strong> que agrupa unainformación c<strong>la</strong>ra de forma sintética ysistemática para el conocimi<strong>en</strong>to rápido yconciso de <strong>la</strong> consecución de objetivos de<strong>la</strong> <strong>biblioteca</strong>.Su propósito es medir y mejorar <strong>la</strong>actuación de <strong>la</strong>s organizaciones30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 53


¿QUÉ SE EVALÚA EN LA BIBLIOTECA?• Recursos (inputs).Presupuesto (compras,gastos, inversiones), edificio, equipami<strong>en</strong>tos,insta<strong>la</strong>ciones, colección, información• Servicios y productos (outputs)• Efectividad. El nivel de satisfacción de losusuarios• Impacto. Incid<strong>en</strong>cia de los servicios<strong>biblioteca</strong>rios <strong>en</strong> <strong>la</strong> comunidad30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 54


TIPOS DE INDICADORES• Indicadores de r<strong>en</strong>dimi<strong>en</strong>tooperacionalSon los que se obti<strong>en</strong><strong>en</strong> re<strong>la</strong>cionando <strong>la</strong>inversión realizada (inputs) con los servicios yproductos obt<strong>en</strong>idos (outputs)• Indicadores de efectividadRe<strong>la</strong>cionan los servicios y productos de <strong>la</strong><strong>biblioteca</strong> con el uso que realizan los usuarios.Se mide desde <strong>la</strong> perspectiva del usuario30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 55


TIPOS DE INDICADORES• Indicadores de coste-efectividadRe<strong>la</strong>cionan <strong>la</strong> inversión realizada (inputs) conel uso que se realiza de los servicios/productosde <strong>la</strong> <strong>biblioteca</strong> desde un punto de vistaobjetivo• Indicadores de impactoRe<strong>la</strong>cionan el uso que se hace de <strong>la</strong> <strong>biblioteca</strong>,sus servicios, productos y el uso pot<strong>en</strong>cial quese puede hacer de ellos.Repres<strong>en</strong>tan el grado de p<strong>en</strong>etración de <strong>la</strong> bca.<strong>en</strong> <strong>la</strong> comunidad30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 56


CRITERIOS DE SELECCIÓN DEINDICADORES• Ligados a objetivos. No se deb<strong>en</strong> mediractividades o procesos que no van a ser objetode mejora• Pertin<strong>en</strong>tes. Que sean apropiados a lo que sedesee medir• Que no sean costosos <strong>en</strong> tiempo y dinero <strong>en</strong>su recogida y <strong>en</strong> su aplicación posterior30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 57


CRITERIOS DE SELECCIÓN DEINDICADORES• Compr<strong>en</strong>sibles para el personal de <strong>la</strong><strong>biblioteca</strong> y para personas no integrantes de<strong>la</strong> bca. (usuarios y responsables políticosadministrativos)• Consist<strong>en</strong>tes. Que permitan compararactividades o resultados de <strong>la</strong> <strong>biblioteca</strong> <strong>en</strong>mom<strong>en</strong>tos difer<strong>en</strong>tes y que permitan <strong>la</strong>comparación con otras unidades30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 58


CRITERIOS DE SELECCIÓN DEINDICADORES• Seleccionados desde <strong>la</strong> perspectiva de losusuarios (cli<strong>en</strong>tes) y <strong>en</strong> función de <strong>la</strong>sexpectativas prioritarias de éstos• Referidos a un periodo de tiempo o a unacantidad de actividad• Adaptables. Los <strong>indicadores</strong> no soninamovibles, irán cambiando con <strong>la</strong>s nuevascircunstancias de <strong>la</strong> bca. y de <strong>la</strong> sociedad• Expresados de forma positiva30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 59


TallerSistema g<strong>en</strong>eral de <strong>indicadores</strong>para <strong>la</strong> <strong>biblioteca</strong> pública(1 y 2)30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 60


SERVICIOS OFERTADOS A LOSUSUARIOS• Usuarios inscritos/habitantes• Usuarios inscritos nuevos/habitantes• Visitantes/habitantes30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 61


INDICADORES RELACIONADOS CONLA OFERTA DOCUMENTAL• Fondos/Habitantes• Refer<strong>en</strong>cia/Préstamo• Composición de <strong>la</strong> colección.Porc<strong>en</strong>taje de cada una de <strong>la</strong>s áreas temáticasy/o secciones respecto al volum<strong>en</strong> total defondos30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 62


INDICADORES RELACIONADOS CONLA OFERTA DOCUMENTAL• Fluctuación del fondo.Porc<strong>en</strong>taje de increm<strong>en</strong>to o decrem<strong>en</strong>to delvolum<strong>en</strong> total de fondos <strong>en</strong> el periodo derecogida de datos (1 año)Nº de altas y Nº de bajas• Actualización de <strong>la</strong> colecciónPorc<strong>en</strong>taje de docum<strong>en</strong>tos con una antigüedadinferior a 5 años <strong>en</strong> el conjunto de <strong>la</strong> colección30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 63


INDICADORES DE RENDIMIENTOS DEFONDOS• Docum<strong>en</strong>tos prestados/habitantes• Rotación. Docum<strong>en</strong>tos prestados/fondos• Docum<strong>en</strong>tos no prestadosPorc<strong>en</strong>taje de docum<strong>en</strong>tos del fondo depréstamo que no han sido prestados <strong>en</strong> elperiodo de recogida de datos o el periodo quese elija30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 64


INDICADORES ORIENTADOS ALUSUARIO• Superficie disponible. M 2 disponibles porcada mil habitantes• Horas de servicio. Porc<strong>en</strong>taje de horas deat<strong>en</strong>ción al público que ofrece <strong>la</strong> bca. <strong>en</strong>comparación con otras y con el horario deapertura comercial• Complejidad de acceso a <strong>la</strong> bca. Nº dedocum<strong>en</strong>tos necesarios, requisitos exigidos,coste del carnet, tiempo de <strong>en</strong>trega de éste30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 65


INDICADORES de ACTIVIDADES• Habitantes/Asist<strong>en</strong>tes• Actividades/ Asist<strong>en</strong>tes30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 66


INDICADORES DE EFICIENCIA• Tiempos de proceso: Adquisiciones,Catalogación, Manipu<strong>la</strong>ción• Cuota de gastos por habitante• Disponibilidad del personal de <strong>la</strong><strong>biblioteca</strong>• Nº de actividades de formación a <strong>la</strong>sque han asistido cada miembro delpersonal <strong>en</strong> el periodo de medición30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 67


SISTEMA GENERAL DE INDICADORESLos aspectos de calidad <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong>no se contemp<strong>la</strong>n separadam<strong>en</strong>te. Nodebemos considerar a los <strong>indicadores</strong>de forma ais<strong>la</strong>da sino que se deb<strong>en</strong>re<strong>la</strong>cionar y observar desde unaperspectiva de conjunto30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 68


Encuestas y Entrevistas30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 69


EVALUACIÓN DE LA OPINIÓN DE LOSUSUARIOS<strong>La</strong> satisfacción de los usuarios se mide através de•Encuestas y <strong>en</strong>trevistas personales•Quejas y rec<strong>la</strong>maciones recibidasdurante el periodo de medición30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 70


CUESTIONARIOS• Método cualitativo de evaluación queti<strong>en</strong>e <strong>en</strong> cu<strong>en</strong>ta <strong>la</strong>s opiniones de losusuarios y no-usuarios y de lostrabajadores• Completan el análisis interno y externopara conocer <strong>la</strong>s demandas de <strong>la</strong>pob<strong>la</strong>ción y cómo valoran los serviciosque recib<strong>en</strong>30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 71


ENCUESTAS DE SATISFACCIÓN• Encuestas de satisfacción a usuariossobre los servicios de <strong>la</strong> <strong>biblioteca</strong>, eluso que hac<strong>en</strong> de ellos y <strong>otros</strong> aspectosg<strong>en</strong>erales (insta<strong>la</strong>ciones, equipami<strong>en</strong>tos,comodidad, etc.)• Entrevistas a usuarios30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 72


METODOLOGÍA1. Se id<strong>en</strong>tifican los “atributos de calidad”del servicio que el usuario ti<strong>en</strong>e <strong>en</strong>consideración a <strong>la</strong> hora de evaluar elnivel de satisfacción obt<strong>en</strong>ido <strong>en</strong> <strong>la</strong>utilización de cada servicio30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 73


ATRIBUTOS DE CALIDAD. 1• Amplitud de horarios• Acceso fácil y cómodo• Señalización adecuada• Bu<strong>en</strong> trato personal• Igualdad de trato• Limpieza• Comodidad30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 74


ATRIBUTOS DE CALIDAD. 2• Simplificación de trámites• Estética y confort• Profesionalidad• Adecuación de <strong>la</strong> colección• Actualidad de los fondos30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 75


METODOLOGÍA2. Se defin<strong>en</strong> los aspectos sobre los quese desea conocer <strong>la</strong> opinión de losusuarios30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 76


OPINIÓN DE LOS USUARIOS• Insta<strong>la</strong>ciones y equipami<strong>en</strong>tos• Colección <strong>en</strong> g<strong>en</strong>eral y secciones oáreas de <strong>la</strong> colección <strong>en</strong> particu<strong>la</strong>r• Servicios concretos: información,préstamo, formación de usuarios,servicios electrónicos• At<strong>en</strong>ción del personal de <strong>la</strong> <strong>biblioteca</strong>• Actividades30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 77


METODOLOGÍA3. E<strong>la</strong>boración de <strong>la</strong> <strong>en</strong>cuesta30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 78


CÓMO ELABORAR ENCUESTAS* Cuestionario “ad hoc” adaptado a <strong>la</strong>speculiaridades del proceso objeto de estudio* Estructura :• Muy articu<strong>la</strong>da• El cuestionario será corto• No preguntar g<strong>en</strong>eralidades. Espreferible preguntar sobre el hechoactual (incid<strong>en</strong>te crítico)• Evitar <strong>en</strong> lo posible <strong>la</strong>s preguntaspersonales30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 79


CÓMO ELABORAR ENCUESTAS•Formu<strong>la</strong>r <strong>la</strong>s preguntas deforma precisay c<strong>la</strong>ra para evitar <strong>la</strong>s interpretaciones•Evitar <strong>la</strong>s preguntas que se refieran amás de una cosa•Hacer preguntas neutras para que noinfluyan <strong>en</strong> <strong>la</strong>s respuestas•No realizar preguntas que exijan alusuario recordar hechos antiguos30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 80


CÓMO ELABORAR ENCUESTAS• <strong>La</strong>s preguntas más importantes seharán al principio• <strong>La</strong>s preguntas serán cortas• Habrá un campo de observaciones alfinal para <strong>la</strong>s suger<strong>en</strong>cias, opiniones• Será anónima para facilitar <strong>la</strong>co<strong>la</strong>boración y <strong>la</strong> sinceridad <strong>en</strong> <strong>la</strong>srespuestas30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 81


CÓMO ELABORAR ENCUESTAS• Se explicará el objeto de <strong>la</strong> <strong>en</strong>cuesta• Se acompañará de instruccionesprecisas para su cumplim<strong>en</strong>tación• Se difundirán los resultados obt<strong>en</strong>idos• Previam<strong>en</strong>te hay que asegurarse que<strong>la</strong>s preguntas se pued<strong>en</strong> responder(<strong>en</strong>cuesta piloto)30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 82


TallerE<strong>la</strong>boración de <strong>en</strong>cuestasEvaluación de <strong>la</strong> satisfacción delos usuarios sobre diversosconceptos30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 83


TallerEncuesta para <strong>la</strong> evaluacióninterna30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 84


SATISFACCIÓN DEL PERSONALEncuestas de satisfacción de <strong>la</strong>s personas quetrabajan <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> para conocer• El grado de satisfacción del personal• <strong>La</strong> organización de los procesos y lostiempos empleados <strong>en</strong> <strong>la</strong>s actividades• El modelo de dirección30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 85


ELABORACIÓN DE LA ENCUESTA. 1Cuestionario “ad hoc” adaptado a <strong>la</strong>speculiaridades del proceso objeto de estudio.Se realizan preguntas sobre:• el horario <strong>la</strong>boral• <strong>la</strong> remuneración• <strong>la</strong>s posibilidades de promoción30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 86


ELABORACIÓN DE LA ENCUESTA. 2• <strong>La</strong>s condiciones de trabajo• <strong>La</strong>s re<strong>la</strong>ciones y cooperación concompañeros, superiores y usuarios• El nivel de decisión y responsabilidad decada empleado sobre su actividad30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 87


ELABORACIÓN DE LAS ENTREVISTASMetodología• Se prepara <strong>la</strong> <strong>en</strong>trevista según eldestinatario• Se elige el <strong>en</strong>trevistador indicado segúnel objeto de <strong>la</strong> <strong>en</strong>trevista• Se explica el objeto de <strong>la</strong> <strong>en</strong>trevista30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 88


ELABORACIÓN DE LAS ENTREVISTAS• Entrevista estructurada• Preguntas c<strong>la</strong>ras, que no induzcanrespuestas• Una so<strong>la</strong> pregunta cada vez• Los resultados se difundirán30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 89


CUESTIONARIOSDificultades• Coste alto de <strong>la</strong> contratación de empresaspara <strong>la</strong> selección de preguntas, de muestras yel procesami<strong>en</strong>to de datosSolución• E<strong>la</strong>boración de modelos de cuestionarios.Ahorran gastos y esfuerzos y permit<strong>en</strong> <strong>la</strong>comparación <strong>en</strong>tre <strong>biblioteca</strong>s30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 90


TallerDefinición de <strong>indicadores</strong>aplicados a objetivos concretos30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 91


TallerE<strong>la</strong>boración de <strong>la</strong> carta deservicios de <strong>la</strong> <strong>biblioteca</strong>pública30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 92


BIBLIOGRAFÍA• C<strong>la</strong>ves para el éxito: <strong>indicadores</strong> de r<strong>en</strong>dimi<strong>en</strong>topara <strong>biblioteca</strong>s públicas. (1995). Barcelona, Eumo.• Fu<strong>en</strong>tes Romero, Juan José. (1999) Evaluación de<strong>biblioteca</strong>s y c<strong>en</strong>tros de docum<strong>en</strong>tación einformación. Oviedo, Trea.30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 93


RECURSOS ELECTRÓNICOSFundación Berstelmann. http://www.fundacionbertelsmann.es[consulta: 21 marzo, 2003]Pautas Pulman. Los nuevos servicios de <strong>la</strong> <strong>biblioteca</strong>pública <strong>en</strong> <strong>la</strong> sociedad de <strong>la</strong> información [consulta:21 marzo 2003]Xarxa de biblioteques publiques de <strong>la</strong> Diputaciò deBarcelona. [consulta:21 marzo 2003]30/9/03 <strong>La</strong> evaluación <strong>en</strong> <strong>la</strong> <strong>biblioteca</strong> pública 94

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!