01_conceptos.pdf

FACULTAD DE CIENCIAS DE LA SALUD ESCUELA DE SALUD COMUNIATRIA

Escuela Salud Comunitaria. Facultad de Ciencias de la Salud. Material pedaggico elaborado por el equipo docente de la Escuela de Salud Comunitaria.

CONCEPTOS Y CARACTERSTICAS BSICAS

DE LA EVALUACIN SOCIAL DE PROYECTOS.

Material pedaggico para ser utilizado en la

asignatura de Intervencin Comunitaria.

APUNTES ELABORADOS POR EQUIPO

DOCENTE

ESCUELA DE SALUD COMUNITARIA

FACULTAD DE CIENCIAS DE LA SALUD



CONCEPTOS Y CARACTERSTICAS BSICAS DE LA EVALUACIN SOCIAL DE PROYECTOS.

Material pedaggico para ser utilizado en la asignatura de Intervencin Comunitaria.

1. Definicin de Evaluacin.

La evaluacin consiste en hacer una apreciacin tan sistemtica y objetiva como sea

posible sobre un proyecto por realizarse, en curso o acabado, un programa o un conjunto

de lneas de accin, su concepcin, su realizacin y sus resultados. Se trata de determinar

la pertinencia de sus objetivos y su grado de realizacin, la eficiencia en cuanto a la accin

social, la eficacia, el impacto y la viabilidad. Una evaluacin debe proporcionar unas

informaciones crebles y tiles, que permitan integrar las enseanzas sacadas en los

mecanismos de elaboracin de las decisiones.

2. Caractersticas y Funciones de la Evaluacin.

La evaluacin puede definirse como una herramienta sistemtica que, en base a unos

criterios y tcnicas, mide, analiza y valora diseos, procesos y resultados con el fin de

generar conocimiento til para la toma de decisiones, la retroalimentacin, la mejora de la

gestin y el cumplimiento de objetivos deseados.

La evaluacin, sirve tambin de marco de referencia para la formulacin de un programa

o proyecto, permitiendo identificar, medir y valorar los costos y el impacto (o los

beneficios) del mismo, as como las relaciones existentes entre ambos.

Las principales caractersticas de la evaluacin son:

Practicidad: La evaluacin ha de servir para la mejora de la intervencin y debe ser

concebida hacia la accin.

Sistematicidad: Toda evaluacin ha de recoger de modo sistemtico la informacin

pertinente para la valoracin de los criterios de evaluacin.

Ajuste a los plazos temporales: La evaluacin tiene que responder a los plazos

temporales acordados con el fin de que pueda contribuir al aprendizaje y la mejora de

la intervencin.

La evaluacin se centra en el anlisis de polticas, planes, programas y proyectos;

nunca de personas.



Emisin de juicios de valor: La evaluacin exige el anlisis valorativo de los

componentes estudiados.

Realizacin antes, durante o con posterioridad a la ejecucin: Se trata de una actividad

que puede llevarse a cabo en las distintas fases del ciclo de las intervenciones.

Variabilidad del objeto de evaluacin: La evaluacin puede estar referida al diseo de

una actividad, a los procesos de ejecucin o a sus resultados y efectos, previstos o no

previstos, priorizando uno u otro enfoque segn la finalidad del trabajo.

Criterios de evaluacin: En la evaluacin se revisarn la eficacia, la eficiencia, la

pertinencia, el impacto y la viabilidad entre otros componentes.

En este sentido, tres son las principales funciones de la evaluacin:

La retroalimentacin o mejora (improvement) de los proyectos o acciones

ejecutadas o en ejecucin,

El aprovechamiento de las experiencias del pasado para actividades futuras

(enlightenment), y

La rendicin de cuentas (accountability) hacia los financiadores, la opinin pblica

y todos aquellos implicados en los procesos de accin social.

3. Tipos de Evaluacin.

Existen distintos tipos de evaluacin segn el foco de atencin o naturaleza de la

intervencin que se desarrolla. La literatura identifica al menos tres grandes tipos: la

financiera, la econmica y la social.

En el mbito social, a su vez, se han venido desarrollando diversas tipologas de

evaluacin que atienden a los momentos en los que se lleva a cabo; a su naturaleza y a las

caractersticas de aquello que se persigue analizar; a los actores sociales que las realizan y

a los procedimientos prioritarios que se utilizan.

3.1. Segn la temporalidad o momento.

Existen tres tipos de evaluacin segn el momento que se realiza:

3.1.1. La evaluacin ex-ante.

La evaluacin ex ante, tambin llamada evaluacin previa o estudio de viabilidad, tiene

por finalidad esencial la de proporcionar informacin significativa para tomar la



correspondiente decisin en torno a si el proyecto debe o no ejecutarse; o bien cul es el

proyecto ms adecuado para el apoyo y financiacin (elegir racionalmente entre

proyectos alternativos); o bien qu modificaciones o ajustes deben introducirse en

determinada formulacin antes de su ejecucin.

Se realiza antes de la inversin y/o la implementacin. Ella permite estimar tanto los

costos como el impacto (o beneficios) y as adoptar la decisin (cualitativa) de

implementar o no el proyecto. A partir de ella resulta posible priorizar distintos proyectos

e identificar la alternativa ptima para alcanzar los objetivos de impacto perseguidos.

3.1.2. La evaluacin durante o peridica. (Seguimiento y monitoreo).

En este tipo de evaluacin se revisa el avance del proyecto o el proceso de

implementacin de las actividades programadas. Permite tomar decisiones de ajuste o

reorientacin del proyecto con el fin de cumplir a cabalidad con los objetivos propuestos.

Tiene por finalidad extraer informacin, reflexiones y conclusiones sobre la marcha y

desempeo del proyecto. Ofrece apreciaciones sobre la continuidad del proyecto con

base en los resultados del mismo. Si la decisin es continuar, habr de valorarse si

procede mantener la formulacin original o deben introducirse modificaciones para

mejorar la calidad de la intervencin. Este tipo de evaluacin se realiza sobre la accin

social.

3.1.3. La evaluacin ex-post se lleva a cabo una vez finalizado el proyecto para medir los

resultados o despus de aos de realizado ste para medir el impacto.

La metodologa de trabajo analiza los componentes clsicos de la evaluacin (eficacia,

eficiencia, pertinencia, impactos, viabilidad, replicabilidad) as como aquellos efectos no

previstos o no deseados que se produjeron.

En este tipo de evaluacin, se estudia el funcionamiento del proyecto y se emite un

informe final cuyos contenidos permiten conocer la calidad de la intervencin efectuada

as como mejorar la planificacin de futuros proyectos similares.

La evaluacin de un proyecto finalizado debe contribuir a reforzar la toma de decisiones

utilizando los correspondientes aprendizajes en experiencias posteriores.



3.2. Segn el objeto.

3.2.1. Evaluacin de resultados.

Evaluar en base a resultados significa atender a los productos concretos que el proyecto

entrega; supone valorar, por tanto, la adecuacin y calidad de los bienes y servicios que

genera el proyecto. Este anlisis implica un correcto diseo en donde los resultados hayan

sido definidos de modo operacional a travs de metas y/o indicadores, para evaluar la

eficacia, y en donde los recursos tengan una clara expresin en el presupuesto, para

evaluar la eficiencia.

3.2.2. Evaluacin de Proceso.

Este tipo de evaluacin est asociada al monitoreo y seguimiento del proyecto, es de

carcter ms bien interno y est dirigido a chequear el nivel de cumplimiento de las

actividades, las coberturas alcanzadas y el grado de adecuacin de la metodologa

diseada.

3.2.3. Evaluacin de impacto.

Evaluar el impacto del proyecto implica revisar si el proyecto contribuy efectivamente a

mejorar la situacin de las personas beneficiarias y si la lgica interna del proyecto

(recursos, actividades, resultados, objetivos) se ha verificado en la prctica. Este tipo de

evaluacin en general se realiza con los propios beneficiarios del proyecto y se basa en la

interpretacin o valoracin que stos hacen del proyecto una vez finalizado.

3.4 Segn los agentes o actores involucrados.

Se pueden distinguir cuatro tipos de evaluaciones en funcin del sujeto que las realiza:

externa, interna y mixta, a las que hay que aadir las evaluaciones participativas que han

adquirido en los ltimos tiempos una gran importancia.

3.4.1. Evaluacin Externa. Son evaluaciones realizadas por especialistas ajenos a la

gestin del proyecto. Tiende a asociarse con la evaluacin final o de impacto. Las

principales ventajas que habitualmente se sealan en esta modalidad de evaluacin de los

proyectos sociales son su presumible objetividad, su menor complacencia y su carcter

independiente. De igual modo, se considera que los expertos externos pueden poseer una

mayor capacidad tcnica en el manejo de los instrumentos evaluativos y un conocimiento



ms amplio de otras intervenciones de caractersticas relativamente parecidas a la

considerada.

3.4.2. Evaluacin Interna La evaluacin interna es aquella realizada por los responsables

de la gestin (y ejecucin) del proyecto. Suele asociarse con la evaluacin simultnea y,

como ya se dijo, supone una suerte de continuidad con la fase de seguimiento. La

evaluacin interna tiende a constituir un proceso de anlisis mucho ms apegado a la

realidad y vinculado a las debilidades y fortalezas detectadas en los distintos colectivos

sociales, si bien se corre el riesgo de una excesiva autoafirmacin positiva que bloquee la

identificacin de los verdaderos obstculos y problemas. No obstante ello, los procesos de

evaluacin interna resultan mucho ms baratos que los externos.

3.4.3. Evaluacin Mixta. Es una combinacin de las dos anteriores. Trata de articular

ambas perspectivas, optimizando las ventajas de cada una de ellas y minimizando los

eventuales inconvenientes. Se realiza dividiendo la responsabilidad de la evaluacin

peridica en la instancia ejecutora (responsable asimismo del seguimiento) y en un agente

externo la realizacin de la evaluacin final.

3.4.4. Evaluacin Participativa. Es una modalidad de evaluacin interna pero, en este

caso, la responsabilidad de la misma no recae slo en la instancia ejecutora sino que las

propias personas beneficiarias constituyen el agente principal en la recogida de datos, en

su interpretacin e, incluso, en la proyeccin de recomendaciones para el futuro. La

evaluacin participativa se asocia a metodologas del tipo investigacin-accin, en donde

los beneficios del proyecto no estn constituidos slo por la consecucin de sus resultados

y por el logro de sus objetivos sino, tambin y bsicamente, por los elementos de continuo

aprendizaje que se desencadenan durante el mismo proceso de ejecucin. Es decir, se

parte de la base de que el desarrollo del proyecto y la participacin activa de las personas

beneficiarias en todas sus fases, constituyen per se una de las principales finalidades de

la intervencin.

3.5 Por los Instrumentos.

Esta clasificacin se basa en la distincin entre procedimientos cualitativos y cuantitativos.

Esta orientacin se concreta segn el tipo de datos que cada instrumento recoge y

procesa de forma preferente.



3.5.1. Instrumentos Cuantitativos. Se pueden diferenciar dos grandes campos a este

respecto:

I. El primero, ligado al mundo de las ciencias econmicas, pretende determinar criterios

de rentabilidad de los proyectos para conocer la conveniencia de realizar una accin social

o, en su caso, examinar la rentabilidad econmica de un proyecto futuro, en curso o

finalizado. El mtodo tipo es el Anlisis Coste Beneficio (ACB) que compara los flujos de

bienes y servicios producidos por el proyecto con sus respectivos costes, expresando todo

ello en unidades monetarias. Una modalidad derivada, entre otras posibles, es el Anlisis

Coste Efectividad (ACE) en donde la anterior comparacin se realiza sin que ambas

dimensiones, costes y beneficios, estn expresadas en la misma unidad.

II. El segundo, asociado al mbito de las encuestas formales, que recogen informacin

precisa y estandarizada a travs de cuestionarios aplicados a determinadas muestras

representativas. Su utilidad es incontestable para el tratamiento de datos cuando se

necesita realizar generalizaciones o bien verificar hiptesis. Sin embargo, su alto coste y

grado de sofisticacin en la recogida de informacin aconsejan su uso slo cuando las

condiciones del proyecto as lo exijan y/o lo permitan. Existen otros mtodos,

tradicionales en este mbito, tales como el amplio campo de las mediciones directas,

apropiadas para comparar dimensiones fsicas, que pueden aplicarse asociadas a otras

tcnicas.

Finalmente, la evaluacin por indicadores constituye la estrategia evaluativa central del

enfoque del marco lgico (EML), en donde dichos indicadores deben ser cuantificables y

verificables, a travs de tcnicas cuantitativas como las sealadas y/o procedimientos

cualitativos como los que vienen a continuacin.

3.5.2. Instrumentos Cualitativos. Dentro de la diversidad de tcnicas e instrumentos

posibles existentes, podemos destacar al menos dos: la observacin y la entrevista.

La observacin es una tcnica tradicional de carcter de apreciacin subjetiva que puede

ser directa o participante. En la observacin participante, el evaluador est presente

durante el proceso de ejecucin, y la observacin directa, se realiza en momentos

puntuales de la vida del proyecto. Ambas tienden a ser complementadas con otras

tcnicas y soportes, listas de comprobacin, cuestionarios, etc., que reducen los

inevitables sesgos de los observadores y refuerzan las posibilidades de establecer

comparaciones.



La Entrevista es un instrumento bsico en toda evaluacin y permite, a diferencia de la

encuesta formal, introducir un alto grado de flexibilidad en la recogida de informacin e

incorporar, en el curso de los trabajos, elementos sobrevenidos que no se previeron

inicialmente y que en ocasiones constituyen datos esenciales para determinadas

interpretaciones. Algunas modalidades son, por ejemplo, la entrevista a informantes

clave, en donde un grupo de individuos relevantes y con un importante conocimiento de

la situacin opinan, de forma separada, sobre temas que no les implican directamente;

una variante es la tcnica Delphi que utiliza una secuencia de cuestionarios enviados y

recibidos por correo. La entrevista a grupos focales aplica colectivamente, de forma

flexible y con un desglose temtico, un cuestionario comn a un pequeo grupo

homogneo. El foro comunitario es una reunin abierta a personas representativas de la

comunidad, en donde se establece una discusin ordenada basada en un guin de trabajo

desagregado por componentes; este mecanismo resulta muy til como momento ltimo

de un proceso de evaluacin en donde se contrasta la informacin recabada por otras vas

con la opinin de los participantes en un taller de evaluacin.

3.6. Por su Naturaleza, su Escala y sus Niveles

Finalmente podemos distinguir otro tipo de clasificacin. Segn la naturaleza, la

evaluacin puede ser descriptiva o explicativa. Segn la escala y caractersticas de los

proyectos, puede hablarse de proyectos grandes, en los que resulta ms adecuada una

evaluacin basada en la utilizacin de tcnicas cuantitativas y de proyectos pequeos,

cuyos formatos se adaptan mejor a procedimientos cualitativos y de bajo coste.

4. Diseos metodolgicos: cuantitativo, cualitativo y participativo

El diseo metodolgico constituye un punto central del proceso de evaluacin. Al tiempo

que se definen las diferentes necesidades informativas y se seleccionan los diferentes

criterios de evaluacin y los indicadores, hay que definir cmo se ha de recopilar y analizar

la informacin requerida. Se trata no slo de seleccionar una serie de tcnicas de recogida

de informacin y sus correspondientes tipos de anlisis, sino de definir el enfoque

metodolgico de la evaluacin. En el siguiente cuadro se recogen las principales

caractersticas de los enfoques mencionados.



Esta evolucin en los diseos metodolgicos ha provocado que la metodologa de

evaluacin de impactos haya evolucionado hacia un concepto ms amplio, en el que los

aspectos cualitativos cobran cada vez mayor relevancia y las tcnicas cuantitativas tienden

a integrarse como un elemento ms del proceso evaluador. Lo cierto es que parece

aconsejable combinar la utilizacin de mtodos cuantitativos con cualitativos, ya que

estos ltimos aportan dinamismo y variedad de perspectivas, carentes en los primeros.

Finalmente y a modo de sntesis podemos apreciar que existe una diversidad de maneras

y metodologas para realizar las evaluaciones. No obstante ello existen criterios que

generalmente todas las evaluaciones consideran y que tienen que ver el tiempo, los costos

o recursos disponibles, los agentes involucrados y el enfoque metodolgico.



Bibliografa utilizada.

Fontaine R., E. (2008) Evaluacin social de proyectos. 13 Edicin. Pearson

Educacin de Mxico S.A. de C.V.

Perea A., O. (2004) Gua de Evaluacin de Programas y Proyectos Sociales.

Plataforma de ONG de Accin Social. Madrid

Cohen, F. & Martnez, R. Manual de Formulacin Evaluacin y monitoreo de

Proyectos. Disponible en

http://www.risalc.org/portal/publicaciones/ficha/?id=242

01_conceptos.pdf

Documents

Transcript of 01_conceptos.pdf