Monitoreo y Evaluacin deProgramas y Proyectos

Ing. Carlos Azurin Gonzales

Tema 2: Indicadores de Desempeo

Qu caractersticas deben tener los indicadores?Indicadores S.M.A.R.T

Simples o especficos. El indicador debe ser especfico ydirectamente interpretable a fin de facilitar su uso por la comunidadde usuarios.

Medibles: El indicador debe ser estadsticamente verificable,replicable y comparable.

Relevantes: La informacin contenida en el indicador debe reflejarefectivamente lo que se busca.

Factibles: El indicador debe definirse en relacin a metas factiblescuyo avance pueda medirse con regularidad.

Temporales: El indicador debe reflejar en un horizonte temporaldeterminado el avance del logro de las metas.

Indicadores segn dimensiones de desempeo

Eficiencia: Relacin entre insumos y produccin. Ej: Costopor kilmetro de carretera construido.

Eficacia: Grado de cumplimiento de los objetivos.Porcentaje de alumnos capacitados que consiguen unempleo al finalizar el programa.

Calidad: Capacidad de responder a las necesidades de lapoblacin objetivo de acuerdo a estndares de los bieneso servicios entregados. Ej: Porcentaje de docentes quereciben acompaamiento pedaggico de acuerdo alprotocolo, tiempo de espera promedio en oficinas deatencin al pblico.

Economa: Capacidad de administrar recursos financieros.Ej: Ahorros realizados en contratos y propuestas a partirdel uso de tcnicas de innovacin de compras

Indicadores segn mbito de control

Producto: cuantificacin o caracterizacin de bienes / serviciosproducidos / entregados.

Resultado especfico: miden el cambios resultantes de la provisin debienes o servicios en el comportamiento, estado o actitud de lapoblacin objetivo.

Resultado final: miden el grado de mejora en las condiciones de vida dela poblacin que son el objetivo de las intervenciones.

5INSUMOS

PRODUCTOS

ESPECIFICOS

FINALES

Eficacia

Eficiencia

Economa

Calidad

Qu medir?: mbitos de control y dimensionesde desempeo

6Qu dimensiones medir?: Dimensin poretapas

Fsicos

Financieros

RRHH

Bienes y servicios

Canal de regado

Carretera asfaltada

Servicio educativo

Consultas

Cobertura de calidad

Ampliacin fronteraagrcola

Reduccin de lapobreza

Mejora de lacompetitividad

Insumos Productos ResultadosEspecficosResultadosFinales

Eficiencia

Calidad

Eficacia

7Qu es importante medir?

Las dimensiones que deben ser evaluadas se encuentran relacionadas alquehacer de la institucin, con nfasis en lo que es relevante para suusuario / cliente

Instituciones / reasadministrativas

Instituciones / reasoperativas

PreferentementeProcesos (Actividades)

PreferentementeDesempeo (Productos,Resultados)

Definicin de Indicadores: Pasos

1. Identificacin deresultados/productos

en la matriz de ML

2. Establecer qu sedesea medir como

desempeo

4. Establecer losreferentes

comparativos ymetodologas.

5. Construirinstrumentos de

medicin / generarfuentes de informacin

7. Validar elinstrumento y laconstruccin de

indicadores

6. Recolectar datos

8. Analizar einterpretar los

resultados indicadores

9. Comunicar /reportar

Cmo definir indicadores de Resultados y deProductos?

Cmo s si lo previsto por laintervencin se est dando

o se ha alcanzado?

Cmo s si el productoha sido entregado o el servicio ha

sido prestado otiene las caractersticas deseadas?

Indicadorde resultado

Indicadorde producto

Establecimiento de estndares de medicin

Norma o Medida Profesional. Ej: estudios y entrenamiento requerido paradesempearse como obstetra.

Norma o Nivel Tcnico (estndar tcnico): Norma o nivel aceptabletcnicamente. Ej: protocolo de Control de Crecimiento y Desarrollo (CRED),protocolo de acompaamiento pedaggico, norma para construccin depuentes.

Mejores Prcticas: Las mejores prcticas son derivadas de leccionesaprendidas de organizaciones de excelencia o de proyectos. Por ejemplo,las mejores prcticas en el mantenimiento de proyectos (subcontratacinrutinaria a microempresas), uso de ratios de relacin alumno/maestro,entre otros.

Fuentes de informacin

Para la generacin de indicadores se debe considerar: La identificacin de la informacin pertinente y su disponibilidad. Los recursos necesarios para construir bases de datos. Los mtodos de recojo de la informacin (muestras/censos, encuestas de hogares y

establecimientos /registros administrativos, periodicidad). El uso de sistemas de informacin para el control de gestin (datos de proveedores, entre otros)

Medios de Verificacin

Los medios de verificacin son los elementos materiales yverificables que respaldan a los indicadores, de modo quemediante ellos se pueda dar cuenta del cumplimiento de estos.

Caractersticas:

Confiable

Accesible

Consistente con otras fuentes de informacin.

Oficial o institucional.

Mtodo de recoleccin de datos transparente

13

Subestimacin de metas (hacer seguimiento a indicadores implica rendir cuentas) Debilidad (en toma de decisiones) de equipos tcnicos para establecer indicadores y valores a

alcanzar. Dificultades para el establecimiento de responsabilidades intra-institucionales sobre el

cumplimiento e incluso seguimiento y reporte de los valores a alcanzar. Cmo medir resultados deuna gestin institucional que dependen de la gestin de varias instituciones?

Descoordinaciones intra-institucionales para la validacin de los indicadores y su difusin alinterior de las instituciones.

Debilidad de su articulacin con los esquemas de planificacin y programacin estratgica delgasto. Cmo formular objetivos estratgicos y desagregar las metas?

Qu unidades o reas deben generar indicadores? Cmo construir las formulas? Disponibilidad de datos histricos. Dificultad para medir insumos y productos por falta de sistemas contables financieros. No se percibe el valor agregado de elaborar indicadores. Realizar los indicadores se transforma en

una carga burocrtica y no se estimula el inters por la evaluacin.

Lecciones aprendidas sobre la base de experiencias previas en laelaboracin y uso de indicadores

14

Ejemplos: Indicadores de eficacia

Cobertura, focalizacin, capacidad para cubrir demanda actual

Cantidad de beneficiarios / Universo total de beneficiarios

Cantidad de supervisiones realizadas / Universo total por supervisar

Porcentaje de egresos exitosos de programas de capacitacin

Porcentaje de alumnos que desertan o no terminan las capacitaciones

Porcentaje de alumnos empleados finalizados los cursos de capacitacin

Porcentaje de reincidencia de infractores

Conflictos colectivos solucionados / Total de conflictos colectivos planteados

Incremento de puestos de trabajo producto de un programa laboral especfico

15

Ejemplos: Indicadores de eficiencia

Costo unitario de produccin o producto/costo promedio

Costo de un servicio en relacin al total de usuarios

Costo por Km de carretera construido / mantenido

Costo por inspeccin en relacin al total de inspeccionesrealizadas

Cantidad de fiscalizaciones / Cantidad total de supervisores

Costo total de programa / Total de beneficiarios

Cantidad de das para la emisin de certificados

Rapidez en la atencin a los usuarios

16

Ejemplos: Indicadores de economa

Capacidad de autofinanciamiento, ejecutado en relacin a loprogramado, capacidad para recuperar pasivos.

Gastos administrativos / Gastos totales

Tasa de recuperacin de prestamos (porcentaje de pasivos)

Porcentaje de recuperacin del costo de los servicios

Ingresos por venta de servicios / gasto total de produccin de losservicios

Ahorros realizados en compras y contratos en base al uso demejoras en los procesos de adquisiciones.

Aumento de costos por errores en procesos de contratos y/ocompras

17

Ejemplos: Indicadores de calidad

Oportunidad, Accesibilidad, Precisin, Percepcin de usuarios

Intervenciones atrasadas / Total de intervenciones

Reportes entregados en relacin a plazos establecidos

Horas de atencin fuera de las horas de trabajo

Localidades cubiertas por servicios mviles (transporte, telecomunicaciones)

Usuarios satisfechos (servicio, atencin) / Total de usuarios

Porcentaje de aprobacin de talleres de trabajo por los participantes

Porcentaje de contratos con errores encontrados por auditorias externas

Porcentaje de contratos cancelados por problemas

Errores efectivos en relacin al total de errores programados

18

Ejemplo: Indicadores de un proyecto de formacin laboral

Insumo

Producto

Resultado

Especfico

ResultadoFinal

Eficacia Eficiencia Economa Calidad

Costo por taller /Nmero departicipantes

Gastos ejecutados /Gastos programados

Aumento deproductividad

Reduccin deaccidentes laboralesen trabajadoresparticipantes

Porcentaje detrabajadores que

aprueban los talleres

Instalacin de equipos enplazos programados

Participantesasistentes /participantesinscritos

EMPECEMOS A CONOCER RESULTA

Est disponible en la web de Seguimiento de la DGPP del MEF o atravs de: http://apps5.mineco.gob.pe/resulta/index.aspx