www.coneval.gob.mx

Evaluación de la Política y

Programas de Desarrollo Social

en México

Mtra. Thania Paola de la Garza Navarrete

Noviembre 2011

Estructura de la sesión

¿Para que Evaluar?

Lineamientos Generales para la Evaluación de Programas

Tipos de Evaluación

Mecanismo de Seguimiento a los Aspectos Susceptibles de Mejora

1

2

3

4

¿Para qué evaluar?

Mejora de políticas y programas públicos

Toma de mejores

decisiones

Rendición de cuentas

Planeación de la Política Social: Evaluación de

Políticas y Programas

Institucionalización de la evalaución:

Lineamientos de Evaluación

Regula la evaluación de los programas federales y la elaboración de las

matrices de indicadores, sistemas de monitoreo y objetivos estratégicos.

Evaluación:

Tipos de evaluaciones

Elaboración de términos de referencia

Seguimiento del resultado de las evaluaciones

Organización y contratación de las evaluaciones y

Difusión de las evaluaciones

Elaboración del Programa Anual de Evaluación:

CONEVAL, SHCP y SFP

Resultados:

Medir si un programa

resuelve

el (los) problema(s)

por

los que se creó

Seguimiento de Recomendaciones

Evaluación Específica de Desempeño

(Valoración de la información del SED)

Planeación

Programas Sectoriales: contribuyen con el

Plan Nacional de Desarrollo

Programas presupuestarios: contribuyen

con los Programas Sectoriales

Programas Presupuestarios con

Indicadores adecuados en la Matriz de

Indicadores

Evaluación

Programa Anual de Evaluación

Evaluación de Consistencia y Resultados

Evaluación de Políticas

Evaluación de Impacto

Evaluación de Procesos

Progresividad y Cobertura

Diseño del Sistema de M&E

Tipos de evaluación

Diseño

Consistencia y Resultados

Procesos

Impacto

Consistencia y lógica

interna de los programas

Diagnóstico de la

capacidad institucional

para alcanzar resultados

Análisis de los procesos

operativos y su

contribución al propósito

Medir los efectos netos

del programa

Indicadores Pertinencia y alcance de

los indicadores de un

programa

Mejora de Programas

Toma de decisiones

Estratégicas Valoración de las

políticas y estrategias

de desarrollo social

Específicas

de

Desempeño

Valoración sintética de

la información del

programa en el SED

Tipos de evaluación

Toma de decisiones Rendición de

Cuentas y Transparencia

• Las demás Evaluaciones

• Documentos de Trabajo

• Seguimiento a Aspectos

http://www.coneval.gob.mx/cmsconeval/rw/pages/evaluacion/principales_recomendaciones_eval_2009_2010/index.es.do;jsessionid=e1a48043b850289ddd

76d0562114a5c27c2c2a3357af6cea7395a54d233ed603.e34QaN4LaxeOa40Nbx10

Link Documentos de Trabajo:

¿Cómo utilizar la información

de las evaluaciones?

Características:

1.Válida: para los evaluados y para los que

las utilizarán

2.Amigable: sintética y accesible, lenguaje

sencillo

3.Homogénea: misma información para

comparar programas

4.Oportuna: la información debe estar

disponible para la toma de decisiones

Evaluación Específica de Desempeño

Tipo de estudio: Valoración sintética de la información del programa en el SED

Tipo de programas: Todos los programas con reglas de operación modalidad “S “, “U” y otros

programas sociales que aparezcan en el PAE

Objetivo: Contar con una valoración del desempeño de los Programas Federales en su

ejercicio fiscal 2010, con base en la información contenida en el SED y la

proporcionada por el CONEVAL, para contribuir a la toma de decisiones.

Dirigidos a: Actores dentro de las dependencias, las unidades de evaluación y el gobierno

federal que tomen decisiones a nivel gerencial

Resultados: • Avance de Indicadores

• Hallazgos de fin y propósito

• Valoración

Productos: • Informe Completo y Ejecutivo

• Ficha Narrativa por programa

• Evaluación Integral del Desempeño de los programas evaluados

Plazo aproximado

de ejecución

3 meses (Abril-Junio)

Aplicación Programas alineados con alguno de los derechos sociales o alguna de las

dimensiones de pobreza:

o Cobertura

o Pob. potencial, objetivo y atendida

- Informes de Cobertura

- Evaluaciones Externas Cobertura

o Componentes

o Actividades

o Presupuesto

- Indicadores de Servicios

y Gestión - Informes Trimestrales

Productos

- Indicadores de Resultados

- Evaluaciones Externas

de Resultados Resultados

o Fin

o Propósito

o Alineación

o Aspectos

susceptibles

de mejora

- Documento de Trabajo - Documento Institucional Seguimiento - Avances del Seguimiento

SED

EED

Informe

Esquema de la EED 2010-2011

SIEED

EED- Datos Descriptivos

0%

10%

20%

30%

40%

50%

60%

<80 80-120 >120 SD

Porcentaje de avance respecto de la meta

2008

2009

2010

0%

20%

40%

60%

80%

100%

2008-2009 2009-2010 2010-2011

Evaluación Específica de Desempeño (EED)

PP

PO

PA

Definición de la Población

Potencial, Objetivo y

Atendida

Indicadores de Resultados

EED 2008-2009 2009-2010 2010-2011

Porcentaje de programas sujetos al Mecanismo 77.9% 88.2% 94.0%

Número de Aspectos definidos por los programas 413 397 309

Número de Aspectos promedio definidos 4.0 3.5 2.5

Promedio de avance en los Aspectos de Mejora NA 75.4% 87.4%

Seguimiento a Aspectos Susceptibles de Mejora

Nivel de desagregación EED

2008-2009 2009-2010 2010-2011

Entidades 86 65.65% 110 86.61% 131 98.50%

Municipios 45 34.35% 58 45.67% 77 57.89%

Localidades 20 15.27% 33 25.98% 47 35.34%

Total programas evaluados 131 100.00% 127 100.00% 133 100.00%

Nivel de Desagregación de la PA

EED- Datos Descriptivos

• Evaluaciones que brindan un análisis general de

temáticas integradas por programas que atienden una

problemática común y permiten interpretar los

resultados en un contexto más amplio.

19 Evaluaciones Integrales 2009-2010

21 Evaluaciones Integrales 2010-2011

Evaluaciones Integrales

Evaluaciones Integrales

•El hacinamiento (65.5%), la carencia de

electrificación (54.4%) y de sanitario (64.1%)

en viviendas se concentra en el medio urbano.

•Las necesidades de agua entubada (63.4%),

drenaje (72.6%) y viviendas con piso de tierra

(62.3%) se concentran en el medio rural.

•Existen varios programas para atender

problemáticas similares; sin embargo, se

presentan situaciones para grupos

diferenciados de la población en las que

intervienen diversos actores sociales y se

requieren variados financiamientos y

soluciones habitacionales y de servicios.

•Los programas cubren un total de 4 millones

de hogares atendidos.

Vivienda e Infraestructura

•Los programas Atención a Personas con

Discapacidad, Prestación de Servicios e

IMSS-Oportunidades carecen de una

definición precisa de la población potencial,

objetivo y atendida.

•El IMSS cuenta con sistemas de información

que permiten la generación de datos

actualizados, pero existe una insuficiencia de

sistemas de información homogéneos entre

las instituciones (IMSS, ISSSTE, SALUD, DIF)

es una limitante para compartir la información

entre programas.

Atención Médica

Hallazgos por temática

Valoración sintética de los resultados, hallazgos

relevantes, avances en indicadores, cobertura,

fortalezas y retos de cada programa con base

en la Evaluaciones Específicas de Desempeño

2010-2011

Fichas Narrativas (FN)

1 sola página por programa

133 Fichas Narrativas

FN

Objetivo

Los informes finales de las evaluaciones y las bases de datos están

disponible en la página del CONEVAL:

www.coneval.gob.mx

> Evaluación y Monitoreo de Programas Sociales

> Evaluaciones de Programas Federales

> Específicas de Desempeño

Año # Programas

EED 2008-2009 131

EED 2009-2010 127

EED 2010-2011 133

EED

Información General

EED Equipos

Evaluadores

Dependencias y

Entidades Federales

Evaluaciones

a Programas Otros Actores

2008-2009 18 15 131 SHCP, SFP, CONEVAL

2009-2010 19 14 127 SHCP, CONEVAL

2010-2011 21 15 133 SHCP, SFP, CONEVAL

Actores involucrados en la EED

Seguimiento a Aspectos Susceptibles

de Mejora

EED 2008-2009 2009-2010 2010-2011

Porcentaje de programas sujetos al Mecanismo 77.9% 88.2% 94.0%

Número de Aspectos definidos por los programas 413 397 309

Número de Aspectos promedio definidos por los

programas 4.0 3.5 2.5

Promedio de avance en los Aspectos de Mejora NA 75.4% 87.4%

Mecanismo para el seguimiento a los

Aspectos Susceptibles de Mejora

1. UE y UR; otras

Selección de los

aspectos

susceptibles de

mejora

2. UE y UR; otras U

Clasificación de los

aspectos susceptibles

de mejora

3. UE y UR; otras U

Formulación de

instrumentos

susceptibles de mejora

4. Dependencias (UE)

Difusión de instrumentos

Criterios de selección:

• Claridad

• Relevancia

• Justificación

• Factibilidad

Nivel de prioridad:

• Alta

• Media

• Baja

Clasificación de Aspectos:

• Específicos

• Institucionales

• Interinstitucionales

• Intergubernamentales

Mecanismo para el seguimiento de los Aspectos

Susceptibles de Mejora

Tipo de Aspecto:

• Específico

• Institucional

• Social

• Uso efectivo de los hallazgos de las evaluaciones para la mejora de los

programas y políticas.

• Esquema de incentivos

• Mediante este mecanismo las dependencias se comprometen a realizar

acciones concretas para mejorar sus programas.

• Evaluaciones como factor de cambio de la política pública.

SEPSED

ESOLSHC

PSalud SE

SEMARNAT

SRACONACYT

STPS IMSSSAGARP

A

Intergubernamentales 4 4 0 36 0 0 0 0 0 0 0

Interinstitucionales 3 9 4 5 3 0 0 0 1 0 0

Institucionales 22 124 45 10 0 0 0 4 4 0 1

Especificos 274 92 100 17 61 36 35 10 9 11 6

0

50

100

150

200

250

300

350

Nú

me

ro d

e A

SM

No. de programas que

participaron en el Mecanismo

Año Programas

2009 91

2010 150

Seguimiento a recomendaciones de

evaluaciones externas

http://www.coneval.gob.mx