Post on 03-Nov-2018
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Agenda
2
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Profesor Leigh Linden
Leigh Linden es Profesor en el
Departamento de Economía de la University
of Texas at Austin. Su investigación se
centra en la capacidad de los servicios
sociales para mejorar el bienestar de los
niños, especialmente en áreas
empobrecidas. En este sentido, el Profesor
Linden ha analizado los procesos de
producción educativa y los problemas de
toma de decisiones en el núcleo familiar que
determinan la asignación de oportunidades
educacionales dentro de la familia.
Metodológicamente, Linden se especializa
en el uso de experimentos aleatorizados de
gran escala.
Profesor Asistente de
Economía
University of Texas, Austin
(Ph.D. Massachusetts
Institute of Technology)
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Diseño I Lógica de programa y teoría de cambio Leigh Linden
Profesor Asistente de Economía y Asuntos Públicos
University of Texas, Austin
leigh.linden@austin.utexas.edu
4
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Objetivos de aprendizaje
Al finalizar esta presentación serán capaces
de:
1. Entender la función que desempaña la Teoría de
Cambio y su rol dentro del marco común de una
evaluación
2. Definir y distinguir entre niveles de resultados usando el
material de referencia presentado
3. Elaborar una Teoría de Cambio para su propio proyecto
5
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Importance
Esquema
1. ¿Qué es la Teoría de Cambio?
2. Introducir ejemplo de un proyecto
3. Componentes principales
4. Cómo hacerlo
5. Importancia
How to Components Example What it is Big picture
6
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
1. ¿Qué es la Teoría de Cambio?
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Importance How to Components Example
Nuestra meta: Aprender de evaluaciones rigurosas de programas
Evaluación
Evaluación de programas
Evaluación de impacto
Monitoreo RCTs
8
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Para quiénes son las evaluaciones?
Académicos
Donantes
Sus constituyentes
Políticos / responsables de política
Tecnócratas
Implementadores
Proponentes, Escepticos
Beneficiarios
Importance How to Components Example
9
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Componentes de una Evaluación de Programa Evaluación de necesidades
Teoría de Cambio
Evaluación de procesos
Evaluación de impacto
Análisis costo-efectividad
¿Cuál es el problema?
¿Cómo, en teoría, podemos
resolver el problema?
¿El programa funciona como
fue planificado?
¿Objetivos se cumplieron? ¿En
qué magnitud?
Dadas la magnitud y el costo
¿Cómo se compara con las
alternativas?
Importance How to Components Example
10
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
¿Qué es la Teoría de Cambio?
Una teoría de cambio es una hoja de
ruta que nos dice hacia donde vamos
(resultados) y cómo llegamos
(proceso).
11
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
En otras palabras….
“Creo que deberías ser más explícito aquí en el segundo paso.”
12
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Hipótesis causal
P: ¿Cómo espero que se produzcan los resultados?
R: Si [insumos] y [actividades] producen [productos] esto debería conducir a [resultados] que al final contribuirán al [objetivo].
13
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Usuarios y Utilidad
• Planes estratégicos y Desarrollo de
Proyectos
• Descripción / Comunicación
• Monitoreo y Evaluación
• Aprendizaje / Pensamiento
14
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Utilidad de la Teoría de Cambio
Herramienta técnica
Forma de Pensar
TdC Cultura Política
15
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Teoría de Cambio: Producto vs. proceso
“Pensar en la teoría de cambio es un hábito
no un producto.”
(Vogel 2012)
16
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
2. Ejemplo de un proyecto
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Ejemplo: Un proyecto de tutorías en Chile Población objetivo: Jovenes
vulnerables en su último año de
educación secundaria
Insumo: Profesionales de
empresas selecionadas realizan
una tutoría one-to-one con
algunos de los estudiantes
Misión: Mejorar la transición del
colegio al trabajo, mejorar
participación en educación
terciaria
18
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Visualizar Teoría de Cambio
INSUMOS / ACTIVIDADES
RESULTADOS INTERMEDIOS PRODUCTOS RESULTADOS
FINALES
Reclutar a mentores
Capacitar a mentores
Tutorías
Estudiantes seleccionados
reciben tutorías
Experiencia de trabajo
Mejor rendimiento educacional
Mayor matriculación a educ terciaria
Actitudes sobre educación y
trabajo
Conocimientos sobre educ superior y
mercado laboral
Preparación laboral
Habilidades de busqueda de
trabajo
Mejores redes sociales
Mayor valoración de redes sociales
Oportunidades percibidas de carrera prof.
Tipo de educación / ocupación
elegida
Expectativas de salarios
19
NECESIDADES
Tasas bajas de matriculación a educ. terciaria
Falta de información sobre educ superior y
mercado laboral
Redes sociales y oportunidades
de trabajo limitados
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
3. Componentes
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Necesidades Insumos Actividades Productos Resultados Objetivos
Nivel de resultados
Recursos Acciones Productos y servicios
Actitudes Conocimientos
Capacidades Comportamiento
(ACCC)
Estado de desarrollo
Instituciones / Contexto
21
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Necesidades Insumos Actividades Productos Resultados Objetivos
22
Nivel de resultados
Recursos Acciones Productos y servicios
Estado de desarrollo
ACCC
Instituciones / Contexto
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Necesidades Insumos Actividades Productos Resultados Objetivos
23
Nivel de resultados
Recursos Acciones Productos y servicios
Estado de desarrollo
ACCC
Instituciones / Contexto
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Necesidades Insumos Actividades Productos Resultados Objetivos
24
Nivel de resultados
Recursos Acciones Productos y servicios
Estado de desarrollo
ACCC
Instituciones / Contexto
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Necesidades Insumos Actividades Productos Resultados Objetivos
25
Nivel de resultados
Recursos Acciones Productos y servicios
Estado de desarrollo
ACCC
Instituciones / Contexto
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Necesidades Insumos Actividades Productos Resultados Objetivos
26
Nivel de resultados
Recursos Acciones Productos y servicios
Estado de desarrollo
ACCC
Instituciones / Contexto
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Necesidades Insumos Actividades Productos Resultados Objetivos
27
Nivel de resultados
Recursos Acciones Productos y servicios
Estado de desarrollo
ACCC
Instituciones / Contexto
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Supuestos
Supuesto:
Una condición externa necesaria y positiva
que debe cumplirse para que la cadena
causal y el efecto (en una intervención)
avancen.
28
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Supuestos: Ejemplo Proyecto de Tutoría
Aumenta la auto-confianza de los
estudiantes
Estudiantes postulan a
instituciones de educación terciaria
29
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Componentes principales de TdC
Normalmente, una Teoría de Cambio:
• Incluye un diagrama (ver arriba)
• Incluye un breve resumen de tu hipótesis
(Si...entonces...).
• Incluye una narrativa: un relato breve y
convincente que explica la ruta
30
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
4. ¿Cómo hacer una TdC?
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
¿Cómo hacerlo? – Hacía atrás
El diseño de una Teoría de Cambio se elabora para atras
• Empieza con tu evaluación de necesidades
• Salta a tu impacto deseado / estado de desarrollo
• Identifica los diferentes ACCCs y la relación entre ellos (mapeo de resultados)
• Define los productos e insumos de tu intervención
• Discute los supuestos
32
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
¿Cómo hacerlo?
Inputs Activitie
s Outputs Outcomes Goal
vs.
33
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Ejemplo II: Un programa de transferencias monterias condicionadas (TMC) en Colombia
Población objetivo:
Estudiantes de secundaria de
bajos recursos
Insumos: Estipendio a
estudiantes condicionado en su
asistencia escolar
Misión: Mejorar tasas de
asistencia y graduación en la
educación secundaria; mejorar
puntajes de prueba
34
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
TMC: Teoría de Cambio
35
NECESIDAD
INSUMOS / ACTIVIDADES
PRODUCTOS RESULTADOS RESULTADOS FINALES
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
36
Altas tasas de deserción en
educ secundaria
Costos de oportunidad
altos por tiempo de estudiantes
Altos costos para ahorrar
INSUMOS / ACTIVIDADES
PRODUCTOS RESULTADOS RESULTADOS FINALES
TMC: Teoría de Cambio
INSUMOS / ACTIVIDADES RESULTADOS PRODUCTOS
RESULTADOS FINALES
NECESIDAD
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
37
Menos deserción
Mejores tasas de asistencia
Mejores puntajes en pruebas
TMC: Teoría de Cambio
INSUMOS / ACTIVIDADES RESULTADOS PRODUCTOS
RESULTADOS FINALES
NECESIDAD
INSUMOS / ACTIVIDADES
PRODUCTOS RESULTADOS
Altas tasas de deserción en
educ secundaria
Costos de oportunidad
altos por tiempo de estudiantes
Altos costos para ahorrar
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
38
Mejor acceso a fondos cuando
estudiantes necesitan pagar gastos escolares
Más recursos destinados a
gastos educacionales
Posibles cambios en asignación de
recursos entre niños del hogar
Reducción número de estudiantes
trabajando
TMC: Teoría de Cambio
INSUMOS / ACTIVIDADES RESULTADOS PRODUCTOS
RESULTADOS FINALES
NECESIDAD
INSUMOS / ACTIVIDADES
PRODUCTOS
Altas tasas de deserción en
educ secundaria
Costos de oportunidad
altos por tiempo de estudiantes
Altos costos para ahorrar
Menos deserción
Mejores tasas de asistencia
Mejores puntajes en pruebas
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
39
Estudiantes que cumplen
objetivos de asistencia
reciben pago
Pago se efectúa en periodos establecidos
TMC: Teoría de Cambio
INSUMOS / ACTIVIDADES RESULTADOS PRODUCTOS
RESULTADOS FINALES
NECESIDAD
INSUMOS / ACTIVIDADES
Altas tasas de deserción en
educ secundaria
Costos de oportunidad
altos por tiempo de estudiantes
Altos costos para ahorrar
Menos deserción
Mejores tasas de asistencia
Mejores puntajes en pruebas
Mejor acceso a fondos cuando
estudiantes necesitan pagar gastos escolares
Más recursos destinados a
gastos educacionales
Posibles cambios en asignación de
recursos entre niños del hogar
Reducción número de estudiantes
trabajando
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
40
Registrar estudiantes para
pago de estipendio
Entregar tarjetas bancarias a estudiantes
Recolección de datos de
asistencia
Administrar pagos cuándo corresponde
TMC: Teoría de Cambio
INSUMOS / ACTIVIDADES RESULTADOS PRODUCTOS
RESULTADOS FINALES
NECESIDAD
Altas tasas de deserción en
educ secundaria
Costos de oportunidad
altos por tiempo de estudiantes
Altos costos para ahorrar
Menos deserción
Mejores tasas de asistencia
Mejores puntajes en pruebas
Mejor acceso a fondos cuando
estudiantes necesitan pagar gastos escolares
Más recursos destinados a
gastos educacionales
Posibles cambios en asignación de
recursos entre niños del hogar
Reducción número de estudiantes
trabajando
Estudiantes que cumplen
objetivos de asistencia
reciben pago
Pago se efectúa en periodos establecidos
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
5. Importancia
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Teoría de Cambio y la Vida de un Proyecto
Definir pregunta de investigación
Establecer intervención Diseñar experimento de
campo Levantamiento de datos
Entrada de datos Monitoreo de intervención
Análisis Difusión & Política
42
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Definir pregunta de investigación
Establecer intervención Diseñar experimento de
campo Levantamiento de datos
Entrada de datos Monitoreo de intervención
Análisis Difusión & Política
43
Teoría de Cambio y la Vida de un Proyecto
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Teoría de Cambio permite enfocarse en procesos y resultados
44
Para personas del programa, ayuda mantener el enfoque en los resultados - mirada en la meta Implementadores de programas normalmente están
preocupados por las actividades y los productos: ¿Cuántas capacitaciones hemos realizado? ¿A cuántos beneficiarios hemos alcanzado?
Deberíamos alejarnos de hacer intervenciones por hacer intervenciones hacia desarrollo que explícitamente cumple con objetivos y metas de mayor alcance.
Para evaluadores, nos recuerda considerar los procesos Evaluadores están muy enfocados en evaluar cambias en
resultados. Pero a veces se hace la vista gorda en cuento a cómo ese cambio ocurrió.
Llamamos a esto el problema de la caja negra.
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Problema de caja negra: Juventud y empleo
Problema: Jóvenes desempleados
Intervención: Desembolso de préstamos
45
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Resolver el problema de la caja negra
Jóvenes están motivado a crear negocios
Préstamos distribuídos a jóvenes
Intervención
Jóvenes usan préstamos para comprar ropa
Intervención diseño/Insumo
Actividades
Resultados
Resultado final
Supuestos
Productos
Jóvenes usan préstamos para crear negocios
Facilitar grupos de préstamos y distribuir préstamos a jóvenes
No hay crecimiento en empleo juvenil
Bajo empleo juvenil Evaluación de necesidades
Caja Negra
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Insumos Actividades Productos Resultados Objetivo
Identificando fallo en teoría vs. fallo en implementación
Intervención exitosa
Implementación fallida
Teoría fallida
Insumos Actividades Productos Resultados Objetivo
Insumos Actividades Productos Resultados Objetivo
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
En vez de un resumén – promover mejor desarrollo de teorías ¿Cuál es tu pregunta de investigación?
¿Cómo esperas que tu programa resuelva el problema?
¿Cómo diseñas tu intervención o cómo analizas una intervención dada?
¿Cuál es tu explicación si no funciona el programa?
¿Qué quieres medir, y cuándo?
¿Cómo estrúcturas tu análisis de datos?
¿Qué conclusiones puedes extraer y comunicar a las partes interesadas?
48
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
¡Gracias!
Leigh Linden
Profesor Asistente de Economía y Asuntos Públicos
University of Texas, Austin
leigh.linden@austin.utexas.edu
49
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Apéndice I: Terminología de niveles de resultados
Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo
Nivel de resultados
Línea de tiempo
Cortes de referencia
Grados de control Dominios del cambio
Objetivos Largo-plazo Después del proyecto o 5-10 años
Marginal Sociedad, nivel de población o sistema • Estado de desarrollo
económico o social
Resultados Intermedio Final del proyecto
Parcial ACCC • Actitudes • Conocimientos • Capacidades • Comportamientos
Productos En curso Durante el proyecto
Completo a parcial (supuestos y riesgos)
Productos y servicios (Acceso)
Actividades Día-a-día Durante el proyecto
Completo
Insumos Inicial Al comienzo y durante el proyecto
Completo
Apéndice II: Nivel de resultados: Resumen
El M&E Proyecto de Apoyo tiene dos areas de actividad
principales: la provisión de capacitaciones de M&E a partners
ONG activos; y la documentación en formato de caso de estudio
de los retos y prácticas de M&E de las ONGs. Estas actividades
resultarán en un número de partners ONGs activos que estarán
capacitados en M&E, así como un libro escrito y publicado sobre
el tema de marcos adecuados para M&E. Estos productos
facilitarán la adquisición de conocimientos, actitudes positivas y
capacidades relacionados a marcos adecuados de M&E por
parte de ONGs de desarrollo. Estos cambios deberían resultar
en una mejora en la práctica de M&E adecuados por parte de
ONGs de desarrollo, lo cual contribuirá a un desarrollo mundial
más efectivo y eficiente.
Apéndice III: Ejemplo de narrativa Teoría de Cambio: M&E Proyecto de Apoyo