Retos de Evaluación en Chile

Retos de Evaluación en Prevención

• Evaluación en prevención

• Tipos de evaluación

• Estrategias estandarizadas

• Indicadores

• Evaluación resultados, efecto e impacto

• Proceso preventivo

PREVENCIÓN y PROCESO EVALUATIVO

ANTICIPARSE

FORTALECER

GESTIONAR los riesgos

PROCESO

Personales y de contexto

Compromete resultados a futuro por lo tanto es importante contar con grupo de control y evolución.

Programas de prevención inciden en muchas variables que están multideterminadas a su vez por otros factores. Aislar efectos programa v/s otras intervenciones familiares, educacionales etc. (autoestima, toma de decisiones, proyecto de vida etc. )

Medir valores, actitudes, conocimientos y habilidades

Prevención busca efectos a mediano y largo plazo, e implica un proceso educativo largo. Seguimiento

Evaluación de personas y contextos. Familia, escuela, barrio.

¿QUÉ PROGRAMA?

• Distinguir acciones, de proyectos y de programas– Programa. Definido como una intervención

sistemática, consistente, con proyección a largo plazo.

– Proyecto. Acotada en el tiempo.• Todo proyecto debe incluir desde su definición una

propuesta de evaluación.• En los programas vale la pena invertir adicionalmente

en una evaluación externa, que permita – Al inicio validar la intervención (materiales,

procesos de capacitación etc).– Evaluar proceso– Evaluar resultados a corto y mediano plazo

ESTUDIOS REALIZADOS POR EL CONACE• ESTUDIOS EN POBLACION GENERAL (BIENALES PARES DESDE 1994)• ESTUDIOS EN POBLACION ESCOLAR (BIENALES IMPARES DESDE 1995)• ESTUDIOS EN PROFESORES• ESTUDIOS EN POBLACIÓN PENAL• ESTUDIOS EN SERVICIOS DE URGENCIA• ESTUDIOS EN FALLECIDOS (SML)• ESTUDIOS EN MENORES EN RIESGO (SENAME)• ESTUDIOS EN CONDUCTORES LOCOMOCIÓN COLECTIVA (REGIÓN

METROPOLITANA)• OTROS ESTUDIOS: ANÁLISIS DE DISCURSOS

METODOLOGÍA• CUANTITATIVA: Encuestas sociales y pruebas de análisis de metabolitos.

• CUALITATIVA: Análisis de Discursos: Entrevistas en profundidad, a informantes clave y grupos focales.

TIPO DE ENCUESTAS• Autoaplicadas

• Entrevistas cara a cara

Evaluación de resultados a nivel de efectos e impacto:1) Identificación : Evaluación de la aplicación piloto del material educativo para la educación parvularia: “En Busca del Tesoro, 2002. Ejecutor : Centro de Estudios de Desarrollo y Estimulación Psicosocial- CEDEP.2)Identificación: Evaluación del programa preventivo “Quiero Ser”, 2002-2003 Ejecutor : Escuela de Salud Pública de la Universidad de Chile.3) Identificación : V Estudio Nacional en Población Escolar, 2003 (con 2 años de

aplicación del programa). Ejecutor : Escuela de Salud Pública, Universidad de Chile.

Evaluaciones de procesos:Identificación: Evaluación de las estrategias estandarizadas de prevención del consumo de drogas en establecimientos educacionales P/Ss, 2000-2001

(Marori y Tutibú; Pasarlo Bien; Para Ser y Crecer; Vitales y Libres; Cable a Tierra).

Ejecutor : Universidad Bolivariana.

Evaluación de indicadores de satisfacción usuaria:Cada programa del Continuo Preventivo lleva incorporado un sistema que recoge la percepción de los docentes respecto a su satisfacción con el programa y con la estrategia de implementación.

EVALUACIONES REALIZADAS EN EDUCACIÓN EN CHILE

29

Aceptación del ProgramaMide el nivel de satisfacción que

tiene los alumnos con el programa, así como su disp osición a participar,

la percepción respecto a las actividades y el manual utilizado y

la percepción respecto a la utilidad del Programa

Relación con la DrogaMide la percepción de riesgo frente al consumo de alcohol y drogas, la

actitud de los alumnos frente al consumo de sus p ares y la

prevalencia de consumo de alcohol y drogas

Factores ProtectoresMide el efecto de los ejes del

programa, tales como imagen personal, comunicación , toma de decisiones, manejo de la ansie dad y resistencia a la presión de grupo

Indicadores de AceptaciónDeclaración que les gustó el

programa, que les gustaría seguir participando, que lo encontraron

entretenido, que les sirvió, que consideran bueno el manual

Indicadores de ImpactoPercepción respecto a mitos relacionados con el consumo

(magnitud de consumo en jóvenes y capacid ad para d ejar de

consumir en cualquier momento); Percepción de riesgo y percepción de dañ o; resistencia a la presión de

grupo; aprob ación respecto al consumo de p ares; Probabilid ad de

consumo futuro

Indicadores de Factores Protectores

Autoimagen corporal; autoestima académica ; habilidades sociales;

agresividad; percepción de autocontrol; impulsividad,

habilidad de comunicación; capacid ad de decidir por sí mismo

VARIABLES DE INTERÉS PARA LOS PROGRAMAS DE PREVENCIÓN ESCOLAR

El programa es bien evaluado por los alumnos en términos de sus contenidos y actividades, aunque con menor aceptación entre los de Octavo Básico

El programa presenta menor aceptación entre quienes han consumido drogas.

El programa contribuye a aumentar la percepción de riesgo sobre el consumo habitual de marihuana

Ayuda a disminuir la creencia en mitos que favorecen el consumo Aumenta la reprobación del consumo habitual de marihuana y el ocasional de alcohol

El consumo de marihuana se muestra levemente menor entre los alumnos que han sido parte del programa

Se obtienen progresos significativos en la comprensión del problema de las drogas

El programa ayuda a mejorar algunas “habilidades para la vida”.

EVALUACIÓN DE “PROGRAMA QUIERO SER”

29

VARIABLES DE INTERÉS PARA EL PROGRAMA PREVENIR EN FAMILIA

InvolucramientoInterés y conocimiento efectivo de las

actividades que realizan a los hijosSupervisón, control y apoyo

permanente.

Sentido de competenciaIdentifica su rol de padre como

fundamentalSe siente capacitado para

guiar a sus hijos

Información y transmisión de la información

Maneja y traspasa información clara y actualizada a los hijos

sobre drogas

Manejo conductualGrupo familiar donde existen normas y

límites cumplidas y conocidas por todos.

La violencia no es un recurso utilizado

Estilo familiar y rutinas familiares

Hábitos y rutinas familiares que se orientan al resguardo de los espacios

que aglutinan al grupo familiar.Identificación con un estilo de vida

saludable

Habilidades comunicacionalesRelaciones familiares donde predomina

la escucha, la empatía y el reconocimiento de las necesidades del

otro.Adultos al tanto de lo que piensan y

sienten sus hijos

Integración a redesMantiene contacto con la red comunal (escuela, municipio, etc.)Conoce la existencia de una red de ayuda hacia la problemática del consumo de drogas

Vínculo padre – hijoRelación padre hijo vivida como cercana y donde predomina el

intercambio afectivoEl adulto se esfuerza por dar

seguridad al niño y/o adolescente

Consumo de drogasAlude a dos dimensiones:-Prevalencia del consumo en adolescentes-Conocimiento de la red de ayuda para problemas vinculados al uso de drogas

APRENDIZAJES • Consistencia y permanencia programas en el tiempo (proceso

preventivo).

• Utilidad de la validación de materiales en los programas preventivos.

• Los estudios no sólo permiten medir tendencias, sino también investigar factores protectores asociados e impactos de los programas. Ej. Prevención escolar.

• Homologar indicadores entre evaluación de programas.

• Una buena evaluación permite mejorar la eficacia de: diseño del programa, metodología de implementación y procesos de capacitación.

DESAFÍOS • Incorporar indicadores de evaluación desde el diseño de los

programas.• Utilizar los resultados de las evaluaciones para mejorar bases

científicas de la prevención, para reelaborar los programas a partir de resultados, para mejorar procesos de intervención.

• Utilizar grupos control, seguimiento y avanzar en análisis multivariados que nos permitan intervenir más específicamente en aquellas variables o factores que aseguren su incidencia e impacto.

• Compartir éxitos y fracasos entre especialistas. • Aprender de las evaluaciones.• Medir el impacto de un proceso gradual, continuo y sistemático

de prevención.

EVOLUCIÓN DEL USO DE DROGAS ILÍCITAS EN LA POBLACIÓN GENERAL DE 12 A 64 AÑOS DE EDAD,

SEGÚN PREVALENCIA DE ÚLTIMO AÑO

0

1

2

3

4

5

6

7

Marihuana 3,81 3,98 4,79 5,81 5,17

Pasta Base 0,85 0,63 0,84 0,73 0,51

Cocaína 0,87 0,84 1,33 1,52 1,57

1994 1996 1998 2000 2002

Fuente: CONACE, Estudio Nacional de Drogas en la Población General de Chile, 2002

LOS PADRES INVOLUCRADOS PREVIENEN EL CONSUMO DE DROGAS

PREVALENCIA DE CONSUMO ULTIMO AÑO DE ALGUNA DROGA EN ESCOLARES SEGUN HABITOS DE LOS PADRES

11,5

14,4

13,8

11,9

10,7

13,9

10,4

18

28,2

24,7

20,4

21,8

28,6

31,5

0 5 10 15 20 25 30 35

Los padres conocen a los amigos más cercanos

Los padres preguntan y/o esperan que les diga dondeva

Los padres controlan la hora de llegada a la casa en lanoche

Los padres comen con su hijo todos o casi todos losdías de la semana

Los padres se fijan en los programas que ve en late levisión

Los padres están atentos sobre lo que hace en e lcolegio

Los padres siempre o casi siempre saben donde está

No

Si

www.conacedrogas.cl

www.conace.clPorta chileno sobre las drogas

Agustinas 1235 p. 9

Santiago de Chile

Fono: (56-2) 510.08.00

tizquierdo@conace.gov.cl