Javier EscobalBogotá, Junio 2015

Errores en las encuestas longitudinales: Seguimiento y pérdida–

El caso de Niños del Milenio

Esquema

o Antecedentes: El Estudio Niños del Milenio (Young Lives)

o Algunos resultados generales

o Diseño del estudio

o Pérdida (attrition), migración

o Potenciales efectos de la pérdida de muestra

o Esfuerzos para reducir la pérdida de muestra

Niños del Milenio (Young Lives)

Algunos resultados: Nutrición y salud

o Reducción sustancial en el retraso en el crecimiento (desnutrición crónica) en la cohorte menor, consistente con tendencias nacionales. La tasa de retraso en el crecimiento de la cohorte menor

(21%) es la mitad de la observada para la cohorte mayor a la misma edad (42%).

o Desigualdades entre grupos vulnerables y privilegiados se han reducido, pero están lejos de desaparecer.

o Aprovechando la naturaleza longitudinal de la encuesta, se ha podido identificar qué niños (as) han logrado recuperación nutricional y cognitiva. En esa recuperación tiene un rol importante el crecimiento económico, pero también los programas sociales (v.gr. JUNTOS)

Diseño del estudio

o Se excluyó 5% de distritos más ricos.

o Se seleccionó aleatoriamente a 20 distritos.

o Se seleccionó 100 familias por distrito en cohorte menor (y aprox. 50 en cohorte mayor).

o La muestra original cubría zonas urbanas y rurales en costa, sierra y selva.

Seguimiento a los hogares

Cohorte menor Cohorte mayor

Muestra inicial 2052 714

Murieron 22 1.1% 6 0.8%

Se negaron 83 4.0% 45 6.3%

No se les encontró 20 1.0% 16 2.2%

Viven en el exterior 25 1.2% 12 1.7%

Entrevistados R4 1902 92.7% 635 89.7%

Pérdida de muestra 7.3% 11.1%

Pérdida (excluyendo muertes)

6.2% 10.2%

Comparación de tasas de pérdida de la muestra

Longitudinal study Level of Attrition Attrition rate Description (with start date) observation rate per per annum (%) annum (%) (excluding deaths) Young Lives, All Countries Individual 0.41% 0.40% 4 rounds of follow-up in 12 years Young Lives - Peru Individual 0.59% 0.59% 4 rounds of follow-up in 12 years

KIDS, South Africa - 1993 Household 3.40% 3.40% 1 follow-up after a 5 year interval Proyecto Integral de Desarrollo Infantil (PIDI), Bolivia - 1996 Individual 19.40% 1 follow-up after a 2 year interval Kenyan Ideational Change Survey (KICS), Kenya – 1994 Household 23.20% 1 follow-up after a 2 year interval Kagera Health and Development Survey (KHDS), Tanzania – 1991 Household 0.88% 0.70% 4 rounds of follow-up in 4-year period Kagera Health and Development Survey (KHDS), Tanzania – 1994 Individual 2.85% 1.60% 1 follow-up after 10-year interval Kagera Health and Development Survey (KHDS), Tanzania – 1994, children below Individual 2.29% 1.50% 1 follow-up after 10-year interval

Birth to Twenty (BT20), South Africa - 1990 Individual 1.90% 1.80% 16 years of follow-up, up to 2006

IFORD Yaounde Survey, Cameroon – 1978 Individual 22.50% 18.70% 7 rounds of follow-up within 2 years

Pelatos Birth Cohort, Brazil, 1982-1986 Individual 5.30% 4.20%2 follow-ups of entire sample within 4 years in 1984 and 1986.

Cebu Longitudinal Health and Nutrition Survey (CLHNS), Philippines - 1983 Individual 2.60%

11 year study, 14 rounds in first 2 years, 2 others at varying intervals

Dispersión creciente de la muestra: al 2013, la muestra original se ha trasladado a 217 distritos

Ronda 1 Ronda 2 Ronda 3 Ronda 4

27 distritos 173 distritos 208 distritos 213 distritos

Migración (cohorte menor)

Migración

Respecto al total original

Respecto al total entrevistado en R4

Ronda 1 0% 0%

Ronda 2 12% 13%

Ronda 3 17% 18%

Ronda 4 19% 20%

Diferencias entre muestra de niños visitados y de niños perdidos

o La diferencias de medias entre los visitados en las rondas y los perdidos sugieren que, en promedio, no hay diferencias significativas por genero, peso al nacer, etnicidad, edad y educación de la madre, y nivel de riqueza

o Sin embargo, los promedios podrían estar ocultando una dinámica más compleja, dónde existe pérdida en los dos extremos de la distribución de riqueza

Índice de activos en R1 entre niños visitados y niños perdidos (attrited)

0.5

11

.52

kden

sity

ind

exr1

0 .2 .4 .6 .8 1x

non-attrited in R4 attrited in R4

0.5

11

.52

kden

sity

ind

exr1

0 .2 .4 .6 .8 1x

non-attrited in R2 attrited in R2

Diferencias entre niños visitados y niños perdidos (attrited)

o Cuando se estima un probit multivariado incluyendo las características de la ronda 1 Algunas pocas variables muestran significancia (migración

previa a R1, SRQ20) Pseudo R2 es apenas mayor 2% sugiriendo que el set completo

de características del niño y de su hogar apenas explican una proporción marginal de la atrición.

o Adicionalmente Outes Leon & Dercon (2007) muestran – a partir del test de Becketti, Gould, Lillard & Welch (BGLW) que los determinantes de algunas variables claves (como desnutrición en R1) son similares entre niños visitados y perdidos. Es decir la pérdida controlada por observables no parece estar generando sesgos.

Esfuerzos para reducir la pérdida de muestra (I)

o Se les deja toda la información de contacto del estudio(dirección, teléfonos, correo electrónico, web)

o Encuesta Preliminar Contactos (familiares y amigos cercanos, en la localidad y fuera

de la localidad) Preguntas hipotéticas

o Tracking Nueva visita entre rondas para confirmar que todo está ok En cada tracking y en cada visita se entrega una foto (cubierta

con una mica) de madre/hijo(a) o familia/hijo(a). En la parte de atrás está toda la información de contacto.

Esfuerzos para reducir la pérdida de muestra (II)

o Reciprocidad Pequeño regalo (aprox USD 7 por niño) (R3: una mochila, R4: un

reloj) Línea delgada entre estudio observacional e intervención Se les entrega información útil (nutricional) de carácter general

o Se hace lo posible por mantener una parte importante del grupo de encuestadores entre rondas (los encuestadores han desarrollado una relación)

o Migración internacional: formato reducido; usar la vía telefónica es una posibilidad que no se ha usado (salvo visita a un niño que vivía en la frontera con Ecuador.

Portal de Niños del Milenio, un estudio longitudinal

En el portal del estudio Niños del Milenio encontrará todas las publicaciones, los cuestionarios y las indicaciones para acceder a las bases de datos de las

tres rondas de encuestas disponibles; y podrá suscribirse al boletín de

novedades:www.ninosdelmilenio.org

Redes sociales de Niños del Milenio

Síguenos en Facebook y Twitter:

/NinosDelMilenio.org@NinosdelMilenio