““EvaluaciEvaluacióón y Sistematizacin y Sistematizacióón en n en AmAméérica Latina: encuentros, rica Latina: encuentros,

desencuentros y desafdesencuentros y desafííosos””

Alfonso TorresAlfonso TorresUniversidad

Pedagógica NacionalColombia

Panel:Panel:

Oscar JaraOscar JaraCEAAL

Costa Rica

Mariluz MorganMariluz MorganTaller Permanente de

SistematizaciónPerú

Emma RotondoEmma RotondoPREVAL

Perú

Eladio AlvaradoEladio AlvaradoUniversidad de Costa

RicaCosta Rica

panelistaspanelistas

comentaristacomentarista

Esteban TapellaEsteban TapellaReLAC

Argentina

Congreso Internacional de EvaluaciCongreso Internacional de Evaluacióón y III Conferencia de la Red de Seguimiento, Evaluacin y III Conferencia de la Red de Seguimiento, Evaluacióón n y Sistematizaciy Sistematizacióón de Amn de Améérica Latina y el Caribe (ReLAC) rica Latina y el Caribe (ReLAC)

San JosSan Joséé, Costa Rica, 28 al 30 de Junio 2010, Costa Rica, 28 al 30 de Junio 2010

coordinacicoordinacióónn

““EvaluaciEvaluacióón y Sistematizacin y Sistematizacióón en n en AmAméérica Latina: encuentros, rica Latina: encuentros,

desencuentros y desafdesencuentros y desafííosos””

Panel:Panel:

AbordarAbordaráá principalmente la cuestiprincipalmente la cuestióón conceptual y metodoln conceptual y metodolóógica que gica que identifica y particulariza a la Sistematizaciidentifica y particulariza a la Sistematizacióón respecto de Evaluacin respecto de Evaluacióón.n.

Resaltando aspectos comunes (Resaltando aspectos comunes (‘‘encuentrosencuentros’’) y diferencias o ) y diferencias o particularidades (particularidades (‘‘desencuentrosdesencuentros’’), el panel procura ser una clase p), el panel procura ser una clase púública, blica, abierta, con los principales referentes para Amabierta, con los principales referentes para Améérica Latina en esta rica Latina en esta temtemáática. tica.

Se intenta abrir un debate a partir de las posturas y experienciSe intenta abrir un debate a partir de las posturas y experiencias de los as de los expositores para enriquecer la formaciexpositores para enriquecer la formacióón conceptual sobre estos temasn conceptual sobre estos temas

Este panel surge del trabajo e intercambio del Este panel surge del trabajo e intercambio del grupo Sistematizacigrupo Sistematizacióón y Evaluacin y Evaluacióónn de de Noticias ReLAC. Para suscribirte al grupo y participar en nuestrNoticias ReLAC. Para suscribirte al grupo y participar en nuestras actividades, accede al sitio: as actividades, accede al sitio:

http://noticiasrelac.ning.com/http://noticiasrelac.ning.com/

““EvaluaciEvaluacióón y Sistematizacin y Sistematizacióón en n en AmAméérica Latina: encuentros, rica Latina: encuentros,

desencuentros y desafdesencuentros y desafííosos””

Alfonso TorresAlfonso TorresColombia

Panel:Panel:

Oscar JaraOscar JaraCEAAL

Costa Rica

Mariluz MorganMariluz MorganTaller Permanente de

SistematizaciónPerú

Emma RotondoEmma RotondoPREVAL

Perú

Eladio AlvaradoEladio AlvaradoUniversidad de Costa

RicaCosta Rica

panelistaspanelistas

comentaristacomentarista

Esteban TapellaEsteban TapellaReLAC

Argentina

coordinacicoordinacióónn

Este panel surge del trabajo e intercambio del Este panel surge del trabajo e intercambio del grupo Sistematizacigrupo Sistematizacióón y Evaluacin y Evaluacióónn de de Noticias ReLAC. Para suscribirte al grupo y participar en nuestrNoticias ReLAC. Para suscribirte al grupo y participar en nuestras actividades, accede al sitio: as actividades, accede al sitio:

http://noticiasrelac.ning.com/http://noticiasrelac.ning.com/

Sistematización de Experiencias y Evaluación

ENCUENTROS Y DESENCUENTROS

Oscar Jara H. CEP Alforja / CEAAL

Sistematización de Experiencias:Producto de la historia de América Latina

La relación dinámica, dialéctica y compleja entre PROYECTO y PROCESO

• EVALUACIÓN – vínculo con el PROYECTOSISTEMATIZACIÓN – vínculo con el PROCESO

• Linealidad y Complejidad. Lo imprevisto y lo inesperado. La innovación y la novedad.Las sinergias y las trabas.Impulsiones y resistencias; externas e internas 

Evaluación y sistematización  de experiencias: procesos de aprendizajeProducción de conocimientos a) a partir de la experiencia, b) sobre la experiencia, c) desde la experiencia,d) para la transformación de la práctica.

Generar las condiciones,  las disposiciones  y las capacidades para el aprendizaje crítico y creador:Otras miradas, otras sensibilidades.

Sistematización de experiencias como interpretación crítica del proceso vivido.

La producción de conocimientos como proceso político‐pedagógico

“Qué conocer, cómo conocer, para qué conocer, a favor de qué y de quién conocer – y  por consiguiente, contra qué y contra quién conocer –son cuestiones teórico‐prácticas y no intelectualistas que la educación nos plantea en cuanto acto de conocimiento.… no hay, por eso mismo, especialistas neutros, “propietarios” de técnicas también neutras… no hay “metodologistas neutros”(PAULO FREIRE ‐ Cartas a Guinea‐ Bissau)

“Hay que producir condiciones en que sea posible aprender críticamente… Que seamos creadores, instigadores, inquietos, rigurosamente curiosos, humildes y persistentes…La curiosidad, como inquietud indagadora, como búsqueda de esclarecimiento, forma parte integrante del fenómeno de la vida. No habría creatividad sin la curiosidad que nos mueve y nos pone pacientemente impacientes ante el mundo que no hicimos…”(PAULO FREIRE ‐ Pedagogía de la autonomía)

Condiciones fundamentales para un encuentro fecundo

La problematización para la construcción de pensamiento crítico: descubrimiento del entramado de relaciones de poder que se dan entre los actores.

El desarrollo de la creatividad inacabada. Una pedagogía de la pregunta y cómo se lleva a cabo en la sistematización de experiencias y la evaluación.

Actitudes y cualidades indispensables.

La “rigurosidad metódica”

SistematizaciSistematizacióón y Evaluacin y Evaluacióónn

Especificidades, confluencias y Especificidades, confluencias y posibilidades de diposibilidades de diáálogo y logo y

alimentacialimentacióón mutuan mutua

MarMaríía de la Luz a de la Luz MorganMorganTaller Permanente de SistematizaciTaller Permanente de Sistematizacióón n –– TPSTPS

Julio 2010Julio 2010

¿De qué estamos hablando?

Evaluación busca valorar el grado o medida en que se logran los objetivos: de un proyecto, programa, política, institución.

Sistematización de experiencias orga-niza y procesa los aprendizajesobtenidos durante la intervención: reconstrucción y reflexión analítica que interpreta lo sucedido para comprenderlo.

Principales confluencias

Producen conocimientos.

Comparten el objeto de conocimiento: prácticas desarrolladas en el marco de proyectos.

Producen conocimientos susceptibles de usarse en la práctica.

Especificidades y sus consecuencias:

Precisión del objeto de conocimiento

Evaluación: el PROYECTO

Sistematización: la EXPERIENCIA

Proyecto / ExperienciaProyecto / Experiencia

Proyecto: intervención intencionada que busca enfrentar problemas y lograr determinados objetivos.

Experiencia: lo que realmente sucede a partir de la ejecución del proyecto.

Lo que realmente sucede:

Objetivo

Resultado

Conocimiento 1: Proyecto

Conocimiento 2: Experiencia

Experiencia + Sistematización:Conocimiento 3

Especificidades y sus consecuencias:

Sujeto del conocimiento

Evaluación: actores del proyecto y/o agentes externos

Sistematización: actores que vivieron la experiencia

Posibilidades de diálogo y retroalimentación

Sistematización Evaluación

Aprendizajes sobre lo no previsto, lo inesperado, procesos que salen del marco del proyecto

Cambios producidos por el proyectoCambios producidos por el proyectoy su explicaciy su explicacióónn

Desafíos comunes

Producir conocimientos realmente nuevos: actitud de búsqueda, cuestionadora, dispuesta a des-aprender.

En sistematización y auto evaluación, mayor dificultad, por ser los propios actores quienes la realizan: necesidad de respuestas interés y voluntad de reflexionar sobre la

experiencia capacidad crítica y autocrítica, lo que requiere un

ambiente de confianza

Desafíos comunes

Evaluaciones y sistematizaciones influyentes:

instituciones que aprenden incidencia, para que los conocimientos

obtenidos en la práctica se usen en políticas, programas, proyectos.

Muchas gracias

PANELEvaluación y sistematización en ALC. Encuentros, desencuentros, desafíos

Evaluación y Sistematización, lecciones aprendidas y desafíos

Emma RotondoPreval www.preval.org

w w w .p reval.org

Definiciones

• E y S tipos de investigación aplicada, 

• Transdisciplinas.

• Construyen conocimiento sobre el cambio y sobre la práctica.

• Coexisten en la práctica de investigación desde los 80s.

• Superposición

w w w .p reval.org

Definiciones

• Evaluación•• TransdisciplinaTransdisciplina, creada en Norteam, creada en Norteaméérica rica en los 50s aplicada a polen los 50s aplicada a polííticas pticas púúblicas y blicas y educacieducacióón.n.

•• LLóógica gica evaluativaevaluativa

•• EstEstáándares, principios y criteriosndares, principios y criterios

•• Disciplina y profesiDisciplina y profesióón.n.

w w w .p r e v a l .o r g

Evaluación• Definición

• “El uso de procedimientos de las ciencias sociales para investigar de manera sistemática la efectividad de un programa o intervención social que es adaptado a su ambiente político y organizacional y diseñado para informar sobre la acción social en términos de mejora de las condiciones sociales” Rossi, P; Freeman H. y Lipsey, M. (2004).

Términos clave

Investigación aplicada y sistemática

Gestión del cambio e intervención.

Situacional . Contextos específicos

Usar para informar y tomar decisiones.

25

• Sistematización

• Surge en ALC, CEAAL

• Concentrada en procesos, reconstruye y valora desde la perspectiva y por  actores sociales.

• Eje de reflexión crítica desde la práctica vuelve a la práctica, 

• Incorpora aprendizaje vivencial experiencial, tácito.

w w w .p r e v a l .o r g

DefinicionesDefiniciones• Interpretación crítica de una o varias experiencias que, a partir de su ordenamiento y reconstrucción, descubre o explicita la lógica del proceso vivido, los factores que han intervenido en dicho proceso, cómo se han relacionado entre sí, y por qué lo han hecho de ese modo. 

• JARA, 1998.

w w w .p reval.org

PrPrááctica en sistematizacictica en sistematizacióónnDocumentación realizada por terceros.

Procesos participativos, se superpone con evaluación participativa.

Investigaciones realizadas por terceros sobre procesos de cambio.

Reflexión sobre resultados de un proyecto.

w w w .p rev al.o rg

1. Evaluaci1. Evaluacióón de programasn de programas

• Establecer criterios en qué dimensiones se actúa (personas, instituciones, sociedad).

• Construir estándares: dimensiones de cambio mediante cadenas de causalidad y otras teorías de cambio; indicadores.

• Medición y verificación del desempeño comparando  estándares.

• Sintetizar evidencias y integrarlas en juicios de valor o mérito en conclusiones sobre cambios.

• Establecer recomendaciones y aprendizajes.Preskill y Russ‐Eft (2005)

29

Lógica evaluativa

• Pese a diferencias E y S se complementan

• Representan producción de conocimientos desde la práctica para reorientarla.

• Ambas buscan retroalimentar la práctica.

• Son usadas en evaluación como fuente de información.

• Tienen objetivos y procedimientos diferentes, aunque complementarios

Desafíos

• Definir, diferenciar e identificar dimensiones complementarias

• Esclarecer el tipo de conocimiento que cada uno genera

• Proponer estándares de calidad en procesos de sistematización

DESAFÍO:Hacia una Sistematización de Experiencias Educativas para la 

Educación Formal

Porqué y paraqué

SUPUESTOSLas  ideas  que  voy  a  proponer  tienen  alguna  probabilidad  de  cobrar sentido  sí,  y  solo  sí,  coincidimos  al  menos  parcialmente  en  algunos supuestos:•Vivimos un cambio de época más que una época de cambios.•En el mundo exterior a los centros educativos hay una revolución social, cultural y tecnológica.•El sistema educativo tiende a la auto conservación.•No  tenemos  claro  cómo  ni  cuando  terminará de  tomar  cuerpo  la educación del siglo 21•Las  TIC.s y el sistema educativo permanecen en una incierta danza

¿Qué es la SEE?

Interpretación  crítica de una o varias experiencias que, a partir de  su ordenamiento y  reconstrucción,  descubre  o  explicita  la lógica  del proceso vivido,  los  factores  que  han  intervenido en  dicho  proceso, cómo se han relacionado entre sí, y por qué lo han hecho de ese modo.

Jara, 1998

Algunas definiciones:

¿Qué es la SEE?

Proceso de reflexividad dialógica sobre una práctica profesional social o educativa, a   partir del reconocimiento de los saberes y significados  que  se  poseen  sobre  ella  y  de  un  esfuerzo  colectivo e intencionado  por  reconstruirla,  comprendiendo  los  contextos,  las condiciones y  los  elementos que  la  configuran,  para  realimentarla, potenciarla y cualificarla 

Ghiso, s.f.

Algunas definiciones:

¿Qué es la SEE?

Modalidad de conocimiento de carácter colectivo sobre unas prácticas de  intervención  y  acción  social,  que  a  partir  del  reconocimiento e interpretación crítica de los sentidos y lógicas que la constituyen, busca cualificarla y contribuir a  la teorización del campo temático en el que se inscriben 

Torres, 1998

Algunas definiciones:

Elementos comunes en las definiciones de SE:

Reflexión aplicada a una experiencia, para comprender cómo se desarrolló y por qué lo hizo de esa manera.

Interés en "organizar" elementos (prácticas, ideas, conocimientos) que se encuentran dispersos.  

Proceso de reflexión crítica orientado a la construcción de  conocimientos. 

Interés en mejorar las prácticas, producir aprendizajes y lecciones susceptibles de ser utilizadas.

Proceso colectivo y participativo, realizado fundamentalmente por los actores directos de la experiencia.

¿Qué es la SEE?

¿Cuál es el sentido de la SEE?

Construir conocimiento “situacional” – enriquecer la teoría

Comprender y mejorar las prácticas educativas y sociales

Enriquecer la formación de los actores sociales

Compartir aprendizajes construidos en la práctica

Legitimar experiencias inéditas, silenciadas

Desarrollar capacidades para cambiar relaciones de poder

Aquí se tratará la obsolescencia. Es decir, el desajuste entre el mundo formal de lo educativo y los sistemas más grandes en los que se inscribe su accionar. La idea de que hay una tal obsolescencia y que este es el problema principal a enfrentar, se basa en la clara evidencia de que la educación formal sigue centrada en la enseñanza, en el docente, en el aula, en la pizarra, en los textos, en los programas y en los exámenes. Alvarado,2007.

Papert (1987), no nos deja dudas sobre la insuficiencia del aula: “Considero que el aula es un ambiente de aprendizaje artificial e ineficiente que la sociedad se ha visto obligada a inventar debido a que sus ambientes informales fallan en ciertos dominios esenciales del aprendizaje, como la escritura, la gramática o la matemática escolar”.

El problema de la obsolescencia empieza a gestarse en la segunda mitad del Siglo XX y hacia finales de centuria, es evidente que hay una tensión desgastadora entre el reducido mundo del aula y el huracán provocado por la revolución de Internet y los medios digitales. El resultado es la pérdida de vigencia total de la educación formal. Los jóvenes no solo encuentran más atractivo el mundo exterior al centro educativo, al aula, sino que sus aprendizajes se obtienen mayoritariamente fuera de la escuela.

“Todas las nuevas tecnologías atraviesan el mismo patrón de desarrollo. Sus primeros usos consisten en hacer de una nueva manera lo que ya se estaba haciendo; por ejemplo, los primeros filmes eran «teatro en fotografías», y muchas de las ideas actuales acerca de la utilización de los ordenadores en la educación simplemente ven los antiguos métodos escolares a través de una lente computacional. El surgimiento de una nueva cultura, con nuevas categorías de personas -en el caso del cine, los grandes directores, las estrellas, los magos de los efectos especiales- que realizan funciones que no habían sido imaginadas y eran básicamente inimaginables, toma tiempo.”(Papert en Resnick, 2001).

“El camino más enriquecedor para anticipar un desarrollo análogo en educación es observar con atención a los nuevos educadores emergentes….”(Papert en Resnick, 2001).

La tarea es detectar esas islas y tratar de entender qué ocurre y porqué.

En los parques zoológicos del África Oriental se experimenta una emoción tan grande que es imposible describirla. Ni los libros, ni las diapositivas, ni las películas, y menos aún los trofeos la pueden describir. Uno la siente cuando va allá. Las personas que los conocen pueden pasar horas enteras conversando sobre ellos pero los demás no pueden ni siquiera imaginarlos.

Peters y Waterman: En busca de la excelencia.

BUSCANDO ELEMENTOS MATEMATICOS EN EL BAILE DE LA CHAMPETA CRIOLLA

“Es posible que en muchas ocasiones no percibamos la matemática que hay a nuestro alrededor, nuestra ceguera se da a tal punto que hacemos de esta ciencia un ente puramente abstracto.”

Leonardo Álvarez Ruiz

¿QUÉ SISTEMATIZAR?

“Imaginemos a alguien que, viviendo en el siglo XIX, experimentara la necesidad de mejorar los medios de transporte.

Estaba convencido de que el camino hacia los nuevos métodos partía de una profunda comprensión de los problemas existentes.

De manera que comenzó un cuidadoso estudio de las diferencias entre los carruajes de caballos.

Documentó cuidadosamente por medio de los métodos más refinados cómo variaba la velocidad según la forma y el material de los diferentes tipos de ejes, cojines y técnicas de enjaezamiento”.

Como se sabe, ni el automóvil ni los aviones derivaron de un estudio detallado de los carruajes.

El conocimiento positivo de los aparatos educativos, de acuerdo con este estudio, no redundará en un esclarecimiento de las características que debe tener la educación del siglo que apenas empieza, ni de las estrategias necesarias para su puesta en marcha.