Evaluación de intervenciones educativas

con personas jóvenes y adultas: elementos para la

reflexión

Marianela Nuñez BarbozaUniversidad Pedagógica Nacional

México D.F, 22 de noviembre del 2012

UPN. Unidad AjuscoDiplomado: Fundamentos teórico-metodológicos para la educación de

personas jóvenes y adultas

Objetivo de la presentación

Compartir reflexiones acerca de ejercicios de evaluación en procesos educativos con

personas jóvenes y adultas

Fuente: conocimientos y saberes adquiridos en ejercicios de evaluación externa de

políticas, programas y proyectos de EPJA (del 2004 a la fecha)

Estructura de la presentación

I. Marco general: Educación de personas jóvenes y adultas con visión amplia

II. Asuntos clave con respecto a la evaluación

III. Particularidades de la evaluación a partir de las y los sujetos de EPJA

Marianela Nuñez Barboza marianela.nunez@hotmail.com

I. Concepción de EPJA de este análisis

• Acciones educativas con y para personas consideradas como jóvenes y/o adultas por su medio social

• Intervienen los sectores público, privado y especialmente el social

Los sujetos de la EPJA,con visión amplia,

incluyen a sujetos como los que se presentan a

continuación…

…indígenas…Fotos: Gloria Murga Elías

…jóvenes…

Fotos: Federico Gama: http://www.federicogama.com/

…migrantes…

Fotos: Federico Gama: http://www.federicogama.com/

…trabajadores…

Fotos: Federico Gama: http://www.federicogama.com/

…personas con discapacidad…

Fotos: Decisio

… esas personas están en contextos muy diversos… aunque en general, en el caso de América Latina, experimentan pobreza,

exclusión y/o marginación por diversas causas…

Lugar 3 / Concurso COMIE X / Emmanuel Cortés Díaz

…adultos mayores en el medio rural…

…adultos mayores en el medio urbano…

Fotos: Decisio

…están en el taller, en el campo, en el museo…

Fotos: Decisio

…en el reclusorio…

Fotos: Decisio

Foto: Marianela Núñez

…en sus comunidades…

Marianela Nuñez Barboza marianela.nunez@hotmail.com

I. Concepción de EPJA de este análisis

• Luego, las intervenciones educativas en EPJA son prácticas educativas (con o sin certificación) muy diversas: alfabetización; educación básica; educación para y en el trabajo; salud (nutrición, salud sexual y reproductiva, etc.); desarrollo comunitario; micro-emprendimientos; formación ciudadana; educación ambiental; equidad de género; etc.

• Propósito general: logro de aprendizajes (educación y/o formación) de las personas en, para y a lo largo de la vida

II. Asuntos clave con respecto a la

evaluación

Momentos y objetos de evaluación por cada momento

Diagnóstico (necesidades PO)

Propuesta (objetivos, metas, estrategias, actores, recursos,

cronograma, presupuesto)

Efectos (cambios en los sujetos)

Impactos (cambios en sus condiciones

de vida

Procesos de implementación

(pedagógicos y de gestión)

Resultados inmediatos

Antes Durante Después

Marianela Nuñez Barboza marianela.nunez@hotmail.com

1) Se trata de “Evaluaciones”, es plural…por lo tanto hay que delimitar el

objeto de estudio de cada ejercicio

Ejemplo de cómo delimitar el “objeto” de la evaluación utilizando tiempo, nivel y

dimensión de la intervención Antes de la

intervenciónDurante la

intervenciónDespués de la intervención

Macro

Meso

Micro

Admón. Pedagógico Admón. Pedagógico Admón. Pedagógico

Marianela Nuñez Barboza marianela.nunez@hotmail.com

2) Intervienen por lo menos dos “partes”, pero suele ser una relación asimétrica entre quién

evalúa y quién es evaluado…

La pasarelaGabriel FernándezLedesmaMéxico, Siglo XX

3) En esencia implica valorar más que juzgar

4) Es un proceso de generación de conocimiento –diferente de investigar y

sistematizar-. No debería ser un evento o requisito. Es mejor que surja desde la

planeación…

Los riesgos

5) Hay que ver más allá de lo que nos parece natural… más allá de lo evidente…

¿Qué no debería estar en esta imagen?

Los riesgos

6) Como ejercicio mental nos confronta directamente con nuestros prejuicios, especialmente aquellos de los que no somos conscientes…

Ejemplo del prejuicio más común…

¿Cuál procedimiento

de análisis es superior: el cuantitativo o el cualitativo? Depende del poder que tenga aquel al que le preguntemos…

7) ¿Qué optimiza a un ejercicio de evaluación?

La inteligencia

colectiva:

trabajo interdisciplinario

Entonces, para evaluar debemos determinar objetos de estudio, preguntas, marcos de análisis, datos, fuentes, mecanismos de recolección y análisis, criterios ¿Cómo ordenamos?Hay que hacer un plan de evaluación…

Aspecto a analizar Momento de la intervención

Etapas Antes Durante (EPJA) Después

Posibles objeto(s) de estudio en cada etapa

Diagnóstico Dimensión pedagógica: desarrollo de la práctica educativa

Resultados inmediatos

Propuesta Dimensión administrativa: desarrollo de los procesos y actividades necesarias para que ocurra la práctica pedagógica

Efectos (corto/mediano plazo)

Impactos (mediano/largo plazo)

Criterios (algunos) Pertinencia, Relevancia, Coherencia interna, Impactos esperados, Sustentabilidad, Transferibilidad

Eficacia, Eficiencia (Costos+ gastos/insumos), Efectividad, Sinergias

Pertinencia, Relevancia, Eficacia, Eficiencia, Efectividad, Impactos (esperados, no esperados, positivos, negativos), Sustentabilidad, Transferibilidad

Pregunta (s) de investigación (depende de cada etapa y de las decisiones de los actores involucrados)

Estrategia para responder la(s) preguntas de investigación

Marcos: contextual, conceptual, teórico, hipótesis

Estrategia de recolección de los datos: mecanismos, técnicas, instrumentos

Estrategia de análisis de datos Marianela Nuñez Barboza

marianela.nunez@hotmail.com

III. Particularidades de la evaluación a partir de las y los sujetos de EPJA

• Son sujetos que tienen una trayectoria de vida, lo que implica que ya tienen aprendizajes. Hay que recuperar eso en la evaluación (no llegan “en el vacío”).

• En el caso de la EPJA en su mayoría son personas que han experimentado pobreza, marginación, exclusión, lesiones en sus derechos. Hay que considerar el contexto a la hora de definir y ponderar los logros (la “línea de base” suele estar más abajo).

* Los mecanismos de recolección de datos deben adaptarse a las necesidades y

características de las/los sujetos

En su mayoría son sujetos que han sido “estigmatizados” (“rezagados”, “analfabetas”, “ignorantes”). Hay que considerar en la evaluación si han o no internalizado “el estigma” (para analizar los logros)

Lugar 4 / Concurso COMIE X / Gloria García Ramírez

Estos sujetos provienen de contextos diversos. La evaluación debe reconocer y caracterizar esto desde la planeación del ejercicio hasta la devolución de los resultados, adaptando los medios y lenguajes para comunicar los resultados.

Pero es muy importante llegar hasta donde están los sujetos evaluados, tanto para recolectar datos

como para devolver resultados

• Son sujetos educativos cuya motivación para estar en las intervenciones educativas suele ser “autónoma”. Por ello, para quedarse en una intervención esperan que lo que obtienen de ella tenga una utilidad en sus vidas de forma concreta. Por lo tanto, su manera de ponderar los logros no necesariamente coincide con las motivaciones y discursos de quienes encargan las evaluaciones, y esto hay que relevarlo en los ejercicios de evaluación.

Revista Decisio del CREFALNo. 25 dedicado a la evaluación en EPJAContiene relatos de experiencias de evaluación en EPJA desde evaluaciones de aprendizajes hasta reflexiones para guiar la evaluación de políticas

Recurso recomendado

Disponible en: http://tariacuri.crefal.edu.mx/decisio/d25/index.php

• En resumen: no es evaluar (singular) y de manera tradicional (con exámenes) hacer ejercicios de evaluación en la EPJA.

• Requiere tener presente en todo momento la singularidad y diversidad de las y los sujetos jóvenes y adultos con quienes se interactúa en el proceso.

¡Gracias por su atención!