Ejemplo Componentes¿Qué es Cómo hacerlo Importancia TdC?. Diseño I... · Ejemplo...

Cómo hacerlo Componentes ¿Qué es TdC? Importancia Ejemplo


Agenda

2


Profesor Leigh Linden

Leigh Linden es Profesor en el

Departamento de Economía de la University

of Texas at Austin. Su investigación se

centra en la capacidad de los servicios

sociales para mejorar el bienestar de los

niños, especialmente en áreas

empobrecidas. En este sentido, el Profesor

Linden ha analizado los procesos de

producción educativa y los problemas de

toma de decisiones en el núcleo familiar que

determinan la asignación de oportunidades

educacionales dentro de la familia.

Metodológicamente, Linden se especializa

en el uso de experimentos aleatorizados de

gran escala.

Profesor Asistente de

Economía

University of Texas, Austin

(Ph.D. Massachusetts

Institute of Technology)


Diseño I Lógica de programa y teoría de cambio Leigh Linden

Profesor Asistente de Economía y Asuntos Públicos


[email protected]

4

mailto:[email protected]


Objetivos de aprendizaje

Al finalizar esta presentación serán capaces

de:

1. Entender la función que desempaña la Teoría de

Cambio y su rol dentro del marco común de una

evaluación

2. Definir y distinguir entre niveles de resultados usando el

material de referencia presentado

3. Elaborar una Teoría de Cambio para su propio proyecto

5


Importance

Esquema

1. ¿Qué es la Teoría de Cambio?

2. Introducir ejemplo de un proyecto

3. Componentes principales

4. Cómo hacerlo

5. Importancia

How to Components Example What it is Big picture

6


1. ¿Qué es la Teoría de Cambio?


Importance How to Components Example

Nuestra meta: Aprender de evaluaciones rigurosas de programas

Evaluación

Evaluación de programas

Evaluación de impacto

Monitoreo RCTs

8


Para quiénes son las evaluaciones?

Académicos

Donantes

Sus constituyentes

Políticos / responsables de política

Tecnócratas

Implementadores

Proponentes, Escepticos

Beneficiarios


9


Componentes de una Evaluación de Programa Evaluación de necesidades

Teoría de Cambio

Evaluación de procesos

Evaluación de impacto

Análisis costo-efectividad

¿Cuál es el problema?

¿Cómo, en teoría, podemos

resolver el problema?

¿El programa funciona como

fue planificado?

¿Objetivos se cumplieron? ¿En

qué magnitud?

Dadas la magnitud y el costo

¿Cómo se compara con las

alternativas?


10


¿Qué es la Teoría de Cambio?

Una teoría de cambio es una hoja de

ruta que nos dice hacia donde vamos

(resultados) y cómo llegamos

(proceso).

11


En otras palabras….

“Creo que deberías ser más explícito aquí en el segundo paso.”

12


Hipótesis causal

P: ¿Cómo espero que se produzcan los resultados?

R: Si [insumos] y [actividades] producen [productos] esto debería conducir a [resultados] que al final contribuirán al [objetivo].

13


Usuarios y Utilidad

• Planes estratégicos y Desarrollo de

Proyectos

• Descripción / Comunicación

• Monitoreo y Evaluación

• Aprendizaje / Pensamiento

14


Utilidad de la Teoría de Cambio

Herramienta técnica

Forma de Pensar

TdC Cultura Política

15


Teoría de Cambio: Producto vs. proceso

“Pensar en la teoría de cambio es un hábito

no un producto.”

(Vogel 2012)

16


2. Ejemplo de un proyecto


Ejemplo: Un proyecto de tutorías en Chile Población objetivo: Jovenes

vulnerables en su último año de

educación secundaria

Insumo: Profesionales de

empresas selecionadas realizan

una tutoría one-to-one con

algunos de los estudiantes

Misión: Mejorar la transición del

colegio al trabajo, mejorar

participación en educación

terciaria

18


Visualizar Teoría de Cambio

INSUMOS / ACTIVIDADES

RESULTADOS INTERMEDIOS PRODUCTOS RESULTADOS

FINALES

Reclutar a mentores

Capacitar a mentores

Tutorías

Estudiantes seleccionados

reciben tutorías

Experiencia de trabajo

Mejor rendimiento educacional

Mayor matriculación a educ terciaria

Actitudes sobre educación y

trabajo

Conocimientos sobre educ superior y

mercado laboral

Preparación laboral

Habilidades de busqueda de

trabajo

Mejores redes sociales

Mayor valoración de redes sociales

Oportunidades percibidas de carrera prof.

Tipo de educación / ocupación

elegida

Expectativas de salarios

19

NECESIDADES

Tasas bajas de matriculación a educ. terciaria

Falta de información sobre educ superior y

mercado laboral

Redes sociales y oportunidades

de trabajo limitados


3. Componentes


Necesidades Insumos Actividades Productos Resultados Objetivos

Nivel de resultados

Recursos Acciones Productos y servicios

Actitudes Conocimientos

Capacidades Comportamiento

(ACCC)

Estado de desarrollo

Instituciones / Contexto

21



22

Nivel de resultados



ACCC




23

Nivel de resultados



ACCC




24

Nivel de resultados



ACCC




25

Nivel de resultados



ACCC




26

Nivel de resultados



ACCC




27

Nivel de resultados



ACCC



Supuestos

Supuesto:

Una condición externa necesaria y positiva

que debe cumplirse para que la cadena

causal y el efecto (en una intervención)

avancen.

28


Supuestos: Ejemplo Proyecto de Tutoría

Aumenta la auto-confianza de los

estudiantes

Estudiantes postulan a

instituciones de educación terciaria

29


Componentes principales de TdC

Normalmente, una Teoría de Cambio:

• Incluye un diagrama (ver arriba)

• Incluye un breve resumen de tu hipótesis

(Si...entonces...).

• Incluye una narrativa: un relato breve y

convincente que explica la ruta

30


4. ¿Cómo hacer una TdC?


¿Cómo hacerlo? – Hacía atrás

El diseño de una Teoría de Cambio se elabora para atras

• Empieza con tu evaluación de necesidades

• Salta a tu impacto deseado / estado de desarrollo

• Identifica los diferentes ACCCs y la relación entre ellos (mapeo de resultados)

• Define los productos e insumos de tu intervención

• Discute los supuestos

32


¿Cómo hacerlo?

Inputs Activitie

s Outputs Outcomes Goal

vs.

33


Ejemplo II: Un programa de transferencias monterias condicionadas (TMC) en Colombia

Población objetivo:

Estudiantes de secundaria de

bajos recursos

Insumos: Estipendio a

estudiantes condicionado en su

asistencia escolar

Misión: Mejorar tasas de

asistencia y graduación en la

educación secundaria; mejorar

puntajes de prueba

34


TMC: Teoría de Cambio

35

NECESIDAD


PRODUCTOS RESULTADOS RESULTADOS FINALES


36

Altas tasas de deserción en

educ secundaria

Costos de oportunidad

altos por tiempo de estudiantes

Altos costos para ahorrar


PRODUCTOS RESULTADOS RESULTADOS FINALES


INSUMOS / ACTIVIDADES RESULTADOS PRODUCTOS

RESULTADOS FINALES

NECESIDAD


37

Menos deserción

Mejores tasas de asistencia

Mejores puntajes en pruebas



RESULTADOS FINALES

NECESIDAD


PRODUCTOS RESULTADOS


educ secundaria





38

Mejor acceso a fondos cuando

estudiantes necesitan pagar gastos escolares

Más recursos destinados a

gastos educacionales

Posibles cambios en asignación de

recursos entre niños del hogar

Reducción número de estudiantes

trabajando



RESULTADOS FINALES

NECESIDAD


PRODUCTOS


educ secundaria




Menos deserción




39

Estudiantes que cumplen

objetivos de asistencia

reciben pago

Pago se efectúa en periodos establecidos



RESULTADOS FINALES

NECESIDAD



educ secundaria




Menos deserción










trabajando


40

Registrar estudiantes para

pago de estipendio

Entregar tarjetas bancarias a estudiantes

Recolección de datos de

asistencia

Administrar pagos cuándo corresponde



RESULTADOS FINALES

NECESIDAD


educ secundaria




Menos deserción










trabajando

Estudiantes que cumplen

objetivos de asistencia

reciben pago

Pago se efectúa en periodos establecidos


5. Importancia


Teoría de Cambio y la Vida de un Proyecto

Definir pregunta de investigación

Establecer intervención Diseñar experimento de

campo Levantamiento de datos

Entrada de datos Monitoreo de intervención

Análisis Difusión & Política

42


Definir pregunta de investigación

Establecer intervención Diseñar experimento de

campo Levantamiento de datos

Entrada de datos Monitoreo de intervención

Análisis Difusión & Política

43

Teoría de Cambio y la Vida de un Proyecto


Teoría de Cambio permite enfocarse en procesos y resultados

44

Para personas del programa, ayuda mantener el enfoque en los resultados - mirada en la meta Implementadores de programas normalmente están

preocupados por las actividades y los productos: ¿Cuántas capacitaciones hemos realizado? ¿A cuántos beneficiarios hemos alcanzado?

Deberíamos alejarnos de hacer intervenciones por hacer intervenciones hacia desarrollo que explícitamente cumple con objetivos y metas de mayor alcance.

Para evaluadores, nos recuerda considerar los procesos Evaluadores están muy enfocados en evaluar cambias en

resultados. Pero a veces se hace la vista gorda en cuento a cómo ese cambio ocurrió.

Llamamos a esto el problema de la caja negra.


Problema de caja negra: Juventud y empleo

Problema: Jóvenes desempleados

Intervención: Desembolso de préstamos

45


Resolver el problema de la caja negra

Jóvenes están motivado a crear negocios

Préstamos distribuídos a jóvenes

Intervención

Jóvenes usan préstamos para comprar ropa

Intervención diseño/Insumo

Actividades

Resultados

Resultado final

Supuestos

Productos

Jóvenes usan préstamos para crear negocios

Facilitar grupos de préstamos y distribuir préstamos a jóvenes

No hay crecimiento en empleo juvenil

Bajo empleo juvenil Evaluación de necesidades

Caja Negra


Insumos Actividades Productos Resultados Objetivo

Identificando fallo en teoría vs. fallo en implementación

Intervención exitosa

Implementación fallida

Teoría fallida




En vez de un resumén – promover mejor desarrollo de teorías ¿Cuál es tu pregunta de investigación?

¿Cómo esperas que tu programa resuelva el problema?

¿Cómo diseñas tu intervención o cómo analizas una intervención dada?

¿Cuál es tu explicación si no funciona el programa?

¿Qué quieres medir, y cuándo?

¿Cómo estrúcturas tu análisis de datos?

¿Qué conclusiones puedes extraer y comunicar a las partes interesadas?

48


¡Gracias!

Leigh Linden

Profesor Asistente de Economía y Asuntos Públicos


[email protected]

49

mailto:[email protected]


Apéndice I: Terminología de niveles de resultados


Nivel de resultados

Línea de tiempo

Cortes de referencia

Grados de control Dominios del cambio

Objetivos Largo-plazo Después del proyecto o 5-10 años

Marginal Sociedad, nivel de población o sistema • Estado de desarrollo

económico o social

Resultados Intermedio Final del proyecto

Parcial ACCC • Actitudes • Conocimientos • Capacidades • Comportamientos

Productos En curso Durante el proyecto

Completo a parcial (supuestos y riesgos)

Productos y servicios (Acceso)

Actividades Día-a-día Durante el proyecto

Completo

Insumos Inicial Al comienzo y durante el proyecto

Completo

Apéndice II: Nivel de resultados: Resumen

El M&E Proyecto de Apoyo tiene dos areas de actividad

principales: la provisión de capacitaciones de M&E a partners

ONG activos; y la documentación en formato de caso de estudio

de los retos y prácticas de M&E de las ONGs. Estas actividades

resultarán en un número de partners ONGs activos que estarán

capacitados en M&E, así como un libro escrito y publicado sobre

el tema de marcos adecuados para M&E. Estos productos

facilitarán la adquisición de conocimientos, actitudes positivas y

capacidades relacionados a marcos adecuados de M&E por

parte de ONGs de desarrollo. Estos cambios deberían resultar

en una mejora en la práctica de M&E adecuados por parte de

ONGs de desarrollo, lo cual contribuirá a un desarrollo mundial

más efectivo y eficiente.

Apéndice III: Ejemplo de narrativa Teoría de Cambio: M&E Proyecto de Apoyo

Ejemplo Componentes¿Qué es Cómo hacerlo Importancia TdC?. Diseño I... · Ejemplo...

Documents

Transcript of Ejemplo Componentes¿Qué es Cómo hacerlo Importancia TdC?. Diseño I... · Ejemplo...