STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y...

52
1 Octubre de 2016 PROGRAMA LAZOS DE AGUA 2 ESTRATEGIA DE MONITOREO, EVALUACIO N Y APRENDIZAJE Documento de trabajo Octubre de 2016

Transcript of STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y...

Page 1: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

1 Octubre de 2016

PROGRAMA LAZOS DE AGUA 2

ESTRATEGIA DE MONITOREO, EVALUACIO N Y APRENDIZAJE

Documento de trabajo

Octubre de 2016

Page 2: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

2 Octubre de 2016

I NDICE

Contents LISTA DE ACRÓNIMOS ............................................................................................................................... 4

RESUMEN EJECUTIVO .........................................................................................................................5 PARTE I - INTRODUCCIÓN ..................................................................................................................... 5 PARTE II - PERFIL DEL PROGRAMA ....................................................................................................... 5 PARTE III - ESTRATEGIA MEL ................................................................................................................. 6

PARTE I - INTRODUCCIÓN ...................................................................................................................9 1.1 CONTEXTO DE WASH EN LA REGIÓN LAC.................................................................................................... 9 1.2 PROPÓSITO DE ESTE DOCUMENTO ............................................................................................................ 10

PARTE II - PERFIL DEL PROGRAMA .................................................................................................... 10 2.1 EL ENFOQUE DEL A•B•C PARA LA SOSTENIBILIDAD ..................................................................................... 10

2.1.1 El componente “A” (Acceso) ...................................................................................................... 10 2.1.2 El componente “B” (Cambio de comportamiento) .................................................................... 11 2.1.3 El componente “C” (Capital) ...................................................................................................... 16

2.2 PRINCIPIOS RECTORES QUE SUSTENTAN LA IMPLEMENTACIÓN DEL ABC DE LA SOSTENIBILIDAD ........................... 17 2.3 ENFOQUE DEL PROGRAMA LAC ............................................................................................................... 19

2.3.1 Impacto colectivo ...................................................................................................................... 19 2.3.2 Marco lógico del programa LAC ................................................................................................ 20 2.3.3 Modelos de intervención ........................................................................................................... 22

2.4 PROYECTOS EN CARTERA ......................................................................................................................... 23

PARTE III: ESTRATEGIA MEL .............................................................................................................. 25 3.1 DESCRIPCIÓN GENERAL DE LA ESTRATEGIA MEL .......................................................................................... 25

3.1.1 Enfoque MEL .............................................................................................................................. 25 3.1.2 Componentes de la estrategia MEL .......................................................................................... 25

3.2 INDICADORES ........................................................................................................................................ 26 3.1.1 Indicadores clave de programa ................................................................................................. 26 3.2.2 Indicadores de proyecto adicionales ......................................................................................... 27 3.2.3 Porcentaje de beneficiarios ....................................................................................................... 31

3.3 MONITOREO......................................................................................................................................... 32 3.3.1 Enfoque de monitoreo ............................................................................................................... 32 3.3.2 Plan MEL de proyecto ................................................................................................................ 34 3.3.3 Recopilación y almacenamiento de datos ................................................................................ 34 3.3.4 Generación de informes de datos (sistemas de generación de informes)................................. 35

3.4 EVALUACIÓN ........................................................................................................................................ 38 3.4.1 Evaluación – A nivel de proyecto ............................................................................................... 38 3.4.2 Evaluación – A nivel de programa ............................................................................................. 40

Page 3: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

3 Octubre de 2016

3.5 GESTIÓN DEL CONOCIMIENTO Y APRENDIZAJE ............................................................................................ 41 3.5.1 Enfoque del aprendizaje ............................................................................................................ 41 3.5.2 Actividades de desarrollo de capacidades y aprendizaje .......................................................... 41 3.5.3 Gestión del conocimiento .......................................................................................................... 43

PARTE IV: IMPLEMENTACIÓN DE MEL ............................................................................................... 45 4.1 ROLES Y RESPONSABILIDADES................................................................................................................... 45 4.2 PRESUPUESTO ....................................................................................................................................... 47 4.3 DESAFÍOS Y MEDIDAS DE MITIGACIÓN ....................................................................................................... 47

4.3.1 Coherencia en la definición y medición de los indicadores ....................................................... 47 4.3.2 Análisis de atribución frente a contribución .............................................................................. 48 4.3.3 Medición de los indicadores cualitativos de cambio del comportamiento ............................... 48

4.4 CONCLUSIÓN ........................................................................................................................................ 48

REFERENCIAS ................................................................................................................................... 49

ANEXOS ........................................................................................................................................... 50 ANEXO 1– HERRAMIENTAS DE RECOPILACIÓN DE DATOS .................................................................................... 50

Lista de tablas

Tabla 1 – Indicadores clave de programa ..................................................................................................... 6 Tabla 2 – Paquete de arte social para impulsar el cambio ......................................................................... 14 Tabla 3 – Modelos de programa LAC .......................................................................................................... 23 Tabla 4 – Resumen de programa ............................................................................................................... 24 Tabla 5 – Indicadores clave de programa ................................................................................................... 27 Tabla 6 – Lista de indicadores adicionales a nivel de proyecto .................................................................. 28 Tabla 7 – Lista de indicadores de productos .............................................................................................. 30 Tabla 8 – Descripción general de preguntas de evaluación de proceso para el componente B ................ 38 Tabla 9 – Roles y responsabilidades para establecer los sistemas MEL ..................................................... 46 Tabla 10 – Roles y responsabilidades para el monitoreo, la evaluación y el aprendizaje continuos ......... 46

Lista de figuras

Figura 1 – Enfoque ABC .............................................................................................................................. 11 Figura 2 – Sistematización del componente B ............................................................................................ 15 Figura 3 – Estrategia del componente C ..................................................................................................... 17 Figura 4 – Marco lógico del programa LAC ................................................................................................. 21 Figura 5 – Tabla de flujo de informes ......................................................................................................... 37 Figura 6 – Evaluaciones a nivel de proyecto y programa ........................................................................... 40

Page 4: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

4 Octubre de 2016

LISTA DE ACRÓNIMOS

ABC Acceso, comportamiento, capital (por sus siglas en inglés)

JMP Programa de monitoreo conjunto

CAP Conocimientos, actitudes y prácticas

LAC Latinoamérica y el Caribe

MEL Monitoreo, evaluación y aprendizaje (por sus siglas en inglés)

IMF Institución microfinanciera

ONG Organización no gubernamental

SBCC Comunicación para cambios sociales y de comportamiento (por sus siglas en inglés)

ODS Objetivos de desarrollo sostenible

PYME Pequeñas y medianas empresas

UNICEF Fondo de las Naciones Unidas para la Infancia (por sus siglas en inglés)

WASH Agua, saneamiento e higiene (por sus siglas en inglés)

OMS Organización Mundial de la Salud

Page 5: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

5 Octubre de 2016

RESUMEN EJECUTIVO PARTE I - INTRODUCCIÓN

Durante la última década, el nivel de acceso a los servicios de saneamiento y agua potable ha aumentado de forma importante en Latinoamérica y el Caribe (LAC). Sin embargo, los Objetivos de Desarrollo Sostenible (ODS) presentan desafíos importantes en el sector del agua y el saneamiento, incluso para la región de LAC, como la universalización de los servicios. El logro de estos objetivos ambiciosos debe ir de la mano con las mejoras del uso adecuado y sostenible de las instalaciones y prácticas de higiene adecuadas. Para abordar el desafío de la sostenibilidad en el sector de agua, saneamiento e higiene (WASH), un grupo de organizadores (conveners) unieron sus fuerzas para crear un programa especial en Latinoamérica y el Caribe. El Programa LAC es una iniciativa de 5 años financiada por el Banco Interamericano de Desarrollo, la Fundación One Drop, la Fundación Coca Cola y la Fundación FEMSA para apoyar a los gobiernos hacia el Objetivo 6: “Garantizar el acceso a agua y saneamiento para todos”.

El propósito de este documento es describir el enfoque armonizado que adoptará el Programa LAC para la estrategia de monitoreo, evaluación y aprendizaje (MEL) del programa como un todo. En este documento se describe la comprensión compartida de los organizadores, como miembros del Comité Directivo del Programa y el Comité MEL, sobre la forma en que el Programa LAC medirá el progreso y contribuirá al aprendizaje y la creación de conocimientos en el sector WASH. También sirve como guía para los socios del programa en todos los niveles del enfoque general de MEL a un nivel estratégico.

PARTE II - PERFIL DEL PROGRAMA

El Programa LAC son los esfuerzos combinados de las diferentes partes interesadas en WASH (organizadores, socios ejecutores, gobierno nacional, sector privado, academia y los interesados de la sociedad civil) para ampliar la aplicación del enfoque del A-B-C para la sostenibilidad de One Drop y lograr resultados más sostenibles en el sector de WASH. Este enfoque combina el Acceso "A" mejorado al agua segura y el saneamiento, mientras utiliza el arte social y otros enfoques de comunicación para impulsar el cambio del comportamiento y cambios de normas sociales "B" (por su definición en inglés, Behavior) con respecto a las prácticas de higiene adecuadas y aquellas relacionadas al agua. Facilitar un mayor acceso a capital "C" para los servicios y las empresas relacionados con WASH garantiza un enfoque basado en el mercado e impulsado por la demanda de acceso continuo a los productos y servicios de WASH.

Se desarrolló una cartera de proyectos preliminar para Guatemala, Colombia, Nicaragua y Paraguay. La componente Acceso cubrirá diferentes tipos de intervenciones, como la nueva construcción de los sistemas WASH, la rehabilitación de la infraestructura y las mejoras a los niveles de servicio. La forma en que se combinarán las intervenciones de diferentes socios que trabajan en los componentes de Acceso, Cambio de comportamiento y Capital en un solo programa seguirá a dos modelos, uno en el cual las intervenciones de acceso (A), cambio de comportamiento (B) y capital (C) se financian mediante los organizadores del Programa LAC y otro donde los socios gubernamentales cubrirán el componente A y el Programa LAC llevará a cabo los componentes B y C.

Page 6: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

6 Octubre de 2016

PARTE III - ESTRATEGIA MEL

Los objetivos generales de la estrategia MEL son:

Establecer una visión del impacto colectivo al que los socios del programa (organizadores, socios ejecutores, gobiernos) apuntan en el sector WASH de la región LAC.

Generar lecciones aprendidas y recopilar evidencia de alta calidad para apoyar la toma de decisiones del programa e incidir en las políticas públicas.

La estrategia MEL cuenta con tres componentes principales: (i) Monitoreo, (ii) Evaluación y (iii) Aprendizaje y Gestión del Conocimiento:

Monitoreo

El propósito del sistema de monitoreo del programa LAC es hacer un seguimiento continuo del progreso de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa sobre la forma en que se pueden mejorar las intervenciones. One Drop liderará la implementación de los sistemas necesarios para el monitoreo, la evaluación y el aprendizaje a nivel de programa.

El Programa LAC cuenta con un conjunto de indicadores clave de programa para medir los resultados del programa como un todo. Los indicadores clave de programa se basan en estándares del sector, en particular en las recomendaciones de los ODS. Los indicadores clave de programa medirán los efectos del programa en los individuos, los hogares, las comunidades y en la influencia en las políticas y en los programas gubernamentales nacionales del sector WASH.

Tabla 1 – Indicadores clave de programa

AC

CES

O

A1: Número de hogares con servicios de agua potable segura (servicios de agua mejorados y nuevos) Desglose de hogares con nuevos servicios de agua y número de hogares con servicios mejorados

1

A2: Número de hogares con servicios adecuados de saneamiento Desglose de hogares con nuevos servicios de saneamiento y número de hogares con servicios

mejorados 2

A3: Número de hogares con instalaciones de lavado de manos con jabón y agua

CO

MP

OR

TAM

IEN

TO

B1: Número de hogares que usan los servicios de agua potable gestionados de manera segura

B2: Número de hogares que usan servicios de saneamiento gestionados de manera segura

B3: Número de individuos o casas que practican conductas WASH efectivas (específicamente conductas WASH específicas por proyecto, como el lavado de manos, pago de tarifas, etc.)

Desglosado por género, personas con discapacidades y otros grupos vulnerables

CA

PIT

AL

C1: Promedio de crecimiento de ventas anuales de pequeñas y medianas empresas relacionadas con WASH (por confirmar)

1 Los servicios de agua mejorados se refieren a los sistemas rehabilitados o los sistemas en que los servicios de agua (como de

funcionamiento y mantenimiento, calidad del agua, etc.) se mejoraron 2 Los servicios de saneamiento mejorados se refieren a los sistemas rehabilitados o los sistemas en que los servicios de saneamiento (como eliminación segura de excrementos, instalación no compartida, etc.) se mejoraron

Page 7: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

7 Octubre de 2016

En cada proyecto se aplicarán los indicadores centrales de programa. Se han identificado indicadores adicionales a nivel de proyecto que pueden usar los socios junto con otros indicadores que definan como pertinentes para el contexto de su proyecto en particular.

Los socios ejecutores recibirán una guía práctica para apoyarlos en el uso de los indicadores y recopilación de datos para monitorear y mejorar el rendimiento y los resultados. Se integrarán hojas de referencia con los indicadores centrales, que presentan la definición operativa, unidad de medida, las consideraciones de desglose, además del método de recopilación de datos.

Además, para apoyarlos en la integración de los componentes de estrategia MEL, además de los requisitos de generación de informes, y para fomentar la autonomía y responsabilidad en la implementación, los socios ejecutores también participarán en un taller práctico.

One Drop preparó una pauta que pueden usar los socios para preparar su propio Plan MEL, que incluye sus propios indicadores y marco lógico a nivel proyecto, y las técnicas que aplicarán al monitoreo y la evaluación. One Drop trabajará con un proveedor de servicios de informes en línea llamado Akvo para conceptualizar un sistema de informes en línea que permitirá la consolidación de información, lo que incluye los datos sobre indicadores, para la generación de informes a nivel de programa.

Evaluación

El componente de evaluación está diseñado para determinar la pertinencia, la efectividad, la eficiencia, el impacto o la sostenibilidad de los resultados definidos para el programa y cada una de las intervenciones del proyecto. La naturaleza exacta de las evaluaciones se planificará durante la implementación, pero se incluirán evaluaciones intermedias, evaluaciones al final del proyecto, evaluaciones posteriores a la implementación, evaluaciones de impacto, cuando corresponda, y evaluaciones multi-proyectos. Las evaluaciones generarán conocimiento para validar o ajustar la teoría de cambio del programa. Las evaluaciones les proporcionarán información a todos los socios sobre formas de mejorar las intervenciones actuales o planificar intervenciones futuras para lograr sostenibilidad, escalabilidad e influencia en las políticas.

Aprendizaje y gestión del conocimiento

El componente de aprendizaje será una prioridad para avanzar en el monitoreo y la evaluación a nivel de programa y proyecto, obtener lecciones aprendidas e integrarlas en la toma de decisiones sobre las instrucciones estratégicas de programa, además de entregar orientación para iniciativas futuras. El enfoque colectivo pone énfasis en el aprendizaje dentro de cada equipo de proyecto, pero también promueve el intercambio de conocimiento entre programas. Los procesos de aprendizaje ponen énfasis en la reflexión, el diálogo entre las partes interesadas, la creación de espacios a diferentes niveles para hacer preguntas y cuestionar suposiciones, y fomentan la retroalimentación de varias fuentes.

Las lecciones y el conocimiento relevantes y valiosos para el aprendizaje en el sector se documentarán mediante un sistema de gestión del conocimiento. El propósito de gestionar el conocimiento es aprender de otras personas, de manera que las actividades del proyecto que tengan como objetivo garantizar un acceso sostenible a los servicios de WASH se puedan mejorar de forma más eficiente y efectiva. Mientras las actividades de aprendizaje del programa tendrán como objetivo a público interno, las actividades de gestión de conocimiento y los productos de conocimiento se desarrollarán como parte de un diálogo con las partes interesadas externas al programa LAC. Los socios recibirán plantillas de productos de conocimiento y pautas para estandarizar el enfoque y promover la visibilidad de los esfuerzos de intercambio de conocimiento del programa. Cualquiera de los socios puede liderar el desarrollo de

Page 8: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

8 Octubre de 2016

productos de conocimiento basados en su experiencia y recursos variados. Esta estrategia MEL se revisará y evolucionará en el tiempo para garantizar que sus componentes estén firmemente arraigados en el programa y contribuyan a mejorar el conocimiento y las prácticas de los cambios de conductas relacionadas con WASH.

Page 9: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

9 Octubre de 2016

PARTE I - INTRODUCCIÓN

1.1 Contexto de WASH en la región LAC

Durante la última década, el nivel de acceso a los servicios de saneamiento y agua potable ha aumentado de forma importante en Latinoamérica y el Caribe (LAC). Sin embargo, las diferencias entre países y dentro de los mismos países (p. ej., áreas rurales y urbanas) todavía son importantes:

Más de 34 millones de personas todavía no tienen acceso a una fuente de agua mejorada.

Más de 106 millones no tienen acceso s una instalación de saneamiento adecuada.

Más de 200 millones de personas reciben servicios intermitentemente.

30% de los sistemas no funcionan o funcionan bajo especificaciones técnicas relacionadas con la cantidad de agua, la calidad o continuidad.

Los Objetivos de desarrollo sostenible presentan desafíos importantes en el sector del agua y el saneamiento. El objetivo 6 “Garantizar el acceso a agua y saneamiento para todos” incluye dos objetivos específicos que se deben abordar al 2030 “el acceso universal e igualitario a agua potable segura y asequible para todos” y “el acceso a saneamiento e higiene adecuados e igualitarios para todos, y el fin de la defecación al aire libre”.

El logro de estos objetivos ambiciosos debe ir de la mano con las mejoras del uso correcto y sostenible de las instalaciones y prácticas de higiene adecuadas. Las actividades de desarrollo de capacidades y fortalecimiento institucional se han desarrollado tradicionalmente para abordar el mal uso de las letrinas, el consumo excesivo de agua, la baja conectividad, el lavado de manos no adecuado, el almacenamiento de agua no adecuado o la poca voluntad de pagar tarifas de agua. Sin embargo, los resultados se han limitado y no hay suficientes datos sólidos relacionados con el impacto en el cambio del comportamiento y, por consiguiente, en la salud y el bienestar de los beneficiarios.

Para abordar el desafío de la sostenibilidad en el sector WASH, un grupo de organizadores unieron sus fuerzas para crear un programa especial en Latinoamérica y el Caribe. El Programa LAC es una iniciativa de 5 años financiada por el Banco Interamericano de Desarrollo, la Fundación One Drop, la Fundación Coca Cola y la Fundación FEMSA para apoyar a los gobiernos hacia el ODS 6. Este programa busca influir en la política de gobierno para integrar los enfoques basados en el mercado y de cambio del comportamiento para proporcionar productos y servicios WASH a iniciativas nacionales. El programa LAC se centra en la colaboración para obtener una eficiencia mayor entre sectores en pos de los servicios WASH sostenibles, el fomento del cambio de comportamiento mediante el arte social para la adopción de prácticas sostenidas y adecuadas de WASH a todos los niveles y la gestión del impacto. En resumen, el Programa LAC es un programa WASH innovador centrado en el cambio de comportamiento para proporcionar acceso universal y sostenible al agua, el saneamiento y la higiene en Latinoamérica y el Caribe, de forma de mejorar la salud y las condiciones de vida en la comunidades rurales y periurbanas.

Page 10: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

10 Octubre de 2016

1.2 Propósito de este documento

El propósito de este documento es describir el enfoque armonizado que adoptará el Programa LAC para el monitoreo, la evaluación y el aprendizaje del programa como un todo. En este documento se describe la comprensión compartida de los organizadores, como miembros del Comité Directivo del Programa y el Comité MEL, sobre la forma en que el Programa LAC medirá el progreso y contribuirá al aprendizaje y la creación de conocimientos en el sector WASH. También sirve como guía para los socios del programa en todos los niveles del enfoque general de MEL a un nivel estratégico. Se desarrollarán orientaciones más detalladas sobre los indicadores, los Planes MEL y la generación de informes para el uso de los socios ejecutores del proyecto. Se proporcionará un taller de capacitación para apoyar a los socios ejecutores a entregar los requisitos de MEL a nivel de proyecto.

En la Parte II se describe el Programa LAC, el enfoque del ABC de la sostenibilidad que se seguirá, la teoría del cambio y la cartera de proyectos preliminar. En la Parte III se describe la estrategia MEL, los indicadores clave de programa y los indicadores adicionales de proyecto a nivel de resultados, los mecanismos y el enfoque de monitoreo, los tipos principales de evaluaciones que se realizarán y las técnicas de aprendizaje y gestión del conocimiento que se aplicarán. En la Parte IV se presenta una descripción de la manera en que se implementará la estrategia en términos de líneas de tiempo, presupuesto de responsabilidades y roles, y se abordan algunos desafíos clave.

PARTE II - PERFIL DEL PROGRAMA

2.1 El enfoque del A•B•C para la Sostenibilidad

El Programa LAC se basa en el enfoque del A•B•C para la sostenibilidad de One Drop y otras prácticas innovadoras de los socios de programa para identificar colectivamente las soluciones a los desafíos que se enfrentan en el sector WASH, y abordar la naturaleza sistémica de sus causas y soluciones.

El programa LAC se basará en una intervención integral llamada el A•B•C for Sustainability™ (A•B•C para la sostenibilidad) para impulsar el cambio en el sector del agua y saneamiento. Para abordar las causas sistémicas del desafío WASH, el enfoque se desarrolla según tres componentes que funcionan en sinergia. Estos son flexibles y se pueden adaptar a los cambios, y reconocen la importancia de crear y habilitar un entorno para el acceso sostenible a WASH.

Según un proceso participativo, el enfoque establecerá unas bases sólidas en las que las comunidades objetivo pueden alcanzar su máximo potencial y crear el entorno propicio para el cambio. La secuencia y sinergia entre los componentes de acceso, cambio del comportamiento y capital del Programa LAC se documentan en la Teoría del cambio (consulte el modelo lógico del programa). A continuación se presenta una descripción de los cambios deseados que se logran mediante estos tres componentes interrelacionados.

2.1.1 El componente “A” (Acceso) tiene como objetivo mejorar el acceso al agua potable y saneamiento adecuados y asequibles mediante la creación y rehabilitación de infraestructura para los hogares, escuelas, centros de salud e instituciones públicas, el desarrollo de capacidades de los socios y gobiernos, y el apoyo administrativo local para la entrega de servicios mejorados. A medida que el acceso varía entre los contextos locales y de países, los estándares del sector WASH internacionales, como los

Page 11: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

11 Octubre de 2016

objetivos de desarrollo sostenible, informa la manera en que el Programa LAC define el acceso sostenible al agua y el saneamiento. Con base en los descubrimientos de un estudio completo de diagnóstico de WASH que integra una evaluación de las necesidades y un proceso de investigación formativa realizado en las etapas iniciales del diseño de proyecto o programa, las intervenciones específicas de WASH se diseñarán e implementarán de acuerdo a los contextos y las necesidades locales (organizaciones comunitarias, disponibilidad de recursos, confiabilidad de la infraestructura, etc.).

Figura 1 – Enfoque ABC

2.1.2 El componente “B” (Cambio de comportamiento)

Uno de los elementos clave que lleva a la sostenibilidad de los beneficios derivados de los proyectos WASH es la adopción sostenida de prácticas de buena higiene, saneamiento, gestión del agua y ambiental, que puede requerir cambios de las creencias, los conocimientos, las actitudes, las prácticas y comportamientos de las personas. De hecho, comprender la necesidad de proteger las fuentes de agua y evitar las enfermedades relacionadas con el agua adoptando prácticas de higiene es esencial para mejorar la salud de la población en el largo plazo. El desarrollo de actividades de comportamiento específicas y personalizadas que complementen y refuercen la infraestructura WASH, la buena gestión y dirección es nuestra respuesta para el desafío de sostenibilidad que enfrentamos en el sector WASH.

El cambio del comportamiento no pasa de un día para otro, sino que es el resultado de esfuerzos continuos dedicados a:

Generar conciencia y promover el diálogo sobre los problemas que se deben abordar

Movilizar a la población meta con respecto a la importancia de tomar acción

Popularizar normas y comportamientos WASH saludables

Impulsar el proceso de cambio individual y colectivo.

En el sector WASH, los comportamientos más comunes son los hábitos domésticos (lavado de manos con jabón, tratamiento, transporte y almacenamiento del agua, uso de letrinas) y otros comportamientos

Acceso sostenible

Comportamiento

Capital

Page 12: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

12 Octubre de 2016

realizados con menor frecuencia, como el funcionamiento y mantenimiento de los sistemas y la tecnología WASH, y el pago de las tarifas de usuario.

El enfoque de arte social de One Drop cabe dentro del marco socioecológico (Sallis, Owen & Fisher, 2008) que considera:

Varios niveles de factores que influyen en el cambio de comportamiento y social

Entre los niveles de factores se pueden incluir: individual, interpersonal, comunitario/de organizaciones y nacional/político/ambiental

Las influencias interactúan en todos los niveles

Las intervenciones de varios niveles que abordan diferentes influencias son más sólidas y potencialmente sostenibles que las intervenciones a nivel individual

¿Por qué usar arte social para el cambio de comportamiento?

Por definición, el arte social es el uso de formas de arte como herramientas para abordar problemas sociales. El uso del arte social es un proceso creativo y participativo que tiene como objetivo facilitar y promover el cambio positivo individual y colectivo. “Las artes no solo estimulan, movilizan y entretienen a las personas; sino que también pueden instarlos con mucha efectividad a que piensen, sientan y actúen de forma diferente” (Adison, 2014). Basado en proyectos piloto, estudios de caso y los 10 años de experiencia de One Drop implementando el arte social para el cambio del comportamiento, el Programa LAC aplicará las artes sociales como un medio poderoso y participativo para catalizar el cambio del comportamiento y fortalecer las normas sociales positivas relacionadas con WASH.

One Drop cree en el poder de las artes sociales para un público meta específico, basadas en evidencia como catalizador para movilizar a las comunidades hacia el cambio de comportamiento y normas sociales3 por medio de lo siguiente:

Las comunidades son propietarias del proceso y el contenido

Las artes sociales empoderan, son interactivas y horizontales (desde su inicio)

Las actividades de arte social dan una voz a las personas que no eran escuchadas

Las comunidades se convierten en agentes activos de su propia transformación

El énfasis está en el diálogo y el debate en lugar de la persuasión y transmisión de mensajes

El énfasis va más allá del individuo para influir las normas de la comunidad

Implementación del arte social para el cambio de comportamiento

Diseño e implementación de las actividades de artes social comienzan después de un estudio completo de diagnóstico ABC que incluye una investigación de acceso a WASH, infraestructura, mantenimiento, calidad del agua y apoyo institucional, además de la investigación sobre el panorama sociocultural y una

3 Adaptado de Communication for Social Change: An Integrated Model for Measuring the Process and Its Outcomes. The

Rockefeller Foundation and Johns Hopkins University Center for Communication Programs (2002)

Page 13: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

13 Octubre de 2016

evaluación formativa completa relacionada con el conocimiento, comportamiento, las actitudes y normas de WASH dentro de las comunidades de intervención. El diagnóstico también incluye la recopilación del folklore local, los mitos e historias, junto con las formas de arte popular para proporcionar una paleta que informe el contenido de las actividades de arte social. El diagnóstico ABC proporciona la base para la que se diseñan cada uno de los componentes de A, B y C, lo cual presenta una oportunidad para triangular los datos, de manera que las actividades de los componentes de acceso, comportamiento y capital se mejoran y alinean entre sí. One Drop usa un modelo socioecológico para guiar su estrategia de arte social para cambio del comportamiento. One Drop elige este modelo porque el comportamiento de WASH afecta y es afectado por factores a diferentes niveles de influencia, desde el conocimiento y las actitudes individuales, hasta las normas sociales, la disponibilidad y los atributos de los productos y servicios clave de WASH. One Drop reconoce que crear y habilitar el entorno para el cambio de comportamiento en el sector de WASH implica abordar diferentes variables relacionadas con problemas arraigados, como la defecación al aire libre y la higiene no adecuada. Esto implica que es necesario basarse firmemente en evidencia y prácticas recomendadas, además de tener una perspectiva innovadora y creativa sobre los enfoques o actividades nuevos que puede valer la pena probar. Existen muchos determinantes que influyen en el comportamiento, incluso aquellos dentro del sector de WASH. Aun así, se ha establecido que los tres "Determinantes clave" de comportamiento saludable son: autoeficacia, normas sociales y consecuencias percibidas. En términos simples, si los programas SBCC desean abordar estos determinantes, sus actividades y acciones asociadas deben 1) ser fáciles de hacer, 2) ser populares y apoyadas por el grupo objetivo, y 3) proporcionar un beneficio asociado al grupo meta. Las artes sociales abordan inherentemente estos tres factores determinantes mediante el entretenimiento y las actividades interactivas diseñadas para modelar los comportamientos objetivo (lo que promueve la autoeficacia o la confianza en sí mismo sobre la capacidad de realizar un cierto comportamiento), lo cual provoca emociones positivas y risa (beneficio percibido), crea popularidad y una apertura colectiva al cambio a nivel comunitario (normas sociales). El "Paquete de arte social" de One Drop para el cambio del comportamiento incluye actividades continuas y repetidas en todo el ciclo del proyecto a tres niveles:

1. ¡INSPIRAR! Una actividad inicial de lanzamiento que apunta a toda la comunidad;

2. ¡PARTICIPACCIÓN! Varias actividades personalizadas para comportamientos específicos y grupos meta correspondientes, como se especifica en el Plan de implementación de proyecto; y

3. ¡SOSTENER! (documedia) Productos y procesos que se mantendrán mucho después de que se complete la intervención, como libros infantiles, un kit de herramientas de ayuda comunitaria para escuelas, murales, cortometrajes realizados por adolescentes, y, finalmente, capacitación y desarrollo de capacidades continuos para crear agentes comunitarios de cambio familiarizados con el arte social para el cambio del comportamiento.

Page 14: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

14 Octubre de 2016

Tabla 2 – Paquete de arte social para impulsar el cambio

NOMBRE TIPO OBJETIVO PRINCIPAL

HERRAMIENTAS POBLACIÓN OBJETIVO

¡INSPIRAR! Intervención basada en

la comunidad Crear consciencia

Espectáculos de teatro Comunidad

¡PARTICIP-ACCIÓN!

Actividades de arte social personalizadas

para objetivos específicos de

comportamiento de WASH

Aprendizaje

Modelado Desarrollo de habilidades

Fomento de hábitos

Talleres Rincón de la higiene

Actividades musicales/mimos/circo con un público

objetivo Actividades de los socios (marketing

social/ campañas de creación de

consciencia, radio, etc.)

Pupilos Adolescentes

Comités WASH Profesores

Cabezas de familia

¡SOSTENER!

Documentación y medios, desarrollo de

capacidades de agentes de cambio de WASH y socios de arte social, capacitación de arte

social y fortalecimiento del sistema comunitario

Fomentar el mantenimiento de nuevas habilidades

y hábitos

Adopción/ replicación de

modelos y procesos

Libros, cortometrajes,

películas con kit de herramientas de difusión, murales

Arte social para el cambio del

comportamiento/capacitación de MEL

Mujeres Jóvenes

Comités WASH

Enfoque integrado a las intervenciones estructurales y arte social para el cambio del comportamiento

En el Programa LAC, los socios ejecutores implementarán intervenciones estructurales, como la construcción y restauración de infraestructura de instalaciones de agua. En cada caso, las intervenciones estructurales y de capital de los componentes A y C se entregarán junto con el B o arte social para las actividades de cambio del comportamiento. Lo que es más, las actividades de arte social implementadas en cada proyecto integrarán el paquete mínimo de intervenciones, como se describe en la tabla a continuación. El diseño de las herramientas y actividades, que se implementarán en cada proyecto, resultará de un análisis de rentabilidad y su potencial de impacto y capacidad de reproducción.

Pruebas y modificaciones

Es importante tener en cuenta que las actividades para los comportamientos objetivos elegidos y los grupos objetivos relacionados de cada proyecto se probarán antes de implementarlas a escala completa. Después del lanzamiento, se modificarán las actividades como mínimo dos veces al año para reflejar la respuesta y evolución de la comunidad en relación con el mensaje y el contenido relacionados con las herramientas y actividades de arte social.

Page 15: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

15 Octubre de 2016

Un proceso participativo, creativo y sistemático

El componente B se diseña para contribuir al cambio duradero mediante un enfoque participativo y creativo que valora la cultura local y ayuda a empoderar a las comunidades. Como parte de este componente, se usa el arte social como herramienta para alcanzar a las poblaciones, tocarlas emocionalmente y movilizarlas hacia un cambio del comportamiento implementando diferentes actividades basadas en las tradiciones locales y formas de arte (música, baile, teatro, cortometrajes, artes visuales, etc.). Utilizando la creación colectiva como método educativo, estas actividades artísticas (espectáculos de teatro, talleres, documentación y multimedia) son herramientas valiosas que inspiran y capacitan a comunidades enteras para que se identifiquen, comprendan y enfrenten los desafíos WASH, e inicien un proceso de transformación.

La implementación del componente B depende del proceso sistemático presentado en la figura a continuación.

Figura 2 – Sistematización del componente B

Los socios ejecutores le proporcionan antecedentes sobre el contexto de WASH local a los socios de artes sociales por diferentes medios (resultados de estudios de diagnóstico, sesiones informativas, visitas en terreno, visitas de reconocimiento, etc.) de forma que puedan ayudar a diseñar actividades efectivas para estimular el cambio del comportamiento. Mediante actividades que combinan el conocimiento educativo con la visión artística, la creación y expresión, los individuos, especialmente los niños, las mujeres y los jóvenes, se inspiran y su participación genera ideas nuevas, impulsa el pensamiento crítico, provoca nuevas acciones y fomenta el cambio del comportamiento sostenido a nivel de individuo (lavado de

Page 16: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

16 Octubre de 2016

manos, uso de letrinas), hogar (tratamiento, transporte y almacenamiento de agua, pago de tarifas de usuario) y comunidad (detener la defecación al aire libre, operación y mantenimiento).

En el componente B, se reúnen artistas locales que combinan el conocimiento de los problemas WASH locales con sus talentos artísticos múltiples para generar conciencia entre las comunidades en un entorno entretenido, inspirador y lúdico que favorece la responsabilidad de las comunidades y refuerza la cohesión social e identidad cultural.

A través de diferentes proyectos apoyados hasta ahora por One Drop en los países en desarrollo, el arte social ha demostrado resultados positivos como una herramienta versátil y movilizadora para acelerar y facilitar el proceso de cambio del comportamiento de WASH. En el programa LAC, se entrega la oportunidad de reforzar los procesos del arte social, además de probar hipótesis sobre la manera en que el arte social contribuye al cambio del comportamiento mediante evaluaciones sólidas y pruebas de concepto. De esta manera, creamos las condiciones para una mejora sostenible de las condiciones de vida en las comunidades objetivo.

2.1.3 El componente “C” (Capital) tiene como objetivo acelerar el acceso al agua potable segura y asequible, y a servicios de saneamiento adecuados e igualitarios a escala mediante las estrategia basadas en el mercado, el desarrollo de productos financieros adecuados para las comunidades, los hogares y los empresarios, y el desarrollo de una cadena de suministro de productos y servicios relacionados con WASH. One Drop trabaja con socios financieros locales (instituciones de microfinanciamiento, bancos, cooperativas, etc.) para desarrollar productos financieros que apoyen las soluciones asequibles basadas en el mercado que satisfagan las necesidades específicas relacionadas con WASH. Además, se proporcionan actividades de desarrollo de la capacidad financiera y soporte técnico para garantizar el éxito de la estrategia de proyecto y la gestión adecuada de los fondos. Para más detalles, ver la siguiente figura.

Page 17: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

17 Octubre de 2016

Figura 3 – Estrategia del componente C

2.2 Principios rectores que sustentan la implementación del ABC de la sostenibilidad

Según la visión del programa LAC, los organizadores adoptaron los siguientes principios rectores derivados de las experiencias y lecciones aprendidas de One Drop sobre la implementación del ABC de la sostenibilidad en terreno.

Alineamiento de los proyectos o programas con los marcos gubernamentales

Antes del lanzamiento de las iniciativas del A-B-C de la sostenibilidad, es esencial realizar una evaluación completa y extensa del contexto nacional de WASH para comprender el rol de los gobiernos y otros actores clave e identificar las prioridades nacionales y los planes de desarrollo. La adaptación de las intervenciones a los marcos nacionales y las respuestas a las prioridades y necesidades identificadas dentro del país son cruciales para el éxito del proyecto o programa. Este paso se implementa de mejor manera mediante la colaboración con los gobiernos nacionales y locales, además de las ONG locales e internacionales, y las comunidades mediante el diseño y la implementación de proyectos y programas.

Agua segura y saneamiento y como derechos humanos

Page 18: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

18 Octubre de 2016

Las intervenciones del A-B-C de la sostenibilidad han seguido un enfoque basado en los derechos de acuerdo a lo que cada ser humano tiene derecho a saneamiento y agua físicamente accesibles, asequibles, aceptables, seguros y suficientes para uso personal y doméstico. Los proyectos se deben diseñar de acuerdo con los principios de los derechos humanos de no discriminación e igualdad, acceso a la información y transparencia, participación, responsabilidad y sostenibilidad. Lo que es más, los servicios deben cumplir las dimensiones de la disponibilidad, calidad y seguridad, aceptabilidad, accesibilidad económica y física, como se define en los Objetivos de desarrollo sostenible de las Naciones Unidas.

Enfoque participativo y empoderamiento de la comunidad

La participación comunitaria, que incluye a la población objetivo y sus autoridades (locales, nacionales), es un componente crucial de cualquier proyecto. Desde la identificación a la implementación y mediante el proceso de monitoreo, evaluación y aprendizaje (MEL), la participación comunitaria es esencial para garantizar la responsabilidad local e intervenciones sostenibles. La participación no solo es un proceso de asesoría, sino que implica un compromiso activo de toda la comunidad y los individuos (mujeres, hombres y jóvenes) de crear un espacio para el diálogo e influir en la sostenibilidad de las intervenciones WASH. La participación continua y el desarrollo de las capacidades a lo largo del ciclo de un proyecto ayuda a los individuos y las comunidades a desarrollar las capacidades y actitudes necesarias para tomar un rol activo en el espacio público, e influir en los procesos de toma de decisiones.

Desarrollo de las capacidades

Las intervenciones de WASH que siguen el A-B-C de la sostenibilidad deben invertir en la institucionalización del desarrollo de las capacidades mediante diferentes actividades que involucran a todos los interesados. La creación y el refuerzo de las capacidades de gestión, dirección, técnicas y financieras a nivel de individuo e institucional ayudan a los interesados locales a desarrollar su autonomía y, progresivamente, convertirse en líderes verdaderos del sector WASH. Lo que es más, el desarrollo de las capacidades contribuye a una mayor responsabilidad de la comunidad e inclusión social, lo que se traduce en resultados duraderos. Trabajar junto con los gobiernos y proporcionar apoyo para reforzar sus capacidades de gestión y técnicas, además de su experiencia de cambio del comportamiento, es esencial para garantizar la sostenibilidad de cualquier programa WASH.

Inclusión e igualdad social (no discriminación)

Las intervenciones WASH se deben implementar para garantizar la igualdad social y el acceso igualitario a los beneficios y las infraestructuras del proyecto. El alcance a todos los miembros de la comunidad en el diseño de la infraestructura nueva y mejorada, cuando corresponda, y de los mecanismos de asesoría y planificación es clave. Esto involucra cerciorarse de que los participantes tengan acceso a toda la información necesaria que los capacite e inste a tomar un rol activo en su comunidad.

Igualdad de género

Garantizar el acceso igualitario a servicios WASH sostenibles y adecuados para todos quiere decir implementar las medidas específicas para abordar la posición de desventaja y exclusión de las mujeres.

Page 19: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

19 Octubre de 2016

Estas medidas deben abordar la inclusión y participación completa de las mujeres en las actividades, los beneficios y el proceso de toma de decisiones en el hogar, la comunidad y las instituciones. Para que el cambio del comportamiento sea efectivo, se debe dar atención especial al fortalecimiento de las capacidades de las mujeres y niñas como agentes de cambio social y económico, lo que beneficia al bienestar de toda la comunidad; y, si es necesario, cambiar la forma en que la comunidad percibe el rol y el valor de las mujeres como agentes económicos y de toma de decisiones. Las intervenciones de acceso deben integrar el diseño de infraestructura mejorada y la disponibilidad de recursos para reforzar la dignidad y el bienestar de las niñas y mujeres.

Protección ambiental y gestión de los recursos hídricos integrados

La protección ambiental es fundamental para los resultados de WASH sostenibles. Resulta crítica la identificación de los impactos ambientales potenciales clave y el desarrollo de medidas de mitigación desde la concepción del proyecto para garantizar que se minimicen los impactos negativos y, cuando sea posible, que los impactos ambientales positivos se mejoren. Al seguir los principios de la gestión de los recursos hídricos integrados y reconocer la gravedad de los impactos del cambio climático en relación a la calidad y disponibilidad del agua, EL programa LAC y todos los socios ejecutores deben coordinarse con los interesados locales, regionales y nacionales para asegurarse de que se cumpla con todas las normas y leyes de protección del ambiente. Esta colaboración garantiza que las intervenciones integran el uso de tierra, los planes de gestión de cuencas y las políticas ambientales, y que, cuando es necesario, se realizan evaluaciones ambientales según los estándares nacionales.

2.3 Enfoque del programa LAC

2.3.1 Impacto colectivo

El Programa LAC son los esfuerzos combinados de las diferentes partes interesadas en WASH (organizadores, socios ejecutores, gobierno nacional y academia, sector privado y los interesados de la sociedad civil) para ampliar la aplicación del enfoque del A-B-C de la sostenibilidad y lograr resultados más sostenibles en el sector de WASH. Este esfuerzo colectivo pone énfasis en la importancia de la armonización de las estrategias, la coordinación de esfuerzos y el aprendizaje mutuo en el sector de WASH. Las cinco condiciones de impacto colectivo (agenda común, actividades de refuerzo mutuo, sistemas de medición compartidos, comunicación continua y organizaciones de apoyo centrales) son fundamentales para el diseño del programa LAC.

Page 20: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

20 Octubre de 2016

Cuadro 1 – Las cinco condiciones para el impacto colectivo

De acuerdo con estas cinco condiciones para el impacto colectivo (Consulte la Tabla 1), la estrategia MEL está diseñada para capturar los efectos e impactos a dos niveles: medir el progreso de los proyectos individuales que componen el programa LAC, además de comprender el impacto colectivo del programa como un todo. Esta información será un elemento clave para garantizar que los socios participantes tengan la información y las herramientas necesarias para generar una comprensión en común de las soluciones y alinear sus esfuerzos para ponerlas en práctica.

2.3.2 Marco lógico del programa LAC

De acuerdo con la teoría del cambio del ABC de la sostenibilidad, el programa LAC definió un marco lógico general para describir los resultados y el impacto colectivo que se deben lograr mediante los esfuerzos conjuntos de las intervenciones de proyectos específicos por país. El marco lógico se presenta en la Figura 2.3.

Agenda común: los socios del programa LAC se reunirán en una etapa de diseño de programa y periódicamente mediante la implementación completa para desarrollar una visión compartida del cambio en el sector de WASH regional de LAC, donde aprenderán entre sí para obtener una comprensión común del problema y un enfoque conjunto para resolverlo mediante acciones acordadas.

Actividades de refuerzo mutuo: las intervenciones del programa reunirán a socios que brindan diversas fortalezas

en diferentes aspectos de WASH: desarrollo de infraestructura, cambio del comportamiento y aprovechamiento

de capital para invertir en productos y servicios WASH viables. Mientras los modelos variarán en la forma en que

se combinarán sus diferentes componentes, cada proyecto combinará elementos que se refuercen entre sí del

enfoque del A-B-C para efectuar cambio en el acceso sostenible a WASH en las comunidades objetivo.

Sistemas de medición compartidos: los socios han formado un comité de MEL para desarrollar un sistema compartido de recopilación de datos y medición de resultados de forma coherente en todos los proyectos. El sistema MEL proporcionará retroalimentación a todos los socios para garantizar que los esfuerzos del programa se mantengan alineados, los participantes estén abiertos a compartir información y rindan cuentas entre sí, además de ante su comunidad dentro del país y ante las partes interesadas del gobierno.

Comunicación continua: se integrarán mecanismos de comunicación abierta y regular, e intercambio de

conocimiento entre todos los socios a todos los niveles para generar confianza, garantizar los objetivos mutuos y

crear una motivación para trabajar hacia los cambios y las transformaciones en los enfoques de WASH

subyacentes a la teoría del cambio del programa.

Organizaciones de apoyo centrales: One Drop proporcionará apoyo central y técnico a la iniciativa y coordinará los esfuerzos y las comunicaciones entre las organizaciones participantes y las agencias.

Kania, J., & Kramer, M. (2013). Embracing Emergence: How collective impact addresses complexity. Stanford Social Innovation Review.

Page 21: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

21 Octubre de 2016

Recursos financieros Servicios en especie Asistencia técnica Expertos, asesores, investigadores

SOCIOS Organizadores

Socios ejecutores Socios de gobierno

Comunidades

Figura 4 – Marco lógico del programa LAC

4 Nota: El programa no medirá este impacto

IMPACTO 4

Mejora de la salud y las condiciones de vida de las comunidades rurales y periurbanas en los países objetivo de Latinoamérica.

RESULTADOS

RESULTADOS DE LARGO PLAZO

1. Acceso mejorado y uso de servicios de agua potable gestionados de forma segura en las comunidades objetivo. 2. Acceso mejorado y uso de servicios de saneamiento gestionados de forma segura en las comunidades objetivo. 3. Conductas relacionadas con WASH efectivas practicadas por individuos, hogares y grupos comunitarios en las

comunidades meta 4. Enfoques efectivos para cambios de comportamiento integrados por los gobiernos en las políticas y los programas WASH 5. Desarrollo de un mercado eficiente y autosustentable para los productos y servicios relacionados con WASH

Enfoques innovadores y costo efectivos, con resultados replicados o escalados

Aprendizaje basado en evidencia utilizado para incidir en políticas y programas gubernamentales

PRODUCTOS

ACCESO 1.1: Instalaciones de suministro de agua potable segura construidas o mejoradas 2.1: Instalaciones de saneamiento adecuadas construidas o mejoradas

Datos de proyectos disponibles utilizados para informar y generar decisiones de programas, lo que incluye un informe sobre el impacto de las intervenciones de cambio de comportamiento mediante las artes sociales

Productos de conocimiento disponibles (hoja de datos del proyecto, estudios de caso, guía explicativa, material audiovisual, evento) para divulgación

COMPORTAMIENTO

1.1/2.1/3.1: Arte social y otros productos de cambio de comportamiento de WASH creados en conjunto con las comunidades y los artistas locales

1.2/2.2/3.2: Arte social y otros productos de comunicación para el cambio de comportamiento aplicados a nivel de individuos, hogares y comunidades para crear conciencia, movilización y cambio de comportamiento con relación a las prácticas WASH seguras y efectivas

4.1: Capacidades mejoradas del gobierno, sector privado y los grupos comunitarios para la gestión efectiva de instalaciones y servicios WASH

CAPITAL

5.1: Aumento del financiamiento disponible para PYME, hogares y juntas o comités de agua o para propósitos de WASH

5.2: Desarrollo de productos y servicios de saneamiento asequibles e impulsados por la demanda

ACTIVIDADES

ACCESO

Construir y rehabilitar infraestructura WASH Fortalecer la capacidad de los gobiernos locales para

crear una demanda de servicios de saneamiento Generar capacidades de juntas o comités de agua en el

funcionamiento y mantenimiento de los sistemas de agua Fortalecer la capacidad de los operadores de agua

locales Colaborar estrechamente con los gobiernos locales y

nacionales para garantizar la sostenibilidad

CAPITAL

Acelerar el acceso al capital (préstamos, financiación transitoria) para los hogares, las juntas de agua o comités, y las PYME que proporcionan servicios WASH

Apoyar el desarrollo de productos de crédito relacionados con WASH

Promover el agua y saneamiento como negocio Fortalecer el sector privado para ofrecer un suministro

receptivo al consumidor y asequible de productos y servicios de saneamiento

GESTIÓN DEL CONOCIMIENTO Y MEL

Desarrollar e implementar un sistema MEL uniforme y armonizado en todos los proyectos del programa, y evaluar las actividades y los resultados del programa

Diseñar e implementar una evaluación del impacto sobre el cambio de comportamiento mediante el arte social en un país

Crear e implementar una estrategia de gestión del conocimiento centrada en el cambio de comportamiento de los proyectos WASH (contribución del cambio de comportamiento a la sostenibilidad, etc.)

Generar aprendizaje y mejoras reiteradas mediante MEL

CAMBIO DE COMPORTAMIENTO

Desarrollar e implementar productos de arte social para crear conciencia, movilizar e impulsar cambios de comportamiento relacionados con WASH en diferentes niveles: Individual (uso de la infraestructura, prácticas de lavado de manos, higiene personal, etc.), hogares (tratamiento del agua, pago de los servicios, etc.) y comunidad (funcionamiento y mantenimiento de la infraestructura, etc.)

Promover la incorporación de cambios de comportamiento mediante el arte social en intervenciones WASH con las autoridades locales y nacionales

Promover la educación higiénica mediante herramientas de comunicación de cambios de comportamiento

APORTES

SOCIO ESTRATÉGICO DE IMPLEMENTACIÓN

Page 22: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

22 Octubre de 2016

Los resultados, las actividades asociadas y los comentarios se definieron de acuerdo con la teoría de cambio desarrollada para el A-B-C de la sostenibilidad en el sector de WASH. En el marco lógico se describen los productos, resultados intermedios, resultados de largo plazo e impactos esperados de las intervenciones como conjunto a nivel de proyecto. El programa LAC medirá los resultados hasta el nivel de los resultados. Se espera que lograr los resultados a nivel de programa contribuya a generar un impacto: Mejorar la salud y las condiciones de vida de las comunidades rurales y periurbanas en los países objetivo de Latinoamérica. Sin embargo, el programa no medirá este impacto. Este marco lógico de programa proporciona orientación a los socios sobre la forma en que pueden definir los marcos lógicos a nivel de proyecto. Los resultados a nivel de proyecto y los indicadores definirán los efectos que se espera que tenga el proyecto en las comunidades meta, y su contribución a los impactos a nivel de país.

Cada proyecto desarrollará un marco de resultados a nivel de proyecto con los resultados esperados e indicadores que se alineen con el marco lógico general del programa, pero con ajustes para garantizar que sean específicos a la intervención del proyecto. Cada proyecto también desarrollará un plan de monitoreo, evaluación y aprendizaje (MEL, por sus siglas en inglés) con información acorde a las características de cada intervención.

2.3.3 Modelos de intervención

El programa LAC reunirá recursos de diferentes socios (entre los que se incluyen los gobiernos nacionales y subnacionales) bajo el marco del logro del impacto colectivo en el sector de WASH. EL programa LAC busca influir en las políticas gubernamentales para integrar el cambio del comportamiento y enfoques basados en el mercado para proporcionar productos y servicios de WASH a iniciativas nacionales.

La forma en que se combinarán las intervenciones de diferentes socios que trabajan en los componentes de acceso, cambio del comportamiento y capital en un solo programa se regirá por dos modelos.

El modelo 1 – presenta las intervenciones donde A, B y C serán liderados principalmente por socios ejecutores ONG que colaboran de cerca con el gobierno.

En el modelo 2 – los gobiernos implementan A y las ONG implementan B y C en coordinación con los gobiernos.

En ambos modelos, el enfoque de MEL será diseñar sistemas de monitoreo, generación de informes de progreso y evaluación que cubran todos los elementos: A, B y C. Los socios ejecutores podrán coordinarse con el gobierno para proporcionar los datos que recopilen en las comunidades meta para su uso en las bases de datos nacionales o en los sistemas regionales, además de considerar los datos disponibles a nivel internacional en el análisis de los resultados. La generación de informes y el monitoreo de progreso periódicos se centrarán en los resultados del A-B-C y la medición de la forma en que los resultados contribuyen al logro de un acceso sostenible a WASH a nivel de país.

Un desafío clave será sumar la información de los diferentes modelos y socios ejecutores para desarrollar una comprensión en común de los elementos clave para medir el progreso y garantizar la coherencia en la forma en que se recopila y entrega la información. Generalmente, el A-B-C de la sostenibilidad asume que los beneficiarios están involucrados en cada componente para generar las transformaciones que harán que el acceso a WASH sea sostenible. Con cada componente potencialmente liderado por diferentes socios, hacer un seguimiento de los cambios entre los beneficiarios y las comunidades

Page 23: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

23 Octubre de 2016

requerirá que se recopilen y consoliden los datos de diferentes ejecutores y sus sistemas de datos de monitoreo.

El sistema MEL está diseñado para simplificar esta complejidad centrándose en los indicadores clave de programa que son la medida estándar de WASH, además de consolidar los datos mediante sistemas de generación de informes en línea disponibles para cada socio de ejecución. En el caso del Modelo 2, es probable que no sea viable que los socios ejecutores del gobierno utilicen directamente el programa LAC para generar informes sobre los indicadores y los resultados. El enfoque específico que se utilizará por país y proyecto se diseñará como parte del plan MEL específico del proyecto. La condición clave que se implementará como parte del diseño de proyecto será garantizar que al menos una agencia (como una ONG que sea socio de ejecución) sea responsable en el terreno por la recopilación y generación de informes sobre todos los componentes del A-B-C, lo que incluye a los componentes del A-B-C liderados por el gobierno.

Tabla 3 – Modelos de programa LAC

Modelo 1 Modelo 2

DISEÑO

A,B,C ONG Gobiernos One Drop apoya la integración

A Gobiernos

B, C Gobiernos ONG One Drop apoya la integración

SOCIO DE EJECUCIÓN PRINCIPAL

Las ONG que implementan el ABC en colaboración estrecha con los gobiernos

Gobiernos que implementan A y ONG que implementan B y C en coordinación estrecha con los gobiernos

POBLACIÓN OBJETIVO

Comunidades rurales más pobres y vulnerables Mezcla de comunidades rurales y áreas periurbanas (pueblos pequeños y pobres)

INTERVENCIÓN Agua, habilitación del entorno para el saneamiento y la construcción de instalaciones de saneamiento a nivel institucional (escuelas y clínicas)

Agua, habilitación del entorno y construcción de instalaciones de saneamiento a nivel de hogar

ESCALA Menos de 40 mil beneficiarios Más de 40 mil beneficiarios

FINANCIAMIENTO Organizadores, ONG, gobiernos locales y comunidades Gobiernos nacionales mediante becas o préstamos del BID, organizadores, ONG, gobiernos locales y comunidades

INFLUENCIA Nivel local De nivel local a nacional

2.4 Proyectos en cartera

Se desarrolló una cartera de proyectos preliminar para Guatemala, Colombia, Nicaragua, Paraguay y México5. Entre los tipos de intervenciones se incluye una mezcla de nuevas construcciones y

5 El desarrollo del proyecto en México está en curso en el momento en que se redactó este documento.

Page 24: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

24 Octubre de 2016

rehabilitación de sistemas de infraestructura. Los sistemas de agua cubren los sistemas con bombeo eléctrico o de agua por tubería conducida por gravedad a nivel de hogares, y algunos sistemas comunitarios de suministro de agua. Las instalaciones de saneamiento se centrarán en realizar mejoras a las escuelas e instalaciones de salud, y promover algunos productos de saneamiento basados en el mercado. Las intervenciones de cambio del comportamiento pueden tener como objetivo los problemas de conectividad, el pago de tarifas, el mantenimiento de los sistemas, la cloración a nivel del sistema de agua, el lavado de manos, el tratamiento de agua doméstica, la demanda y uso de letrinas, y otros cambios para promover la higiene. Las intervenciones de capital se centran en las soluciones basadas en el mercado para mejorar la disponibilidad de los productos y servicios de WASH en las comunidades. Todos estos factores se definirán precisamente después de los resultados de los estudios de diagnóstico obtenidos y tras la realización de los talleres de diseño.

Para cada proyecto se diseñará un marco lógico propio que describa el impacto, el producto, los resultados y las actividades, y estos se basarán en el marco lógico general del programa.

Tabla 4 – Resumen de programa

RESUMEN DE PROGRAMA

Colombia Guatemala Nicaragua Paraguay México Total

Socio de ejecución Plan International Water for

People

Water for

People

Water Aid SENASA/

CEAMSO/Bertoni

CONAGUA/

CEAs

7 socios

Presupuesto total

(USD)

7,2 M 9,9 M 7,15 M 7,5 M 44,5 M* POR

DETERMINAR

76,8 M

Contribución de

Organizadores

3,2 M 3,2 M 3,85 M 3,8 M 2,0 M POR

DETERMINAR

16,05 M

Contribución de

Socio de ejecución

1,5 M 3,7 M 2,2 M 1,6 M - POR

DETERMINAR

9 M

Contribución de

Gobiernos y

comunidades

2,5 M 3 M 1,1 M 2,1 M 42,5 M POR

DETERMINAR

51,2 M

Número de

beneficiarios

estimados

15.000 - 24.000** 37.000 31.642 15.140 48.000 POR

DETERMINAR

146.782 -

155.782

Fecha de inicio de

actividades A ***

Junio de 2017 En curso Marzo de

2017

Marzo de

2017

Enero de 2017 POR

DETERMINAR

Fecha de inicio de

actividades B

Julio de 2017 En curso Abril de 2017 Abril de 2017 Febrero de 2017 POR

DETERMINAR

Fecha de inicio de

actividades C

Julio de 2017 En curso Abril de 2017 Abril de 2017 Febrero de 2017 POR

DETERMINAR

* El total del proyecto para Paraguay incluye $42.555.000 en inversiones de infraestructura financiada por el gobierno que no se consideran como parte del presupuesto general del programa (que se muestra en la siguiente página). ** El rango representa el número potencial de beneficiarios basado en los estimados de costo preliminar de infraestructura de agua recopilados durante julio de 2016. Una cantidad más precisa de beneficiarios se informará con la recopilación de datos del estudio de diagnóstico. *** La fecha de inicio de la actividad A se refiere al comienzo de la etapa de diseño.

Page 25: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

25 Octubre de 2016

PARTE III: Estrategia MEL

3.1 Descripción general de la estrategia MEL

3.1.1 Enfoque MEL

Los organizadores decidieron invertir en investigación, monitoreo y evaluación rigurosos para evaluar la efectividad del modelo del A•B•C para la sostenibilidad en general, y la metodología del arte social en particular. La idea es ejecutar pruebas de concepto con variaciones ligeras en las regiones y actividades, compilar evidencia para finalmente determinar un enfoque de intervención escalable que sea viable, promueva un cambio del comportamiento medible y sostenido, y sea costo efectivo.

Para lograr el objetivo, el programa LAC está desarrollando un enfoque MEL alineado con el compromiso de los organizadores y los socios de proyecto para obtener un enfoque común armonizado de seguimiento del programa y resultados a nivel de proyecto, y medir el impacto colectivo hacia el objetivo de garantizar la disponibilidad y la gestión sostenible del agua y el saneamiento para todos. Los objetivos generales de la estrategia MEL son:

Establecer una visión del impacto colectivo al que los socios del programa (organizadores, socios ejecutores, gobiernos) apuntan en el sector WASH de la región LAC.

Generar lecciones aprendidas y recopilar evidencia de alta calidad para apoyar la toma de decisiones del programa e incidir en las políticas públicas.

Los objetivos específicos son:

Establecer un marco lógico general a nivel de programa y establecer indicadores clave de programa comunes que guíen el establecimiento de los indicadores y resultados a nivel de proyecto.

Desarrollar un enfoque a nivel de programa y proyecto para el monitoreo, la evaluación y el aprendizaje.

Consolidar una metodología rigurosa para aprender de cada una de las intervenciones y mejorar el conocimiento colectivo sobre los enfoques efectivos del sector de WASH.

Definir los roles y las responsabilidades para la implementación de la estrategia MEL.

Crear un sistema de generación de informes común que cumple con los requisitos de cada organizador o socio.

Proporcionar orientación sobre los elementos principales que se deben incluir en el plan MEL para cada proyecto.

3.1.2 Componentes de la estrategia MEL

La estrategia MEL cuenta con tres componentes principales: Monitoreo, evaluación y aprendizaje.

Monitoreo: El propósito del sistema de monitoreo del programa LAC es hacer un seguimiento continuo del progreso de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones al nivel de proyecto y programa sobre la forma en que se pueden mejorar las intervenciones.

Page 26: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

26 Octubre de 2016

Evaluación: El componente de evaluación está diseñado para determinar la pertinencia, la efectividad, la eficiencia, el impacto o la sostenibilidad de los resultados definidos para el programa y cada una de las intervenciones del proyecto. Las evaluaciones contribuirán conocimiento para validar o ajustar la teoría de cambio del programa. Las evaluaciones les proporcionarán información a todos los socios sobre formas de mejorar las intervenciones actuales o planificar intervenciones futuras para lograr sostenibilidad, escalabilidad e influencia en las políticas.

Aprendizaje y gestión del conocimiento: El componente de aprendizaje será una prioridad para avanzar en el monitoreo y la evaluación a nivel de programa y proyecto, obtener lecciones aprendidas e integrarlas en la toma de decisiones sobre las instrucciones estratégicas de programa, además de entregar orientación para iniciativas futuras. El enfoque colectivo pone énfasis en el aprendizaje dentro de cada equipo de proyecto, pero también promueve el intercambio de conocimiento entre programas. Las lecciones y el conocimiento relevantes y valiosos para el aprendizaje en el sector se documentarán mediante un sistema de gestión del conocimiento. El propósito de gestionar el conocimiento es aprender de otras personas, de manera que las actividades de WASH se puedan mejorar de forma más eficiente y eficaz para todos. Mientras las actividades de aprendizaje del programa tendrán como objetivo a público interno, las actividades de gestión de conocimiento y los productos de conocimiento se desarrollarán como parte de un diálogo con las partes interesadas externas al programa LAC. Finalmente, el objetivo es compartir el conocimiento, la experiencia y la información del programa en general entre los gobiernos y otros interesados en WASH, con lo que se puede avanzar en las prácticas recomendadas para impulsar la innovación, generar un mayor impacto y aumentar la efectividad.

3.2 Indicadores

3.1.1 Indicadores clave de programa

El Programa LAC cuenta con un conjunto fijo de indicadores de programa clave para medir los resultados del programa como un todo. Los indicadores de programa clave se basan en estándares del sector, en particular en las recomendaciones de Objetivos de desarrollo sostenible (ODS). Los indicadores de programa clave medirán los efectos del programa en los individuos, los hogares, las comunidades y de influencia en las políticas y los programas gubernamentales nacionales del sector WASH.

Entre los criterios utilizados para seleccionar estos indicadores se incluyen:

Pertinente a las intervenciones del proyecto según el programa

Indicadores estándar del sector para WASH (JMP de OMS/UNICEF) y los programas de desarrollo comercial (en el caso del Capital)

Viabilidad y rentabilidad de la recopilación de datos de las comunidades objetivo

La experiencia de los organizadores o socios aplicando indicadores similares

Los proyectos incluirán indicadores clave de programa como parte de sus propios marcos de resultados. El uso común de los indicadores clave es especialmente importante al nivel de los resultados (Consulte la Tabla 3,1). Los datos recopilados e informados por cada proyecto sobre este conjunto común de indicadores clave se sumarán para proporcionar el progreso y los logros del programa como un todo.

Page 27: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

27 Octubre de 2016

El monitoreo y análisis de los indicadores clave de programa proporcionarán una fuente valiosa de información para la mejora continua y el aprendizaje a cada nivel del programa. Los indicadores se cuantificarán en períodos específicos en el programa para establecer objetivos e hitos por la duración del programa. La información recopilada mediante los indicadores se utilizará para evaluar el progreso y guiar la toma de decisiones, además de generar lecciones del programa. También se utilizarán datos proporcionados por los indicadores clave de programa para verificar la teoría del cambio y evaluar la pertinencia, la eficiencia, la efectividad, el impacto y la sostenibilidad de las intervenciones.

Tabla 5 – Indicadores clave de programa

AC

CES

O

A1: Número de hogares con servicios de agua potable segura (servicios de agua mejorados y nuevos)

Desglose de hogares con nuevos servicios de agua y número de hogares con servicios mejorados

6

A2: Número de hogares con servicios adecuados de saneamiento Desglose de hogares con nuevos servicios de saneamiento y número de hogares con

servicios mejorados 7

A3: Número de hogares con instalaciones de lavado de manos con jabón y agua

CO

MP

OR

TAM

IEN

TO

B1: Número de hogares que usan los servicios de agua potable gestionados de manera segura B2: Número de hogares que usan servicios de saneamiento gestionados de manera segura B3: Número de individuos o casas que practican conductas WASH efectivas (específicamente conductas WASH específicas por proyecto, como el lavado de manos, pago de tarifas, etc.)

Desglosado por género, personas con discapacidades y otros grupos vulnerables

CA

PIT

AL

C1: Promedio de crecimiento de ventas anuales de pequeñas y medianas empresas relacionadas con WASH

3.2.2 Indicadores de proyecto adicionales

Todos los proyectos medirán los indicadores clave de programa. Sin embargo, cada proyecto responde a necesidades en un contexto en particular y tendrá elementos únicos. Ningún indicador puede capturar la variabilidad completa de todas las intervenciones de cambio del comportamiento y WASH que se desarrollarán en el programa LAC. En la Tabla 3.2 y 3.3 también se presentan indicadores de proyecto adicionales para que se adopten en el marco de resultados de los proyectos, según corresponda. En los proyectos también se pueden agregar otros indicadores que no se mencionen en la tabla que midan de mejor manera los resultados a los que se apunta en su contexto. Los indicadores de proyecto adicionales están basados en los indicadores recomendados en la literatura relevante a los sectores de desarrollo comercial y WASH.

6 Los servicios de agua mejorados se refieren a los sistemas rehabilitados o los sistemas en que los servicios de agua (como de

funcionamiento y mantenimiento, calidad del agua, etc.) se mejoraron 7 Los servicios de saneamiento mejorados se refieren a los sistemas rehabilitados o los sistemas en que los servicios de

saneamiento (como eliminación segura de excrementos, instalación no compartida, etc.) se mejoraron

Page 28: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

28 Octubre de 2016

Tabla 6 – Lista de indicadores adicionales a nivel de proyecto

Nota para esta sección:

Se informarán los datos de los nuevos sistemas de agua y los sistemas de agua mejorados; Mejorados se refiere a sistemas rehabilitados o sistemas donde se hicieron mejoras a los servicios (funcionamiento y mantenimiento, calidad del agua, tratamiento del agua, etc.)

Se informarán los datos de los nuevos sistemas de saneamiento y los sistemas de saneamiento mejorados; Mejorados se refiere a sistemas rehabilitados o sistemas donde se hicieron mejoras a los servicios (como funcionamiento, mantenimiento y administración, tratamiento de desechos, etc.)

Cuando haya suficientes datos disponibles, los beneficiarios o pupilos se desglosarán según género, personas con discapacidades y otros grupos vulnerables

AC

CES

O

Resultado 1: Acceso mejorado a servicios de agua potable gestionados de forma segura en las comunidades meta.

1.1 Número de comités de servicio y operadores que aplican prácticas o procedimientos de funcionamiento, mantenimiento y administración de los sistemas de agua especificados (operadores de servicio).

1.2 Número de comités o asociaciones (de agua) funcionando de conformidad con los estatutos y ordenanzas

8.

Escuelas

1.3. Número de escuelas (primarias y secundarias) en las comunidades meta con servicios de agua potable gestionados de forma segura in situ accesible para todos los usuarios todo el tiempo.

Centros de salud

1.4. Número de instalaciones de salud en las comunidades meta con servicios de agua potable gestionados de forma segura in situ accesible para todos los usuarios todo el tiempo.

Resultado 2: Acceso mejorado a servicios de saneamiento gestionados de forma segura en las comunidades meta.

2.1. Número de hogares con servicios básicos de saneamiento

Escuelas

2.2. Número de escuelas en las comunidades meta con saneamiento separado seguro y privado para niños y niñas in situ

2.3. Número de escuelas con instalaciones de lavado de manos funcionales

Centros de salud

2.4. Número de centros de salud en las comunidades meta con saneamiento separado seguro y privado in situ

8 Se aplica solo para las áreas rurales

Page 29: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

29 Octubre de 2016

CO

MP

OR

TAM

IEN

TO

Resultado 3: Conductas efectivas relacionadas con WASH practicadas por individuos/hogares y grupos comunitarios en las comunidades meta

3.1 Número de individuos que adoptan un comportamiento relacionado con el manejo seguro del agua (p. ej., pagar tarifas, mantener el sistema, tratar el agua, conservar el agua, etc.). Por ejemplo:

Número de hogares que reducen el consumo de agua Número de hogares que tratan el agua Número de hogares que pagan regularmente las tarifas relacionadas con WASH

3.2 Números de individuos y hogares que adoptan una práctica adecuada de saneamiento (uso adecuado de letrinas, mantenimiento de letrinas, no defecar al aire libre). Por ejemplo:

Número de hogares que usan las instalaciones de letrinas adecuadamente Número de hogares que mantienen las instalaciones de letrinas Número de hogares en donde nadie defeca al aire libre

3.1 Número de individuos y hogares que practican el lavado de manos con jabón en momentos críticos (después del contacto con materia fecal, antes de eventos relacionados con comida)

Resultado 4: Enfoques efectivos para cambios de comportamiento integrados por los gobiernos en las políticas y los programas WASH

4.1 Porcentaje del presupuesto municipal total asignado a las intervenciones de cambio del comportamiento dentro del presupuesto del programa WASH total

4.2 Porcentaje del personal de gobierno (desglosado según local y nacional) con nuevas competencias en enfoques de cambio de comportamiento

4.3 Monto (USD) de los programas WASH financiados por el gobierno que integran una o más técnicas de cambio del comportamiento que promueve el programa

CA

PIT

AL

Resultado 5: Un mercado más eficiente y autosustentable para los productos y servicios relacionados con WASH

5.1 Valor total de crédito (USD) por parte de instituciones financieras designado a servicios WASH a los clientes individuales a los clientes de pequeñas y medianas empresas a los comités de agua y saneamiento

5.2 Valor de las ventas de productos y servicios WASH (USD). 5.3 Porcentaje de reembolso de los productos de crédito relacionados con WASH (%) por parte de hogares, pequeñas y medianas empresas, y comités de agua y saneamiento

5.4 Número de trabajos creados por las pequeñas y medianas empresas relacionadas con WASH

Page 30: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

30 Octubre de 2016

Tabla 7 – Lista de indicadores de productos

AC

CES

O

Producto 1.1: Instalaciones de suministro de agua potable segura construidas o mejoradas9

Número de sistemas de agua construidos Números de sistemas de agua mejorados Números de miembros del operador de servicio capacitados en la administración, el

funcionamiento y el mantenimiento del agua Número de escuelas con instalaciones de agua nuevas Número de escuelas con instalaciones de agua mejoradas Número de centros de salud con instalaciones de agua nuevas Número de centros de salud con instalaciones de agua mejoradas

Producto 2.1: Instalaciones de saneamiento adecuadas construidas o mejoradas10

Número de instalaciones de saneamiento e higiene construidas Número de instalaciones de saneamiento e higiene mejoradas Número de miembros del operador de servicio capacitados en la administración, el funcionamiento

y el mantenimiento del saneamiento Número de escuelas con saneamiento separado seguro y privado nuevo in situ Número de centros de salud con saneamiento separado seguro y privado in situ

CO

MP

OR

TAM

IEN

TO

Producto 3.1 Arte social y otros productos de cambio de comportamiento de WASH creados en conjunto con las comunidades y los artistas locales

Número de productos y actividades de cambio de comportamiento creados Número de artistas locales capacitados en el arte social para el cambio de comportamiento Número de líderes comunitarios capacitados en arte social para el cambio de comportamiento

Producto 3.2. Arte social y otros productos de comunicación para el cambio de comportamiento aplicados a nivel de individuos, hogares y comunidades para crear conciencia, movilización y cambio de comportamiento con relación a las prácticas WASH seguras y efectivas

Número de personas expuestas a los productos o actividades de cambio de comportamiento. Número de personas que pueden identificar dos o más comportamientos necesarios para llevar a

cabo WASH de forma segura y efectiva (basado en los mensajes del programa). Número de profesores capacitados para introducir el arte social para el cambio de

comportamiento en las escuelas. Número de autoridades locales y otros agentes de cambio del comportamiento comunitarios

capacitados para liderar las campañas de cambio del comportamiento o sesiones educativas utilizando el arte social.

Número de espectáculos o presentaciones que promueven el cambio del comportamiento relacionado con WASH.

9 Los servicios de agua mejorados se refieren a los sistemas rehabilitados o los sistemas en que los servicios de agua (como de

funcionamiento y mantenimiento, calidad del agua, etc.) se mejoraron. 10

Los servicios de saneamiento mejorados se refieren a los sistemas rehabilitados o los sistemas en que los servicios de saneamiento (como eliminación segura de excrementos, instalación no compartida, etc.) se mejoraron

Page 31: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

31 Octubre de 2016

CA

PIT

AL

Producto 5.1: Aumento del financiamiento disponible para PYME, hogares y juntas o comités de agua para propósitos de WASH

Número de créditos nuevos u otros productos financieros del mercado creados por instituciones financieras vinculadas con las actividades de WASH

Número de agentes de crédito capacitados en los productos financieros nuevos relacionados con WASH

Número de pequeñas y medianas empresas relacionadas con WASH Número de pequeñas y medianas empresas relacionadas con WASH que acceden a créditos y otros

productos financieros Número de individuos que acceden a créditos y otros productos financieros para WASH (también:

número de hogares que accede a productos de crédito de WASH)

Número de comités o juntas de agua que acceden a créditos u otros productos financieros para WASH Monto promedio de los créditos(USD) para individuos, pequeñas y medianas empresas, y juntas de saneamiento o agua

Producto 5.2: Desarrollo de productos y servicios de saneamiento económicos e impulsados por la demanda

Número de productos o servicios desarrollados por pequeñas y medianas empresas relacionadas con WASH

Número de proveedores de servicios relacionados con WASH seleccionados y graduados del programa de capacitación comercial de emprendimiento

Número de proveedores de servicios relacionados con WASH que adoptan prácticas de gestión comercial mejoradas

Número de alianzas estratégicas con entidades públicas o privadas en WASH

3.2.3 Porcentaje de beneficiarios

Un individuo es beneficiario del programa LAC cuando tiene contacto directo con las intervenciones del proyecto. Los beneficiarios de cada componente, A, B y C, se informarán de manera separada según el componente. Cuando se entrega el total de beneficiarios no se suman los números, ya que son los mismos beneficiarios. Los tipos de intervenciones con los cuales tienen contacto los beneficiarios varían según el proyecto. Generalmente, los beneficiarios del programa LAC a nivel de hogares tendrán contacto directo con las intervenciones A y B, y en la mayoría de los casos (pero no todos), también con las intervenciones C.

El cálculo de algunos de los datos indicadores se basará en el total de beneficiarios meta definidos en cada proyecto. El tipo de beneficiarios (hogares, oficiales de gobierno, artistas locales, etc.) dependerá de la naturaleza del indicador. En la medida en que sea posible, se separará a los beneficiarios según género, personas con discapacidades y otros factores. El método para calcular los datos, incluso el número de beneficiarios para cada indicador, se aclarará en las fichas de definición de los indicadores.

De manera general, los beneficiarios se informarán como un grupo total sin importar la fuente de financiamiento.

En el caso del modelo 2 -cuando el gobierno financia el componente A- no obstante, estos beneficiarios se informarán de manera diferente. Por ejemplo, si un gobierno paga el costo de A según el Modelo 2, los beneficiarios alcanzados mediante el financiamiento del gobierno se especificarán. El programa LAC desarrollará un memorándum de entendimiento con el gobierno para trabajar en B y C para una zona

Page 32: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

32 Octubre de 2016

definida donde el gobierno implemente A. La intervención completa de B y C se considerará parte del programa LAC. Entonces, el Programa LAC habrá "contribuido" al acceso a los servicios de agua de los hogares objetivos de los fondos del gobierno. Los beneficiarios del programa de gobierno que no reciban B o C no se considerarán beneficiarios.

El número oficial de beneficiarios del programa será la suma de cada beneficiario de proyecto, ya que los proyectos no se superponen en la misma zona.

3.3 Monitoreo

3.3.1 Enfoque de monitoreo

El monitoreo y análisis de los indicadores clave de programa proporcionarán información valiosa para comprender la forma en que avanza el programa en diferentes contextos y se introducirán en la mejora y el aprendizaje continuos del programa. El enfoque de monitoreo del programa hace un seguimiento del progreso en dos niveles:

Seguimiento del progreso general en relación con los resultados esperados del programa según los objetivos e indicadores clave de programa.

Compilación de información sobre el estado de cada intervención (actividades, gastos) y el progreso relacionado con los objetivos y resultados a nivel de proyecto, en comparación con los hitos establecidos en el plan MEL.

El sistema de monitoreo generará información para:

informar periódicamente sobre el progreso relacionado con los resultados positivos del programa en general a los organizadores y otros socios;

informar sobre el progreso de cada proyecto en términos del estado de los comentarios, las actividades y el progreso relacionado con los indicadores de resultados y productos objetivo;

identificar la necesidad de realizar ajustes a los proyectos, destacar las áreas donde se debe prestar atención especial durante la implementación y tomar medidas correctivas cuando sea necesario;

generar aprendizaje para mejorar las prácticas y actividades a lo largo del ciclo de proyecto; y

documentar los resultados, los procesos y las experiencias que se utilizarán como base para la toma de decisiones.

Page 33: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

33 Octubre de 2016

Cuadro 2 – Monitoreo del proceso del arte social

El monitoreo del proceso es la documentación de rutina de datos que describen las características de la población que recibe los beneficios, los servicios proporcionados y los recursos utilizados para entregar estos servicios (CDC, 2002). Es útil identificar problemas y desafíos con las operaciones del programa y su implementación, esto proporciona evidencia para hacer los cambios necesarios. Por lo tanto, el monitoreo de las actividades de ate social se refiere a dos tipos de indicadores

- Indicadores de proceso que reflejan las tareas necesarias para implementar las actividades con éxito (p. ej., mensajes

previos a las pruebas, impresión de materiales, capacitación de moderadores).

- Indicadores de producto que reflejan el alcance (p. ej., el número de personas que recibe el mensaje) y entrega (p.

ej., el número de personas que recibe la intervención, el número de talleres realizados en escuelas) de la actividad

del público objetivo. También especifican el nivel de cobertura de las intervenciones (p. ej., número/proporción de

distritos cubiertos frente a la cobertura nacional).

El monitoreo cuantitativo (mediciones de cantidad) tiende a documentar los números asociados con un programa, por ejemplo:

Número de escuelas alcanzadas Número de actividades y herramientas de arte social distribuidas (por tipo) Número de sesiones de talleres realizadas Número de mediadores capacitados

Involucra la realización de registros y conteos numéricos. Explica que las actividades en la línea de tiempo de actividades del proyecto o programa se deberían examinar de cerca para ver el tipo de actividades de monitoreo que se podrían usar para evaluar el progreso. Requiere que el sistema de monitoreo y sus actividades asociadas se integran en la línea de tiempo del proyecto.

El monitoreo cualitativo (medición de calidad) cuestiona la forma en que se realizaron las actividades mediante preguntas como:

De qué manera cambiaron las actitudes de las personas relacionadas con el uso de letrinas Qué tan efectiva es una herramienta para entregar el mensaje para el que se diseñó a la población objetivo

Este tipo de información y retroalimentación suele usar métodos cualitativos como entrevistas en profundidad y debates de grupos focales.

NOTA: El monitoreo del proceso es diferente a la evaluación del proceso (consulte la Sección 3.4 para obtener más detalles). Se recopilan datos adicionales para la evaluación de proceso, para hacer preguntas más detalladas sobre la fidelidad de la implementación del programa.

Page 34: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

34 Octubre de 2016

3.3.2 Plan MEL de proyecto

Nota: Aunque las secciones del Plan MEL de proyecto, la recopilación y el almacenamiento de datos, y la Generación de informes de datos corresponden a la sección de Monitoreo; también se aplican a la sección de Evaluación.

Cada proyecto desarrollará su plan MEL específico para describir su enfoque de seguimiento del progreso y los resultados según los indicadores seleccionados.

El plan MEL describirá:

Los indicadores que se utilizarán para cada resultado de proyecto

Las definiciones de los indicadores

Los datos de referencia expresados como porcentaje

Los objetivos de los indicadores (normalmente un porcentaje o número)

Los medios de verificación, es decir, las fuentes y herramientas de recopilación de datos (por ejemplo, encuestas de monitoreo, encuesta de conocimientos, actitudes y prácticas, informe de actividades, etc.) que se utilizarán para verificar el logro de los objetivos

La frecuencia de la recopilación de datos (bianual, anual, etc.)

El método de análisis de datos (análisis estadístico, temático, etc.)

La generación de informes (tipo de informes producidos)

La organización y persona responsable de la recopilación de datos

3.3.3 Recopilación y almacenamiento de datos

Proceso de recopilación de datos

Las fuentes de recopilación de datos y los medios de verificación se definirán en cada marco de resultados de nivel de proyecto. La referencia se generará a partir información secundaria de los gobiernos o estudios realizados en el área de intervención, o se recopilarán como información primaria durante el proceso de estudio de diagnóstico o inicial. Los datos de nivel de resultados clave e impacto se verificarán mediante las evaluaciones de nivel de proyecto de diferentes intervenciones de programa.

Los proyectos determinarán sus métodos de recopilación de datos en el plan MEL específico para cada proyecto. Los datos relacionados con los indicadores de progreso se obtendrán de fuentes secundarias (bases de datos o estadísticas locales o nacionales, informes de organizaciones internacionales) si ya existen, o de fuentes primarias (encuestas, observaciones, debates de grupos focales, etc.) si se trata de datos nuevos. En el anexo 1 se proporciona una descripción general de las herramientas de recopilación de datos potenciales que se utilizarán en los plan MEL de los proyectos.

Con relación a la frecuencia de recopilación de datos, los planes MEL de proyecto identificarán la frecuencia suficiente para que estos sean útiles, en base a la disponibilidad de recursos humanos y financieros para MEL, y el tipo y la categoría del indicador que se mide. Por ejemplo, los datos de resultados se pueden informar anualmente, pero los datos de productos y procesos se deben recopilar de forma más periódica (trimestral o bianual).

Page 35: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

35 Octubre de 2016

Sistemas de gestión de datos

Los socios ejecutores desarrollarán sistemas en terreno para recopilar y almacenar datos de evaluación y monitoreo del proyecto. Los métodos se describirán en su plan MEL.

El programa LAC usará tecnologías móviles para la recopilación y el almacenamiento de datos con Akvo FLOW. Tomar en cuenta que Akvo está trabajando en algunos aspectos técnicos de compatibilidad para los países que usan SIASAR. Akvo FLOW es una plataforma de monitoreo de proyecto en tiempo real utilizada por One Drop que facilita la recopilación rápida de datos de encuestas mediante una simple aplicación para teléfonos inteligentes Android y un panel en línea. Ésta recopila, gestiona, analiza y presenta los datos de encuestas según región geográfica utilizando herramientas de gestión de datos conectadas a Internet. Los cuestionarios para encuestas se crean en línea y se distribuyen a los teléfonos inteligentes en terreno. Mediante la aplicación FLOW, el equipo de proyecto podrá realizar encuestas con teléfonos inteligentes Android y enviar los datos a la base de datos alojada en la “nube virtual”. Los datos recopilados aparecen automáticamente en el panel de proyecto, de forma que se pueden poner a disposición y analizar en tiempo real.

Bases de datos de WASH nacionales y regionales

Además, se instará a los socios ejecutores a que participen en los esfuerzos nacionales e internacionales de estandarización de los informes sobre el progreso de acceso al agua y saneamiento de la región. Los socios ejecutores excederán en los datos desde un sistema de bases de datos nacional sobre el acceso al agua y saneamiento cuando preparen la referencia. Se instará a los socios ejecutores a que se coordinen con el gobierno, cuando corresponda, para proporcionar los datos que recopilen sobre las comunidades objetivo para su uso en las bases de dato nacionales o en los sistemas regionales, como SIASAR, además de que tomen en consideración los datos nacionales en sus procesos de análisis.

3.3.4 Generación de informes de datos (sistemas de generación de informes)

El programa LAC también trabaja con Akvo para desarrollar un sistema de informes en línea. El sistema de informes en línea se diseñará con la asesoría de todos los socios del programa LAC para garantizar que aborde sus necesidades de generación de informes y monitoreo claves con un formato de informes estandarizado.

Los socios ejecutores ingresarán sus datos de nivel de proyecto según los indicadores a nivel de impacto, resultados y productos, e incluirán la referencia, los objetivos y los logros reales. One Drop consolidará estos datos para producir informes sobre el progreso de los indicadores clave de programa a los que se hace seguimiento mediante la recopilación de datos periódica. One Drop producida un análisis de los indicadores clave de programa en los informes de progreso de nivel de programa cada 6 meses (algunos indicadores se analizarán sólo durante la evaluación media y final).

Junto con los datos sobre los indicadores clave de programa, el sistema de monitoreo en línea y generación de informes en línea contará con campos para que los socios ejecutores ingresen información clave sobre el proyecto, lo que incluye la siguiente información: (i) progreso financiero del Programa; (ii) productos y resultados obtenidos; y (iii) plan de trabajo para el siguiente período de informe, además de los desafíos y lecciones aprendidas. Los informes de progreso se enviarán a ONE DROP mediante el socio de ejecución de forma semianual. El informe de progreso semianual cubre los primeros seis (6) meses de las actividades de un año natural, mientras se espera que el informe anual contenga una descripción general del funcionamiento de un año completo y la información sobre las actividades implementadas durante los últimos seis (6) meses.

Page 36: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

36 Octubre de 2016

Una descripción general de la información que se debe ingresar e informar mediante el sistema en línea incluye:

El informe de progreso describirá la implementación del proyecto a la fecha (progreso acumulativo) según la ejecución y los productos, además de los resultados. Los detalles sobre lo que se incluirá en los informes a nivel de proyecto y los informes a nivel de programa se identificarán como parte del desarrollo del sistema de informes en línea. Una descripción general de los elementos clave que se incluirán en los informes (ingresados a nivel de proyecto y combinados a nivel de programa) incluirá:

a. Descripción Una descripción resumida que incluya el impacto esperado, los resultados, los productos y los

componentes

Los hitos e indicadores clave de programa

Los riesgos y las medidas de mitigación

b. Estado de la implementación Actividades planificadas en el período

Actividades completadas en el período

Desafíos de implementación

Variaciones y explicaciones de desafíos y vacíos

Actividades planificadas para el siguiente trimestre

c. Progreso de los resultados Progreso acumulativo de los indicadores a nivel de productos (cada 6 meses) en comparación con

el objetivo

Progreso acumulativo de los indicadores a nivel de resultados (anual o según evaluación) en comparación con el objetivo

Discrepancias y análisis de las discrepancias

Factores clave de éxito que contribuyen al logro

Desafíos enfrentados y la manera en que se superaron (factores internos)

Riesgos y la manera en que se mitigaron (factores externos)

d. Conocimiento Lecciones aprendidas clave en el periodo

Productos de conocimiento generados y disponibles para compartir

e. Estado financiero Gastos planificados, gastos reales y discrepancias

Explicación de las discrepancias

Page 37: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

37 Octubre de 2016

Roles y responsabilidades de monitoreo

One Drop liderará la implementación de los sistemas necesarios para el monitoreo, la evaluación y el aprendizaje a nivel de programa. One Drop trabajará con Akvo para conceptualizar el sistema de informes en línea, con la asesoría de los socios. One Drop también preparará una orientación que puedan usar los socios para preparar sus propios planes MEL.

A medida que se inician los proyectos y los planes MEL, los socios ejecutores utilizarán el sistema de informes en línea para ingresar, almacenar y analizar los datos de proyecto. One Drop también utilizará estos datos para producir informes de progreso que se enviarán al Comité directivo de programa cada seis meses y, finalmente, a todos los interesados en el programa.

Se presenta una descripción general del flujo de informes en la Figura 3.1. Los diferentes roles, responsabilidades y tareas para establecer e implementar la estrategia MEL se resumen en la Tabla 4.1 y 4.2 de la Sección 4.

Figura 5 – Tabla de flujo de informes

Mecanismos de retroalimentación

El sistema en línea incluye mecanismos de retroalimentación donde One Drop destacará los problemas de implementación o los retrasos de los proyectos individuales, y proporcionará orientación a los socios sobre la manera en que pueden mejorar su desempeño a nivel de proyecto. A nivel de programa, One Drop consolidará la retroalimentación del Comité directivo de programa y el Comité de MEL según su evaluación del desempeño a nivel de programa. Esta retroalimentación se compartirá con los socios en

Informes de datos ingresados por el socio

ejecutor: Informe de proyecto

Revisión y consolidación por One Drop

Informe del programa

Compartir los datos con sistemas nacionales y regionales, como SIASAR

Comparta los resultados y

aprendizajes en los foros de WASH

globales

Comentarios

Comité directivo de programa

Informes

Page 38: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

38 Octubre de 2016

los eventos de evaluación y planificación anuales, e informará a los debates sobre la manera en que se debe orientar el programa según el desempeño colectivo y el aprendizaje de todos los socios.

3.4 Evaluación

En el programa LAC, se entrega la oportunidad de reforzar los procesos del arte social, además de probar hipótesis sobre la manera en que el arte social contribuye al cambio del comportamiento mediante evaluaciones sólidas y pruebas de concepto. De esta manera, creamos las condiciones para una mejora sostenible de las condiciones de vida en las comunidades objetivo. La idea es ejecutar pruebas de concepto con ligeras variaciones según regiones y actividades, compilar evidencia para finalmente determinar un enfoque de intervención escalable que sea viable, promueva un cambio del comportamiento medible y sostenido, y sea costo efectivo. Para lograr esto, la estrategia MEL considera el diseño y la implementación de varias evaluaciones durante el ciclo del proyecto. Más aún, el programa como un todo realizará una evaluación de varios proyectos sobre los resultados y las lecciones aprendidas después de que se completen los primeros proyectos.

En la estrategia MEL se planifican las siguientes evaluaciones:

3.4.1 Evaluación – A nivel de proyecto

Una evaluación de proceso se llevará a cabo cuando se considere adecuado en relación a actividades específicas, para evaluar lo que ha logrado el proyecto y a quién se le proporcionaron las actividades. Las evaluaciones de proceso evaluarán si el proyecto está cumpliendo con los estándares aceptados y será especialmente importante para el componente "B". La información recopilada se usará para la reflexión continua, el análisis de la experiencia, el aprendizaje y el perfeccionamiento de las estrategias de arte social y sinergias dentro del enfoque ABC para cada socio de ejecución, y entre los socios ejecutores. Al analizar la información durante este proceso de evaluación, las partes interesadas también idearán soluciones para estrategias y actividades futuras, para mejorar la implementación del programa. La Tabla 3.4 ofrece ejemplos de preguntas de evaluación de procesos que se pueden usar para el componente B.

Tabla 8 – Descripción general de preguntas de evaluación de proceso para el componente B

CATEGORÍAS CONSIDERADAS EJEMPLOS DE PREGUNTAS

CALIDAD DEL DISEÑO

¿Se pueden medir los objetivos de cambio del comportamiento, están bien definidos y se alinean con los objetivos generales del proyecto?

¿Las partes interesadas pertinentes (comunidad, socios de arte social, socios ejecutores) están involucradas en las actividades, la implementación, el monitoreo y el desarrollo de herramientas de arte social?

¿La intervención incluye mecanismos de seguimiento para reforzar y fomentar el mantenimiento de los comportamientos y actitudes recién adquiridos?

IMPLEMENTACIÓN Y CALIDAD DE LA ENTREGA

¿Las actividades se realizan según lo programado con la frecuencia e intensidad planificadas?

¿Los talleres se realizan según lo planificado? ¿Las herramientas y plantillas de arte social proporcionadas se usan

Page 39: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

39 Octubre de 2016

eficazmente? ¿Sería útil implementar cambios, nuevas herramientas o capacitación?

¿Los mensajes son apropiados, considerando la etapa de los problemas relacionados con WASH en la zona de intervención y las actitudes en cambio de la comunidad?

¿Están cambiando las necesidades del público capturado? ¿El contenido y los mensajes correspondientes del arte social son

atractivos para las necesidades, creencias, inquietudes, actitudes, prácticas actuales y voluntad de cambio del público objetivo?

¿El contenido modela eficazmente las habilidades necesarias para cambiar el comportamiento?

¿La actividad impulsa la participación, la acción o el intercambio de mensajes?

PROFUNDIDAD DEL DEBATE

¿Cuáles son las oportunidades de diálogo y retroalimentación de parte de los miembros de la comunidad sobre los beneficios y las barreras para los comportamientos objetivos de WASH?

¿El diálogo muestra una mayor comprensión o voluntad de acción en relación con WASH?

¿De qué manera las preguntas reflejan las mejoras de conocimiento, actitud y comportamiento?

ALCANCE E IMPACTO

¿Las actividades de arte sociale están alcanzando al público objetivo? ¿De qué manera ha recibido la comunidad en general las actividades y

cómo percibe el contenido o mensaje? ¿De qué manera deben cambiar las actividades de arte social y los

programas de capacitación para mejorar su efecto? ¿En qué circunstancias funcionan y por qué no funcionan? ¿Qué se necesita para mejorar el impacto?

Se efectuarán evaluaciones intermedias en todos los proyectos implementados. El ejercicio evaluará el progreso de los indicadores de productos y resultados dentro del marco de resultados, además de los problemas principales relacionados con la implementación que se podrían abordar con medidas de mitigación y actividades específicas recomendadas como conclusiones de la evaluación intermedia.

Se efectuarán evaluaciones de final de proyecto en todos los proyectos implementados. El ejercicio evaluará los indicadores de productos y resultados dentro del marco de resultados, analizando la pertinencia, eficacia, efectividad, costo efectividad, innovación, sostenibilidad, entre otros criterios. La evaluación final del proyecto concluye con las prácticas recomendadas y lecciones aprendidas durante el diseño y la implementación del proyecto.

Se efectuará una evaluación posterior a la implementación en algunos casos específicos, lo cual se determinará según la disponibilidad de datos y el presupuesto. La evaluación posterior a la implementación se llevará a cabo dos años después de finalizado el proyecto. El objetivo principal es verificar la sostenibilidad de la intervención en cuanto al nivel de acceso, el nivel de servicio, el comportamiento en el uso de las instalaciones y las prácticas de higiene, entre otros. Los indicadores se basarán en el marco de resultados original diseñado para el proyecto.

Page 40: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

40 Octubre de 2016

Se efectuará una evaluación del impacto en algunos casos específicos, lo cual se determinará según la disponibilidad de datos y el presupuesto. La evaluación del impacto será un estudio sólido diseñado durante las primeras etapas del proyecto, para definir el grupo de control y tratamiento, además de la referencia.

3.4.2 Evaluación – A nivel de programa

Evaluación multi-proyectos: Después de completar el primer conjunto de proyectos, el Comité MEL realizará un análisis general de los resultados principales y las lecciones aprendidas de todos los proyectos. Esta evaluación proporcionará información a todos los socios sobre las formas de mejorar las intervenciones actuales o planificar intervenciones futuras para lograr sostenibilidad, escalabilidad e incidencia en las políticas.

La figura a continuación muestra un esquema de las evaluaciones vinculadas con la Estrategia MEL.

Figura 6 – Evaluaciones a nivel de proyecto y programa

Page 41: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

41 Octubre de 2016

3.5 Gestión del conocimiento y aprendizaje

El Programa LAC está diseñado como un esfuerzo colaborativo que fomentará el intercambio de conocimiento y actividades de aprendizaje entre un amplio rango de partes interesadas, con el objetivo de mejorar el impacto y la sostenibilidad de las inversiones de WASH. Se integrarán la gestión efectiva del conocimiento y el aprendizaje continuo en el diseño y la implementación del programa y de cada uno de los proyectos.

Aunque ambas áreas son complementarias y se superponen en parte, las actividades de aprendizaje se centrarán más deliberadamente en los públicos principales de las organizaciones asociadas y las partes interesadas locales implicadas en el Programa LAC. Las actividades de gestión del conocimiento se centrarán en alcanzar a los públicos fuera del Programa LAC con lecciones que se ha determinado que tienen una pertinencia regional más amplia o global.

3.5.1 Enfoque del aprendizaje

Los objetivos de los componentes de aprendizaje del programa son: Desarrollo de las capacidades locales: Crear oportunidades de aprendizaje que empoderen a las

comunidades y los artistas locales, los gobiernos y los interesados de la sociedad civil para que busquen soluciones adecuadas a los desafíos de acceso a WASH en su contexto específico.

Transferir el conocimiento entre las localidades y los países: Desarrollar foros que fomenten el intercambio de conocimiento sobre las soluciones de WASH que surgen de las intervenciones de proyecto a nivel regional y de país.

Contribuir a la mejora continua en el sector de WASH: Establecer plataformas de aprendizaje colectivo entre los organizadores y socios ejecutores que generen evidencia y contribuyan global y regionalmente

3.5.2 Actividades de desarrollo de capacidades y aprendizaje

Se integrarán el aprendizaje y el desarrollo de capacidades de los interesados en el programa mediante el ciclo de proyecto y programa. Para mantener el enfoque de impacto colectivo, los procesos de aprendizaje ponen énfasis en la reflexión, el diálogo entre las partes interesadas, la creación de espacios a diferentes niveles para hacer preguntas y cuestionar suposiciones, y fomentan la retroalimentación de varias fuentes para contar con perspectivas variadas sobre lo que se puede aprender a través de las intervenciones del programa.

Se pondrán a disposición diferentes actividades de aprendizaje para los diferentes interesados en el programa a lo largo del ciclo de programa y proyecto, y se crearán oportunidades de intercambio y aprendizaje con los interesados externos. Las actividades de aprendizaje tendrán objetivos:

Socios ejecutores

Partes interesadas en el proyecto, como las comunidades, los artistas locales, los oficiales locales, los proveedores de servicios de WASH

Organizadores

Page 42: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

42 Octubre de 2016

Se pondrá énfasis en las actividades que reúnan a varias partes interesadas para promover la reflexión y el intercambio de perspectivas, enfoques y prácticas diversos. El aprendizaje generado a nivel de proyecto se podrá utilizar para mejorar el proyecto y compartir las prácticas recomendadas a nivel de programa. Ciertos resultados e información generados por el proyecto también podrían servir para informar la organización y las estrategias de todo el sector. Las evaluaciones anuales de proyecto son una actividad de aprendizaje clave que reunirá a todos los socios. Estas evaluaciones tendrán los siguientes objetivos:

Evaluar de forma conjunta los datos de los sistemas de monitoreo y evaluación, o los estudios de diagnóstico para interpretar y desarrollar conocimientos y acciones recomendadas entre todos.

Evaluar la calidad de los productos técnicos generados en el proyecto.

Evaluar el progreso, de acuerdo con el marco lógico y las responsabilidades de cada socio, y los resultados logrados durante el año según cada componente.

Debatir sobre la gestión de proyecto; identificar los logros y los desafíos (recursos, monitoreo, colaboración entre los socios, etc.).

Llevar a cabo un ejercicio para descubrir ejemplos sobre lo que ha tenido excelentes resultados en la iniciativa de impacto colectivo, por qué ocurrió esto y generar ideas para aumentar estos éxitos y usarlos como base para seguir avanzando.

Invitar a oradores externos sobre diferentes temas pertinentes para traer ideas o perspectivas nuevas que puedan considerar los grupos.

Evaluar los planes para el año siguiente a la luz de la información reunida.

Entre otros tipos de actividades de aprendizaje se incluyen:

Dedicar tiempo (de manera regular) en las reuniones de equipo de proyecto y programa de todos los niveles (es decir, reuniones del Comité del programa LAC, reuniones de los grupos de trabajo o reuniones del Comité directivo a nivel de proyecto o país) para analizar cuáles son los socios que han aprendido mediante el trabajo en curso, los éxitos y fracasos de la iniciativa, y todas las consecuencias pertinentes a la práctica.

Las reuniones educativas o estrategias educativas interactivas normalmente se considerarán efectivas; estas incluyen talleres de intercambio de experiencias, capacitación y sesiones prácticas.

Los debates y la retroalimentación dentro de los equipos de trabajo con miembros de la comunidad o diferentes partes interesadas también son estrategias efectivas de aprendizaje.. Sin embargo, es importante considerar algunos asuntos clave, como los siguientes: a quién se le pedirán los comentarios, si los comentarios son oportunos, la calidad de los datos, la importancia del contenido, la naturaleza activa o pasiva de los comentarios.

Realizar eventos de aprendizaje para enfocarse en temas clave como forma de desarrollar conocimiento y comprensión profundos sobre las áreas de contenido que presentan desafíos, en toda la comunidad. En ellos se puede incluir a los residentes, los líderes de sistemas, expertos de la materia, profesionales de desarrollo de organizaciones u oficiales de gobierno.

Page 43: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

43 Octubre de 2016

3.5.3 Gestión del conocimiento

En el contexto de WASH global, el propósito de gestionar el conocimiento es compartir con otros y aprender de ellos, de manera que podamos mejorar las actividades de WASH para todos de forma más eficiente y eficaz. Mientras las actividades de aprendizaje del programa tendrán como objetivo a públicos internos, las actividades de gestión del conocimiento se centrarán principalmente en la participación en un diálogo con las partes interesadas externas al Programa LAC. Los públicos incluirán la gestión extendida y las redes de empleados de las organizaciones asociadas al programa, los expertos técnicos, los funcionarios de gobierno, los socios de desarrollo internacional de cada país y otras partes interesadas con conocimiento e influencia sobre las políticas y prácticas de WASH en todo el mundo. One Drop, en colaboración con los comités de comunicación y MEL, establecerá instrucciones para que los esfuerzos de intercambio de conocimiento del programa se desarrollen de acuerdo con los diferentes públicos y resultados. Para lograr esto, las actividades de gestión del conocimiento tendrán cuatro pasos clave, como se muestra en el siguiente diagrama:

Identificación

Primero, se revisará si el conocimiento obtenido con las actividades de MEL es pertinente para los desafíos de WASH en otros países y contextos de otras partes del mundo, donde la iniciativa potencialmente se implementará en el futuro. Por ejemplo, los enfoques para trabajar con comités de saneamiento (Juntas de Saneamiento) en Paraguay podrían indicar métodos más efectivos de participación con los comités de agua en los países de África subsahariana. Del mismo modo, los comités de comunicaciones y MEL buscarán identificar conocimiento emergente o existente del sector que pueda informar el diseño mejorado y la implementación del programa y los proyectos de países individuales. Por ejemplo, El modelo de soporte posterior a la construcción Circuit Rider utilizado en El Salvador podría transferirse a otros países de Latinoamérica y ayudar a mejorar la sostenibilidad de WASH en los proyectos de Guatemala o Nicaragua. El personal y el equipo de gestión del Programa LAC utilizarán medios existentes de conectar con expertos internacionales mediante mecanismos de gobernanza interna, como el comité directivo de programa, el comité de comunicaciones y el comité de MEL, el comité de asesoría de programas internacionales de One Drop, y mediante la participación activa en eventos de aprendizaje y conferencias internacionales para identificar oportunidades de intercambio de conocimiento. Documentación

En segundo lugar, a medida que se identifican las lecciones importantes, se documentarán en productos de conocimiento adecuados y accesibles para los públicos objetivos. Estos productos pueden tener un rango de formatos, como artículos de revistas científicas, estudios de caso, guías, artículos de revistas,

1. Identificación 2. Documentación 3. Difusión 4. Aplicación

Page 44: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

44 Octubre de 2016

videos, presentaciones de diapositivas, recomendaciones de programación, informes de políticas, etc. Los socios del programa, en colaboración con One Drop, serán responsables por el desarrollo de estos productos de conocimiento. One Drop proporcionará apoyo en la forma de plantillas de intercambio, prácticas recomendadas y pautas de desarrollo de marca para garantizar un nivel de calidad alto y constante. Se presentan criterios de ejemplo para guiar el desarrollo de productos de conocimiento en la Tabla 2.

Cuadro 3 – Características de un buen producto de conocimiento

Difusión

En tercer lugar, mientras el conocimiento se documenta, los productos se diseminarán mediante diferentes canales de comunicación. Los siguientes son algunos ejemplos: comunicado de prensa, boletín del sector, presentaciones en conferencias y publicaciones mediante sitios web prestigiosos relacionados con el agua, redes sociales y comunidades en línea relacionadas con las prácticas. Existen muchos ejemplos conocidos, como los foros de discusión en línea Sustainable Sanitation Alliance (Alianza de saneamiento sostenible) o Household Water Treatment and Safe Storage (Tratamiento y almacenamiento seguro del agua doméstica). Los canales específicos utilizados se seleccionarán con el soporte y la asesoría del comité de comunicaciones para alcanzar al público adecuado en el momento adecuado con la cantidad correcta de información.

También se instará a los organizadores y los socios ejecutores del Programa LAC a participar en eventos internacionales y regionales de WASH, como la Semana Mundial del Agua en Estocolmo o la Conferencia de Agua y Salud de UNC, y a multiplicar los esfuerzos de comunicación del programa mediante sus canales internos, como informes anuales, boletines para los empleados y boletines técnicos. Las actividades de refuerzo mutuo ayudarán a crear puntos de compromiso adicionales. Esto también puede ayudar a llegar a los miembros del personal y gestión que pueden no estar familiarizados con el programa, pero que trabajan en intervenciones similares en otras partes del mundo.

Basado en la evaluación de las necesidades y la demanda del producto entre los usuarios meta para garantizar la pertinencia, efectividad, utilidad y el valor del producto.

Diseñado para un público específico, tomando en consideración las necesidades funcionales y los

niveles técnicos.

Pertinente para las necesidades de toma de decisiones.

Redactado de forma clara y sencilla con uso de imágenes cuando corresponda.

Basado en información de evaluación imparcial.

Cuando corresponda, se desarrolla mediante un proceso participativo y se valida mediante un proceso

de control de calidad con las partes interesadas pertinentes.

Está fácilmente a disposición del público objetivo por los medios más efectivos y eficientes.

Es coherente con la presentación de los productos para mejorar la visibilidad y el aprendizaje.

Page 45: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

45 Octubre de 2016

Aplicación

Finalmente, se prevé que las lecciones aprendidas del Programa LAC podrían mejorar el impacto y la sostenibilidad de las intervenciones de WASH en muchas otras partes del mundo. Inicialmente, las partes interesadas podrían participar de manera informal mediante seminarios web y debates dirigidos en comunidades en línea relacionadas con las prácticas para generar debate.

Se insta a los organizadores y socios ejecutores del programa a que participen en alianzas nacionales, regionales y globales del sector de WASH, comunidades de práctica, coaliciones y redes para desarrollar lazos con otras partes interesadas.

De esta forma comienza el diálogo y se forman relaciones de confianza donde pueden surgir oportunidades de influir en las políticas y prácticas. Este enfoque de influir en la sostenibilidad mediante la confianza y las relaciones refleja principios similares para el impacto colectivo a los utilizados en la gestión del Programa LAC.

A medida que las implicaciones de los descubrimientos y lecciones del programa maduran y atraen atención de públicos externos, se desarrollará una estrategia para dirigirse a grupos de público más amplios con relación al aprendizaje individual e institucional, el fortalecimiento de la capacidad y la asesoría técnica, potencialmente en conjunto con organizaciones de WASH establecidas e instituciones académicas y de capacitación. Entre los ejemplos se incluyen talleres participativos, capacitación o sesiones educativas, o fortalecimiento de la capacidad a largo plazo, los que podrían utilizarse en ampliaciones futuras planificadas del Programa LAC a otros países.

PARTE IV: Implementación de MEL

4.1 Roles y responsabilidades

One Drop liderará el establecimiento del sistema MEL y garantizará su implementación en colaboración con los socios y el Comité MEL. Los roles y responsabilidades, las programaciones y las tareas claves para la configuración de los sistemas MEL se presentan en la Tabla 4.1 más adelante. En la Tabla 4.1 se proporciona una descripción general de las tareas principales de MEL durante la implementación, la frecuencia y los roles y responsabilidades del organismo líder en la implementación de cada tarea identificada.

Page 46: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

46 Octubre de 2016

Tabla 9 – Roles y responsabilidades para establecer los sistemas MEL11

Tabla 10 – Roles y responsabilidades para el monitoreo, la evaluación y el aprendizaje continuos

ACTIVIDAD FRECUENCIA LíDER

Reuniones del Comité MEL Bianuales y cuando

corresponda One Drop

Monitoreo (apoyo de la recopilación de datos) y generación de informes del proyecto

Bianual Socio ejecutor

Informes de progreso de programa Bianual One Drop

Compartir lecciones de los datos para fomentar el aprendizaje y mejorar el programa

Todos los años Comité de comunicaciones y MEL/

One Drop

Apoyo y desarrollo de las capacidades (socios ejecutores, gobierno)

Continuo y basado en las necesidades identificadas

One Drop

11

Las fechas pueden variar con la introducción de proyectos, por ej.: México y Colombia

ACTIVIDAD JUL - AGO

SEP - OCT

NOV - DIC

ENE - FEB

MAR - ABR LíDER

Preparar y difundir la guía de indicadores y estrategia de MEL

X X One Drop

Desarrollar plantillas/sistemas de monitoreo e informes en línea y

X X X One Drop

Estudio de diagnóstico ABC y línea base X X X

Socio ejecutor

Talleres diseño en el terreno

X

One Drop

Marcos lógicos de proyectos

X

Socio ejecutor

Planes MEL (incluyen los indicadores de proyecto)

X X X Socio ejecutor

Propuestas de proyecto (incluyen la estrategia MEL, el presupuesto y las actividades de desarrollo de capacidades)

X X Socio ejecutor

Page 47: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

47 Octubre de 2016

ACTIVIDAD FRECUENCIA LíDER

Evaluación de proceso (proyectos) POR DETERMINAR Socio ejecutor con el apoyo de

One Drop

Evaluaciones intermedias (proyecto) Una vez, en un punto medio Socio ejecutor (interno o

involucrar a un asesor externo)

Evaluaciones finales (proyecto) Una vez, seis meses antes de

que termine el proyecto Socio ejecutor involucrará a un

asesor externo

Evaluaciones multi-proyectos (programa) POR DETERMINAR One Drop involucrará a un asesor externo

Evaluaciones posteriores a la implementación (proyecto/programa)

Una vez, 2 años o 5 años (cuando corresponda) después de finalizado el proyecto

One Drop involucrará a un asesor externo

Evaluación del impacto (1 proyecto por determinar)

Continua (ideada en la fase de diseño)

One Drop involucrará a un asesor externo

4.2 Presupuesto

El programa LAC garantizará que cada proyecto designe un presupuesto específico para apoyar la implementación de su plan MEL. A nivel del programa LAC, One Drop comprometerá personal para monitoreo y generación de informes. Los presupuestos para las evaluaciones a nivel de programa serán determinados por el Comité directivo del programa según las propuestas del Comité MEL.

4.3 Desafíos y medidas de mitigación

Durante la recopilación y consolidación de datos de WASH y otras informaciones sobre el estado del proyecto se presentarán algunos desafíos a lo largo de la implementación de la estrategia MEL. A continuación se presentan algunos problemas clave identificados y algunas medidas preliminares para enfrentarlos:

4.3.1 Coherencia en la definición y medición de los indicadores

Los métodos de cambiar el comportamiento de higiene y los sistemas WASH, además de las definiciones, variarán según el contexto local y la experiencia previa de los socios ejecutores. El programa LAC preparará una guía para proporcionar definiciones estándar y orientación sobre los métodos de

Page 48: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

48 Octubre de 2016

recopilación de datos y generación de informes con los indicadores clave de programa para promover una mayor coherencia. Las evaluaciones de varios proyectos, especialmente intermedias, darán la oportunidad de evaluar la forma en que los socios ejecutores están interpretando y generando informes sobre los indicadores, además de proporcionar retroalimentación para mejorar la estandarización de la generación de informes de los datos.

4.3.2 Análisis de atribución frente a contribución

El programa LAC se implementará en comunidades objetivo donde es probable que se estén realizando otras iniciativas para mejorar WASH. Sin embargo, otros programas y dinámicas socioeconómicas inevitablemente influirán en los cambios de acceso a WASH y del comportamiento que no serán atribuibles al programa LAC. Como se indicó en la sección de evaluación, se realizará por lo menos una evaluación de impacto a nivel de proyecto o país de forma casi experimental para comparar la situación con el proyecto y sin el proyecto, y evaluar de mejor forma los resultados atribuibles al programa LAC.

4.3.3 Medición de los indicadores cualitativos de cambio del comportamiento

El cambio del comportamiento son proceso donde el resultado final que se espera es variable para diferentes grupos de personas y contextos culturales y locales diversos. Realizar un seguimiento del cambio del comportamiento requiere recopilar e interpretar información cualitativa. Cierta información cualitativa se puede cuantificar mediante la categorización de las observaciones y respuestas de encuestas, y se podrá informar como parte de la medición del desempeño de proyecto y programa. Sin embargo, el programa también dará prioridad a los informes cualitativos, como las historias de caso en terreno, y otros métodos para describir las características de la comunidad, el contexto local y la respuesta variada a las técnicas de cambio del comportamiento como parte del enfoque MEL.

4.4 Conclusión

El programa LAC es una nueva empresa que tiene como objetivo generar un impulso mayor al abordar los desafíos de WASH en la región LAC mediante la colaboración y el impacto colectivo. El programa LAC se enfoca específicamente en los cambios del comportamiento como un elemento crítico para lograr los Objetivos de desarrollo sostenible relacionados con WASH.

El programa LAC promoverá la innovación en el fomento y la evaluación del cambio del comportamiento relacionado con WASH. Se instará a los socios ejecutores a que realicen pequeños pilotos de enfoques nuevos, evaluaciones e informes sobre los resultados al grupo en general. El uso de tecnologías, las artes y la participación de la comunidad se combinará con técnicas de monitoreo y evaluación más estándar para mejorar la comprensión de la forma en que el cambio del comportamiento funciona en la práctica.

El componente MEL aplicará un enfoque riguroso al seguimiento de los resultados, abierto a ajustes y mejoras a lo largo del ciclo del programa. Como resultado, esta estrategia se evaluará y evolucionará en el tiempo para garantizar que MEL esté firmemente arraigado en el programa y contribuya a mejorar el conocimiento y las prácticas de los cambios del comportamiento relacionadas con WASH.

Page 49: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

49 Octubre de 2016

Referencias

Addison, M. (2014). “Triggering behavioural change with bite-size video”, 24 de noviembre de 2014. Obtenido en: http://www.videoarts.com/blog/posts/2014/nov/triggering-behavioural-change-with-bite-size-video/

Kania, J., & Kramer, M. (2013). Embracing Emergence: How collective impact addresses complexity. Stanford Social Innovation Review. Sallis, J. F., Owen, N., & Fisher, E. B. (2008). Ecological models of health behavior. Health behavior and health education: Theory, research, and practice, 4, 465-486.

Page 50: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

50 Octubre de 2016

Anexos

Anexo 1– Herramientas de recopilación de datos

Tabla A – Datos cuantitativos frente a cualitativos

CUANTITATIVO CUALITATIVO

Información

Mide y explica lo que se estudia con números (Es decir, conteos, proporciones, porcentajes, relaciones, puntuaciones medias, etc.). Se suele considerar mejor para medir muestras amplias y más objetivos que los datos cualitativos, pero no entrega información sobre la forma en que las personas se sienten o cómo se ha desarrollado algo.

Explica lo que se estudia con palabras o imágenes (observaciones documentadas, descripciones de casos representativos, percepciones, opiniones de valor, fotos, etc.). Es útil para ayudar a conocer el por qué y cómo de algo, pero normalmente limita las generalizaciones.

Métodos

Tienden a utilizar enfoques estructurados (es decir, respuestas codificadas a las encuestas) que proporcionan datos precisos que se pueden analizar estadísticamente y replicar (copiar) con fines de comparación.

Utiliza técnicas semiestructuradas (por ejemplo, observaciones y entrevistas) para proporcionar una comprensión en profundidad de las actitudes, creencias, motivaciones y conductas. Tienden a ser más participativas y reflexivas en la práctica.

Ejemplos El 40 % de los hogares pasa más de dos horas obteniendo el agua para las necesidades del hogar.

Durante las reuniones comunitarias, la mayoría de las mujeres explicaron que pasan una gran cantidad de tiempo obteniendo agua potable, por lo que cuentan con una cantidad limitada de agua disponible para la higiene personal y del hogar.

Page 51: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

51 Octubre de 2016

Tabla B – Descripción de las herramientas de recopilación de datos

HERRAMIENTAS DE RECOPILACIÓN DE DATOS

DESCRIPCIÓN BREVE DE LA HERRAMIENTA

TIPO DE DATOS RECOPILADOS

CUANTITATIVO CUALITATIVO

Encuestas a los hogares

Se utilizan antes de la intervención para recopilar datos de referencia sobre las características socioeconómicas y el conocimiento relacionado con WASH, las actitudes y prácticas de las comunidades objetivo.

x

Encuestas de monitoreo

Miden los efectos progresivos de las actividades durante la intervención y después de ella; se utilizan para informar las decisiones de ajuste de las actividades y tomar medidas correctivas.

x

Encuestas de satisfacción después de las actividades de arte social

Se utilizan después de ciertas actividades de arte social para medir la satisfacción de los participantes en relación con la actividad, sus reacciones, etc. También son un medio para mejorar las actividades.

x

Encuestas de evaluación del conocimiento

Se realizan después de ciertas actividades de arte social para medir el efecto de las actividades en la adquisición de conocimiento de los participantes sobre ciertos temas específicos de WASH abordados durante las actividades. Normalmente se utilizan con los participantes de talleres.

x

Encuestas de impacto de evento

Se utilizan inmediatamente después de los espectáculos multidisciplinarios con una muestra del público para medir las reacciones, la satisfacción, la respuesta emocional; y para recopilar retroalimentación sobre el formato y la calidad del espectáculo, que también pueden recordar los mensajes, las intenciones de tomar acción, etc.

x

Otras encuestas

Las encuestas de puntos de agua, proveedores de servicios, escuelas y clínicas, etc. pueden informar sobre la calidad del agua, su funcionalidad, el tiempo de espera en el punto de agua, la gestión del agua y otros temas específicos de interés para la intervención.

x

Page 52: STRAT GIA MONITOR O, VALUA IO N Y APR N IZAJ · de las actividades y los resultados del proyecto, y obtener datos para informar la toma de decisiones a niveles de proyecto y de programa

52 Octubre de 2016

HERRAMIENTAS DE RECOPILACIÓN DE DATOS

DESCRIPCIÓN BREVE DE LA HERRAMIENTA

TIPO DE DATOS RECOPILADOS

CUANTITATIVO CUALITATIVO

Red de observación de actividades específicas, como el "rincón de la higiene"

Se usa para medir el progreso y los cambios derivados de la actividad (en términos del material del rincón de la higiene, la limpieza en clases, la participación del personal docente, etc.).

x12

Debates de grupos focales

Se utilizan al comienzo de un proyecto, durante él o cuando se finaliza para recopilar información cualitativa sobre la población objetivo, las prácticas de WASH, el microfinanciamiento, etc., y para recopilar comentarios sobre las actividades del proyecto y la gestión del proyecto con los socios, etc.

X X

Entrevistas de informantes clave

Se realizan con las partes interesadas clave con mucho conocimiento sobre WASH en la comunidad o en la comunidad en general (por ejemplo, trabajadores sanitarios locales, miembros del Comité de agua, etc.). Proporcionan información detallada sobre temas específicos de interés para la intervención; las entrevistas pueden ser semiestructuradas o abiertas..

X

Historias de beneficiarios Se invita a los beneficiarios a que compartan sus testimonios o historias inspiradoras e interesantes sobre el impacto del proyecto.

X

Herramientas participativas y basadas en el arte

(p. ej., lenguaje con fotos, Café mundial)

Desarrollar la creatividad de los participantes de expresar sus reacciones frente a las actividades de arte social mediante imágenes, videos o actividades participativas; permite la recopilación de información de forma colaborativa y entretenida.

X

Diarios de artistas

Proporciona información narrativa cotidiana sobre los talleres y retroalimentación directa de parte de los artistas sobre la implementación de las actividades de una forma innovadora.

X

12

Las observaciones suelen ser cualitativas, a menos que use una tabla de observación cuantitativa. En este caso, se refiere a una tabla de observación con un sistema de puntaje.