Noviembre, 2010

UNMSMFacultad de Medicina

Departamento Académico de Nutrición

E.A.P. de Nutrición

Prof. Lic. Ernesto B. Huapaya Espejo

e-mail: ernestonut7@hotmail.com

ernestonut7@gmail.com

ernestonut2001@yahoo.es

Contenido de la claseContenido de la clase: Objetivo de la clase Evaluación Significado de evaluación Evaluación cuantitativa y cualitativa Tipos de evaluación Componentes de la evaluación Sugerencias para realizar la evaluación Evaluación de costo efectividad Ejemplos de evaluación Resultados inesperados Experiencias de evaluación de

Programas Sociales Bibliografía

Objetivo de la clase Reconocer la necesidad de evaluar los proyectos

de alimentación y nutrición en comunidades. Identificar los procedimientos para evaluar el

cumplimiento de los objetivos, el desarrollo del proceso y el costo efectividad de un proyecto.

Analizar la influencia de factores

ajenos al proyecto sobre los

resultados esperados de este.

INTRODUCCIÓNEn el Perú los programas sociales y las acciones e intervenciones del Estado en general, revelan la inexistencia de sistemas de monitoreo y evaluación lo cual se debe a la idea o percepción errónea que los gestores u operadores tienen de la poca utilidad de este sistema en los procesos gerenciales o de toma de decisión y por otro lado se ve como una tarea que es necesario realizar por alguna exigencia normativa, disposición del gobierno central o de agencias cooperantes.

Monitorear y Evaluar no son prácticas

permanentes en las instituciones y las pocas

que se realizan se aplican a los procesos,

sin tomar en cuenta las evaluaciones de impacto.

¿Qué significa EVALUAR?

Evaluar un proyecto significa realizar un análisis crítico, objetivo y sistemático, de las realizaciones y resultados de éste, en relación con los objetivos propuestos, las estrategias utilizadas y los recursos asignados.

A través de la evaluación se espera identificar las razones del rendimiento satisfactorio o insatisfactorio y los resultados de un proyecto. En este proceso se compara lo que se quería hacer, cómo, por qué y con quién; con lo que fue efectivamente realizado.

¿Cuándo debería programarse la evaluación?

La evaluación puede ser programada en

diversas etapas de la implementación del

proyecto e incluso después de su

conclusión.

Esta característica diferencia

la evaluación del seguimiento (monitoreo),

que es realizado solamente durante el

período de implementación del proyecto.

¿Por qué se evalúa? Porque permite medir lo realizado y apreciar si todos los esfuerzos fueron efectivos,

mostrar los fracasos o debilidades y como superarlos; Porque provee información cuyo análisis permite orientar la toma de decisiones futuras

para hacer un trabajo más efectivo; Porque permite apreciar si el costo de las actividades está en relación a los resultados

que se están alcanzando; Porque permite informar a la gente sobre los resultados y compartir la experiencia

obtenida; Porque permite comparar los resultados del programa con los obtenidos por otros

semejantes; Porque permite realizar un análisis crítico del trabajo desarrollado, ayudando a los

involucrados a apreciar la amplitud del contexto y las implicaciones de su propio trabajo.

Sin embargo, es frecuente que la verdadera razón para evaluar sea alguna de las siguientes:

• Porque es un requisito solicitado por el gobierno o la organización no gubernamental.

• Porque la agencia que financia el proyecto necesita los informes técnicos y financieros para apoyar la continuidad o término de éste.

• Porque los investigadores de la universidad desean probar nuevas técnicas de evaluación, con fines docentes o para publicar la experiencia obtenida.

• Porque la institución ejecutora del proyecto necesita información para fines publicitarios del gobierno.

¿Qué se evalúa?La evaluación básicamente mide:

El logro de los objetivos del proyecto. Este se expresa en indicadores, principalmente números o porcentajes. Por ejemplo: número de hogares participantes en el proyecto que aumentaron la seguridad alimentaría familiar; número o porcentaje de niños menores de 2 años que alcanzaron el peso normal para su talla; cantidad de alimentos producidos por familia, etc.

Esta es la evaluación sumativa o acumulativa.

¿Qué se evalúa?

El desarrollo de las actividades programadas. La forma y fecha en que se realizaron las actividades y la identificación de los factores que favorecieron o limitaron el logro de los objetivos del proyecto. Este tipo de información también se expresa a través de indicadores, por ejemplo: número de participantes en un programa de capacitación; cantidad de semillas entregadas, etc. Esta información se puede obtener a través del seguimiento del proyecto.

Esta es la evaluación formativa o de proceso.

El costo efectividad del proyecto. Interesa especialmente que la alternativa escogida para lograr los objetivos sea la más económica y que los cambios justifiquen la cantidad de recursos económicos invertidos. El costo de los recursos trabajo, tiempo e insumos utilizados debe ser registrado desde el inicio del proyecto.

Esta es la evaluación de costo efectividad.

¿Qué se evalúa?

Evaluación cuantitativa y cualitativa

Evaluación cuantitativa

Los indicadores expresados en números y porcentajes representan los aspectos cuantitativos de una evaluación.

No es difícil determinar los aspectos cuantitativos de una evaluación. Por ejemplo, el objetivo de un programa de vacunación puede ser alcanzar a un determinado número de niños con un cierto tipo de vacuna en un período de tiempo. Cuando el programa se termina es posible decir exactamente cuantos niños fueron vacunados en relación a lo programado.

Evaluación cuantitativa y cualitativa

Evaluación cualitativa

Son difíciles de medir, que pueden influir en el éxito o fracaso del proyecto.

Las conductas y actitudes de la gente, sus habilidades, cualidades, valores, motivaciones, y como la gente se relaciona una a otra y al proyecto, porque se relacionan a la calidad de lo que está siendo evaluado.

La evaluación cualitativa ayuda a explicar por qué un proyecto resulta de una determinada manera en un lugar en particular y de otra completamente distinta en otro lugar. Sirve también para explicar las debilidades y fortalezas, y disponer de elementos de juicio para proponer algunas soluciones.

ES PRECISO QUE LOS AGENTES DE ES PRECISO QUE LOS AGENTES DE CAMPO COMPRENDAN QUE CAMPO COMPRENDAN QUE

CONOCER LAS RAZONES POR LAS CONOCER LAS RAZONES POR LAS QUE UN PROYECTO TIENE ÉXITO O QUE UN PROYECTO TIENE ÉXITO O

FRACASA PUEDEN SER TAN FRACASA PUEDEN SER TAN IMPORTANTE COMO SUS IMPORTANTE COMO SUS

RESULTADOS RESULTADOS

TIPOS DE EVALUACION:

Necesidades

Proceso

Resultados

Impacto

I. EVALUACION DE NECESIDADES I. EVALUACION DE NECESIDADES

Necesidad:Necesidad: Discrepancia mensurable entre los Discrepancia mensurable entre los resultados deseados y los observadosresultados deseados y los observados

Evaluación de Necesidades: Evaluación de Necesidades: Estudio sistemático de unEstudio sistemático de unproblema , que se realiza incorporando problema , que se realiza incorporando informaciones y opiniones de diversas informaciones y opiniones de diversas fuentes fuentes para tomar decisiones ( mejoramiento, desarrollo para tomar decisiones ( mejoramiento, desarrollo fortalecimiento)fortalecimiento)

I. EVALUACION DE NECESIDADES I. EVALUACION DE NECESIDADES

Necesidad:Necesidad: Discrepancia mensurable entre los Discrepancia mensurable entre los resultados deseados y los observadosresultados deseados y los observados

Evaluación de Necesidades: Evaluación de Necesidades: Estudio sistemático de unEstudio sistemático de unproblema , que se realiza incorporando problema , que se realiza incorporando informaciones y opiniones de diversas informaciones y opiniones de diversas fuentes fuentes para tomar decisiones ( mejoramiento, desarrollo para tomar decisiones ( mejoramiento, desarrollo fortalecimiento)fortalecimiento)

DETECCIÓN – ANÁLISIS – EVALUACIÓN DE NsDETECCIÓN – ANÁLISIS – EVALUACIÓN DE Ns

Lo que sabenLo que puedenLo que quieren hacer

Lo que sabenLo que puedenLo que quieren hacer

Lo que sepanLo que puedanLo que quieran hacer

Lo que sepanLo que puedanLo que quieran hacer Gestión Gestión

POBLACION OBJETIVO

CONTEXTO

Elaboración de programaElaboración de programa

CompetenciasCompetencias

DISEÑO

FUNDAMENTACION

PROCESO

RESULTADOSINNOVACIÓNINNOVACIÓN

¿ Cómo evaluar necesidades ?

¿ Quién quiere evaluar las Ns? ¿ Por que se desea evaluar las Ns ? ¿ Cúal será el alcance de la evaluación ? ¿ En qué Ns nos centraremos y en qué nivel ? ¿ Qué datos podemos recoger ? ¿ Qué métodos podemos usar para la recogida de datos ? ¿ Qué podemos hacer con los datos ? ¿ Cúales son los recursos de que disponemos ? ¿ Qué problemas esperamos resolver con la evaluación ?

1. Modelos de aproximación

ELEMENTOS EN LA FORMULACIÓN DE UNA ELEMENTOS EN LA FORMULACIÓN DE UNA ESTRATEGIA DE DESARROLLOESTRATEGIA DE DESARROLLO

ESTUDIOSEXPERIENCIASESTADO ACTUALPROYECTO E. I.

ESTRATEGIASALTERNATIVASFORMULACIÓN DE LAS ESTRATEGIAS

MISIÓN

EVALUACIÓNDE LAS

ALTERNATIVAS

INFORMACIÓN DISPONIBLE

CRITERIOS E INDICADORES

FORTALEZAS

SONDEO RRHHDECISIONES

POLÍTICAS DE DESARROLLO

FACTORES INFLUYENTES

PRIORIDADES

2. Modelo de elementos organizacionales Diferencias entre la evaluación externa e interna entre: - Esfuerzos – resultados – impactos - Medios - objetivos

2. Modelo de elementos organizacionales Diferencias entre la evaluación externa e interna entre: - Esfuerzos – resultados – impactos - Medios - objetivos

3. Modelo comunitario - Evalúa la relación entre la situación actual y las Ns de la comunidad

3. Modelo comunitario - Evalúa la relación entre la situación actual y las Ns de la comunidad

4. Modelo cíclico Incorpora los resultados que se obtienen al propio proceso4. Modelo cíclico Incorpora los resultados que se obtienen al propio proceso

5. Modelo de discrepancia - Determinar fines y objetivos (expertos) (lo que debería ser) - Evaluación del nivel de funcionamiento (lo que es) - Identificar las discrepancias ( lo que debería ser y lo que es)

5. Modelo de discrepancia - Determinar fines y objetivos (expertos) (lo que debería ser) - Evaluación del nivel de funcionamiento (lo que es) - Identificar las discrepancias ( lo que debería ser y lo que es)

6. Modelo de toma de decisiones - En la evaluación se introducen los valores de los usuarios, investigadores y grupos afectados.

6. Modelo de toma de decisiones - En la evaluación se introducen los valores de los usuarios, investigadores y grupos afectados.

II.

III. EVALUACION DE RESULTADOS

Los resultados son indicadores medibles del éxito o fracaso del proyecto.

La evaluación de resultados permite: Conocer los resultados al finalizar el proyecto

poniendo énfasis en los resultados inmediatos. Comparar los resultados obtenidos con los

resultados programados. Determinar si el proyecto cumplió con los objetivos

planteados.

IV. EVALUACION DE IMPACTOIdentificación sistemática de las repercusiones – positivas o negativas, deliberadas o involuntarias – en los hogares, instituciones como consecuencia de un proyecto o programa. Incluyen desde encuesta por muestreo en gran escala en las poblaciones afectadas por los proyectos, se comparan con grupos de control, antes y después de los mismos y, posiblemente, en diferentes momentos de sus ejecución, hasta evaluaciones rápidas en pequeña escala.

EVALUACION DEL PSSDE-2000EVALUACION DEL PSSDE-2000

OBJETIVOS

1. Evaluar el grado de eficacia del programa en términos de:

Reducción de la Anemia Nutricional y del Retardo en el Crecimiento

Consumo Alimentario (aporte del Desayuno escolar en la dieta del escolar beneficiario).

Mejora en la Asistencia a la escuela y en el rendimiento escolar.

2. Evaluar el grado de eficiencia del programa con referencia a:

Grado o Nivel de Focalización a través del estudio de las características socioeconómicas de los hogares de los escolares beneficiarios.

Percepción de las familias sobre el desayuno escolar.

Utilización de alimentos de producción nacional en las raciones ofrecidas y aspectos agrícolas y agroindutriales relacionados con el programa.

METODOLOGIAMETODOLOGIA

Diseño del Estudio de EvaluaciónSe trabajaron tres tipos de diseños:

Estudio transversal antes – después, con un intervalo de seis meses en muestras independientes, con fines de descripción de las características del VIII Programa y de la población que atiende.

Estudio de tipo pre test - post test en un panel de beneficiarios, expuestos al programa durante tres años.

Sistematización y análisis de información de aspectos agrícolas y agroindustriales relacionados con el programa

Población bajo estudio:

Escolares cuyas edades corresponden al grupo de 6 a 9 años y que acudieron a los centros educativos seleccionados y atendidos por el PSDDE.

Muestra Dos tipos de muestra: Una de tipo independiente y la otra de tipo panel.

Periodo de estudio: Trabajo de campo (ejecución directa): Abril –mayo y octubre –diciembre del

año 2000.

Revisión y análisis de información recogida en el periodo abril - mayo de 1998.

METODOLOGIA DEL ESTUDIO DE EVALUACION - 2000METODOLOGIA DEL ESTUDIO DE EVALUACION - 2000

CARACTERISTICASCARACTERISTICAS DE LAS MUESTRASDE LAS MUESTRAS

Muestra de Poblaciones IndependientesEl muestreo fue probabilístico, polietápico con poblaciones independientes, con estimaciones de cambios y estimadores de mínima variancia para el primer diseño. Tuvo como Unidad Primaria de Análisis al niño escolar de 6 a 9 años.

Muestra de (antropometría)

N=2,638 escolares

Sub-muestra (Socioecon, Hb y Consumo)

N=424 Escolares

Niveles de Inferencia de la muestra de Niveles de Inferencia de la muestra de poblaciones independientespoblaciones independientes

AMBITO URBANO,

AMBITO RURAL y

AMBITO TOTAL DEL PROGRAMA

DOMINIOS

DOMINIOS Departamentos AMBITO DE LOS NEDs

Norte Cajamarca, Amazonas - San Martín, La Libertad, Ancash, Huánuco-Ucayali, Tumbes-Piura-Lambayeque, Loreto.

Centro Pasco-Junín, Huancavelica, Ica, Ayacucho, Provincias de Lima.

Sur Apurímac, Arequipa-Moquegua-Tacna, Cusco - Madre de Dios , Puno.

Lima Metropolitana

Lima Norte, Centro, Este , Sur y Callao

MUESTRA – PANEL (Diseño Cuasi Experimental)MUESTRA – PANEL (Diseño Cuasi Experimental)

Criterios:

Escolares que ingresaron al primer grado

Que integraron la muestra PSDDE - 1998.

Con datos de Hb.,antropometría

Criterios:

Permanencia en el PSDDE el año 1998, 1999 y 2000.

(expuestos al PSDDE por 3 años consecutivos)

Año 1998 295 escolares

Año 2000 148 escolares

Niveles de Inferencia de la Muestra - PanelNiveles de Inferencia de la Muestra - Panel

AMBITO TOTAL DEL PROGRAMA

AMBITO URBANO y RURAL

Pertinencia: Los objetivos del proyecto sean acordes con los problemas identificados y los intereses manifiestos de la población.

Eficacia: Capacidad de alcanzar los objetivos (resultados y propósito) del proyecto.

Eficiencia: Índice de productividad del proyecto, es decir mejor asignación de costos o recursos.

Sostenibilidad: Proceso o programa logra mantenerse por si mismo, sin ayuda exterior o perjuicio de los recursos existente.

COMPONENTES DE LA EVALUACION

¿Quiénes deberían participar en la evaluación?

La evaluación participativa considera que la planificación y La evaluación participativa considera que la planificación y ejecución de todas las etapas de la evaluación del proyecto ejecución de todas las etapas de la evaluación del proyecto deben ser hechas conjuntamente por el equipo responsable, deben ser hechas conjuntamente por el equipo responsable, los representantes de la comunidad y los evaluadores los representantes de la comunidad y los evaluadores externos.externos.

De esta manera todos pueden conocer e informar los De esta manera todos pueden conocer e informar los resultados a quienes los soliciten, ser capaces de apreciar resultados a quienes los soliciten, ser capaces de apreciar las debilidades y fortalezas del proyecto y decidir las las debilidades y fortalezas del proyecto y decidir las acciones a programar para el futuro.acciones a programar para el futuro.

¿Dónde debería ser programada la evaluación?

Frecuentemente la evaluación es planeada y preparada fuera del lugar del proyecto. Por ejemplo, un evaluador externo puede llegar con un plan y los cuestionarios ya preparados, y con una idea clara de qué método utilizar en la evaluación.

En ocasiones los resultados de la evaluación son llevados fuera, no sólo de la localidad, sino también del país. Cuando un evaluador externo no tiene suficiente tiempo para escribir los resultados antes de viajar a su país, la gente que ha participado en la evaluación queda al margen de una de las etapas más interesantes e importantes: la del análisis de los resultados.

ES IMPORTANTE QUE TODAS LAS ES IMPORTANTE QUE TODAS LAS ETAPAS DE LA EVALUACION SE ETAPAS DE LA EVALUACION SE

REALICEN EN LA LOCALIDAD DONDE REALICEN EN LA LOCALIDAD DONDE SE DESARROLLO EL PROYECTO, SE DESARROLLO EL PROYECTO,

PARA PERMITIR LA PARTICIPACION PARA PERMITIR LA PARTICIPACION DE LOS INVOLUCRADOSDE LOS INVOLUCRADOS

¿Cuánto tiempo tomará realizar la evaluación?

Algunos de los factores que afectan la duración de una evaluación son:

La magnitud del proyecto y el tiempo que ha estado en operación. Ello afectará la cantidad de registros que revisar y el método de análisis de la información.

El número de personas que realizará la evaluación. Cuando se incorpora la participación de evaluadores externos, el calendario de actividades dependerá de la fecha en la que llegarán y el tiempo que permanecerán en el lugar del proyecto.

El equipo de trabajo habitualmente tiene calendarios particularmente ocupados. Para decidir el mejor momento será preciso calcular el tiempo probable que durará cada actividad antes de delegar las responsabilidades.

Los habitantes de la comunidad también necesitan tiempo para participar en la evaluación. En los períodos de siembra, cosecha o de escasez de alimentos es difícil que puedan destinar suficiente tiempo a colaborar en ésta.

La disponibilidad oportuna de los fondos o de los instrumentos (como encuestas o cuestionarios), cuya validación debió realizarse durante la fase de diagnóstico, es fundamental para no atrasar el trabajo de los evaluadores.

La fecha en la cual ministerios, organizaciones y agencias necesitan conocer los resultados de la evaluación. Ellos pueden contar con los resultados de la evaluación para ayudarlos a decidir políticas y planes.

LOS RESPONSABLES DEL PROYECTO LOS RESPONSABLES DEL PROYECTO DEBEN HACER LOS MAXIMOS DEBEN HACER LOS MAXIMOS

ESFUERZOS PARA ESTIMULAR LA ESFUERZOS PARA ESTIMULAR LA PARTICIPACION DE LA COMUNIDAD PARTICIPACION DE LA COMUNIDAD

INVOLUCRADA EN TODAS LAS FASES INVOLUCRADA EN TODAS LAS FASES DE LA EVLUACIONDE LA EVLUACION

Sugerencias para realizar laevaluación

Formular claramente los objetivos de la evaluación permitirá determinar el tipo de información que se requiere, los procedimientos que se utilizarán para reunir la información y los recursos materiales y humanos necesarios para su realización.

Determinar los criterios y estándares que se utilizarán como base de comparación de la información obtenida. Es esencial que dichos criterios estén claramente definidos, con el fin de que la interpretación sea válida y confiable, aun cuando sea realizada por diferentes individuos.

Especificar el tipo de análisis que se realizará con la información obtenida establece ciertos requisitos a la cantidad y calidad de la información a recolectar. Es importante decidir e incorporar estos aspectos en la fase de diagnóstico, antes de comenzar la ejecución del proyecto. De esa manera la información inicial se podrá comparar con la información final.

Una vez que se dispone de los recursos humanos y materiales para realizar la evaluación, una etapa importante es el entrenamiento del equipo participante. Este analizará la información recolectada durante el seguimiento del proyecto y recogerá los nuevos datos requeridos para la evaluación. Es recomendable uniformar criterios respecto a la aplicación de instrumentos y técnicas, lo mismo que en la fase de diagnóstico. Esto es esencial para asegurar la validez y objetividad de la información recolectada.

Obtener, analizar e interpretar la información significa destinar tiempo, recursos y un trabajo de alta calidad técnica para que los resultados obtenidos tengan la seriedad que se espera.

Presentar los resultados de la evaluación es esencial para permitir a la comunidad y a las organizaciones participantes conocer si sus esfuerzos se justificaron y apreciar la magnitud e impacto de los cambios obtenidos.

¿En síntesis, en qué consisten los distintostipos de evaluación de un proyecto?

La evaluación acumulativa o sumativa:

Permite saber si se lograron los objetivos del proyecto, en otras palabras, los resultados esperados, sean éstos productos o efectos.

La evaluación formativa o de proceso:

Permite saber si las actividades del proyecto se han realizado de acuerdo con lo programado y han tenido la utilidad deseada para alcanzar los objetivos. Considera también los factores que han condicionado el desarrollo del trabajo. En la evaluación de proceso se utilizará la información compilada en el seguimiento.

La evaluación de costo efectividad:

Permite saber si el costo de las actividades del proyecto y específicamente del agente de campo se ha justificado, teniendo en cuenta el efecto sobre la situación de la población objetivo.

Estos métodos de evaluación deben usarse conjuntamente.

Datos de base

Los agricultores de la zona X están perdiendo el 40% de los granos almacenados debido a las ratas, insectos y humedad.

Objetivo de desarrollo:

• Evitar la pérdida de granos almacenados.

Objetivo inmediato del proyecto:

• Reducir de un 40 a un 20% la pérdida de granos almacenados por los agricultores de la zona X, dentro de un año.

Objetivo específico del agente de campo:

• Lograr convencer al 50% de los agricultores para que construyan bodegas tipo A* antes de la próxima cosecha, mediante un programa de capacitación.

* Bodega tipo A: aquella que reúne las condiciones necesarias para impedir la acción de ratas, insectos y humedad.

¿Cómo pueden saber el agente de campo y su supervisor si el objetivo inmediato de este proyecto ha sido alcanzado?

Calculando la cantidad de agricultores que construyeron bodegas tipos A. Calculando la cantidad de grano perdido por los agricultores que

construyeron bodegas tipo A. Comparando estas pérdidas con las sufridas en las bodegas antiguas, y

calculando si se ha logrado reducir las pérdidas desde un 40 a un 20%.

¿Cómo puede saber el agente de campo si su objetivo específico ha sido alcanzado?

Verificando si se realizó el número de reuniones y demostraciones programadas en la capacitación.

Comprobando la participación de los agricultores de la zona X en las reuniones y demostraciones programadas.

Contando cuantos agricultores han construido las bodegas tipo A con las especificaciones del proyecto.

Comparando este número con el total de agricultores, y verificando si es el 50% del total de agricultores.

En el siguiente ejemplo se muestra el método de cálculo:

Si en una zona hay 50 agricultores y 25 de ellos tienen bodegas tipo A, el agente de campo puede considerar que ha alcanzado el objetivo.

¿Si sólo 20 agricultores construyeron bodegas tipo A, se considera que el proyecto ha fracasado?

El proyecto no fue un completo fracaso, pero los objetivos no se alcanzaron totalmente. Es necesario conocer las razones de este resultado para reorientar las actividades y lograr que el próximo proyecto tenga un éxito total.

¿Qué razones impidieron a algunos agricultores mejorar sus bodegas? No tuvieron la posibilidad de adquirir los materiales necesarios. No dispusieron de tiempo para trabajar en la construcción de las nuevas bodegas. Los materiales no llegaron a tiempo, o fueron insuficientes. No se explicaron bien los beneficios de las nuevas bodegas. No se realizaron todas las reuniones organizadas. La participación fue mínima. Las reuniones fueron realizadas en momentos

inoportunos. El agente de campo no ayudó a los agricultores que construían sus bodegas.

En los proyectos futuros deberán tenerse en cuenta los problemas

identificados en la evaluación, para mejorar el trabajo de los

agentes de campo.

Evaluación de Costo/Efectividad

A fin de evaluar la relación costo/efectividad de un proyecto, se debe comparar el costo total de dos o más alternativas de proyectos que han logrado los mismos resultados.

Esta comparación ayuda al agente de campo y al supervisor a decidir la alternativa más eficiente y económica para mejorar la situación alimentaría y nutricional.

¿Qué registros suministran información sobre el costo total del proyecto? Los registros de cuentas del proyecto dan el costo de los materiales, transporte y

mano de obra. En los registros del proyecto figura el tiempo empleado en cada actividad por el

agente de campo y demás personal. Este tiempo debe ser incluido en el cálculo del costo total.

Ejemplo de una situación en la cual se necesita evaluar el costo/efectividad del cambio de comportamiento de los agricultores.

Objetivo

En un período de dos meses, convencer a 20 agricultores para que construyan bodegas tipo A.

Método 10 agricultores serán invitados a participar en tres demostraciones en

grupo. 10 agricultores serán visitados en su casa.

El costo efectividad de las medidas adoptadas para lograr estos cambios se puede establecer de la siguiente manera:

Costo efectividad del cambio de comportamiento Establecer cuantos agricultores asistieron a las demostraciones de

grupo y construyeron bodegas nuevas, dato que figura en el archivo del proyecto.

En el mismo archivo aparece el número de agricultores que fueron visitados y que construyeron bodegas nuevas.

El costo de las demostraciones y de las visitas domiciliarias se calcula en base a los datos del registro de cuentas del proyecto.

Calcular y comparar el costo que representa cada bodega nueva para el agente de campo, por concepto de visitas domiciliarias y demostraciones.

Método de cálculo

El costo/efectividad de las nuevas bodegas se determina como sigue:

Calcular la cantidad de grano conservado en las bodegas construidas después de las demostraciones, en base a los datos del registro del proyecto.

Calcular la cantidad de grano conservado en las bodegas construidas por cada agricultor después de las visitas a domicilio, en base a los datos del registro del proyecto.

Calcular el costo de cada actividad para promover la construcción de bodegas tipo A, en base al registro de cuentas del proyecto.

Calcular el costo de cada quintal de grano conservado en las bodegas de la siguiente manera:

Cuando se habla del costo efectividad de un proyecto desde el punto de vista del agente de campo, es importante tener en cuenta que el éxito de un proyecto será el resultado de un cambio de comportamiento de los participantes en el mismo.

El ejemplo anterior demuestra a los agentes de campo la importancia de comparar el ingreso extra que representa el grano economizado, con el costo de la construcción de bodegas tipo A.

De nada servirá que el agente de campo haga muy bien su trabajo, o lo bien que hayan sido escritos los objetivos; si los beneficios no son efectivos en relación al costo, la comunidad no los apoyará. En la etapa de formulación de los objetivos de un proyecto, lo más importante es ser realista en cuanto a su costo/efectividad.

Ejemplo de evaluación del costo efectividad de dos métodos educativos

A continuación se presenta un ejemplo del cálculo del costo efectividad de dos métodos educativos en alimentación y nutrición en el sector salud (Cuadro 1).

GRUPO A:

Madres de niños en riesgo de desnutrición participantes en un programa de educación interpersonal en el servicio de salud.

GRUPO B:

Madres de niños en riesgo de desnutrición participantes

en un programa de educación grupal.

Los grupos tienen características similares. Los contenidos del programa educativo son semejantes. La diferencia radica en la estrategia metodológica: interpersonal o grupal.

En el grupo A, la educación sobre alimentación y nutrición es la que el equipo de salud imparte regularmente a las madres durante los controles de salud del niño. En el grupo B, se estructuró un programa educativo participativo, de carácter grupal, el que es dictado también por integrantes del equipo de salud.

Cuadro 1Ejemplo simplificado de cálculo del costo efectividad dedos métodos educativos

RESULTADOS INESPERADOS

Cualquier proyecto puede tener resultados inesperados. Por ejemplo, una vez identificado un problema y establecidos los objetivos que se deben alcanzar para solucionarlo, se elabora y ejecuta un plan adecuado. Sin embargo, los hechos demuestran posteriormente que el problema sigue subsistiendo.

En un pueblito con un alto porcentaje de niños En un pueblito con un alto porcentaje de niños desnutridos, se planificó un proyecto de desnutridos, se planificó un proyecto de construcción de estanques para criar peces.construcción de estanques para criar peces.

La comunidad construyó los estanques y la La comunidad construyó los estanques y la producción fue óptima. Sin embargo, el pescado producción fue óptima. Sin embargo, el pescado fue vendido y ninguna madre lo dio a sus niños, fue vendido y ninguna madre lo dio a sus niños, por temor a que se tragaran las espinas.por temor a que se tragaran las espinas.

En este ejemplo, el objetivo - construir estanques para peces - fue alcanzado, pero no solucionó el problema de la desnutrición: los niños siguieron estando desnutridos.

¿Cuál fue el error del agente de campo? El agente de campo no conocía ni trató de conocer la opinión de las

madres sobre el uso del pescado para alimentar a sus niños. El agente de campo no realizó demostraciones para enseñar a las

madres cómo preparar el pescado.

En este caso, el agente de campo pudo evitar este resultado con un adecuado diagnóstico de los conocimientos, actitudes y creencias de las madres participantes en el proyecto.

En otras ocasiones, los efectos inesperados no sepueden prever, como en el caso siguiente:

Por ejemplo, una vez identificado un problema y establecidos los objetivos que se deben alcanzar para solucionarlo, se elabora y ejecuta un plan adecuado. Sin embargo, los hechos demuestran posteriormente que el problema siguesubsistiendo.

En un pueblito con un alto porcentaje de niños desnutridos, se planificó En un pueblito con un alto porcentaje de niños desnutridos, se planificó un proyecto de construcción de estanques para criar peces.un proyecto de construcción de estanques para criar peces.

La comunidad construyó los estanques en una localidad con escasa La comunidad construyó los estanques en una localidad con escasa disponibilidad y consumo de hortalizas, el agente de campo desarrolló disponibilidad y consumo de hortalizas, el agente de campo desarrolló un proyecto para la creación de huertos y un programa educativo para un proyecto para la creación de huertos y un programa educativo para fomentar el consumo de verduras con alto contenido de vitaminas. La fomentar el consumo de verduras con alto contenido de vitaminas. La producción fue un éxito y los campesinos se incorporaron a una producción fue un éxito y los campesinos se incorporaron a una cooperativa para la comercialización de los excedentes en la ciudad más cooperativa para la comercialización de los excedentes en la ciudad más cercana.cercana.

Cuando la producción estaba lista para ir al mercado, en el país comenzó Cuando la producción estaba lista para ir al mercado, en el país comenzó una epidemia de cólera. Se realizó una intensa campaña publicitaria para una epidemia de cólera. Se realizó una intensa campaña publicitaria para evitar el consumo de verduras y frutas crudas. El temor de la población evitar el consumo de verduras y frutas crudas. El temor de la población hizo disminuir las ventas de hortalizas prácticamente a cero y el proyecto hizo disminuir las ventas de hortalizas prácticamente a cero y el proyecto fracasófracasó

En esta situación, el agente de campo sólo podía tratar de buscar soluciones paliativas en conjunto con los afectados y las autoridades locales.

He aquí otro ejemplo de resultado inesperado,

esta vez positivo:

En un pueblo donde la tasa de desnutrición infantil era muy alta, se desarrolló con éxito un proyecto de construcción de estanques para peces en la mayoría de las granjas.

El agente de campo descubrió que la población también utilizaba los estanques para criar patos, y mientras los niños obtenían más proteínas al consumir pescado y huevos, el pueblo se benefició con los ingresos adicionales derivados de la venta de patos.

EXPERIENCIAS DE EVALUACION DE

PROGRAMAS SOCIALES

PROGRAMA NACIONAL WAWA WASI

Único programa social del Estado que brinda atención integral a la infancia temprana, respondiendo a la necesidad de cuidado diurno para niñas y niños menores de cuatro años, particularmente para aquellos en situación de riesgo y en condición de pobreza o extrema pobreza.

Los beneficiarios reciben “atención integral”, esto es, cuidada y articulada estrategia de:

Aprendizaje infantil temprano Salud infantil preventivo promocional Atención alimentaría y promoción nutricional

El sistema de información denominado Wawa Net, se implemento a mediados del año 2003, con la finalidad de contar con información actual, veraz y pertinente para el Monitoreo y Evaluación de sus acciones y toma oportuna de decisiones.

El flujo de la información con que se alimenta el sistema involucra a cada actor que interviene en el programa. Basado en su marco lógico y la disposición de un conjunto de indicadores a nivel de monitoreo de actividades, evaluación de resultados y evaluación de impacto, el sistema se sustenta en los procesos estandarizados del programa.

Wawa Net proporciona información personalizada relacionada a: Niños (ubicación, nutrición, salud, edad, permanencia) Madres cuidadoras (ubicación, nivel socioeconómico,

nivel de desempeño, permanencia) Comités de gestión (ubicación, nivel socioeconómico de

los miembros, fecha de inicio de funcionamiento, organizaciones sociales de bases que las que provienen, etc)

Familias usuarias del programa (ubicación, nivel socioeconómico, empleo, numero de miembros, etc)

El sistema de Registro de Beneficiarios y Control de Alimentos (REBECA) permite controlar de forma automática la información que manejan aquellas municipalidades que tienen a su cargo el PVL.

REBECA responde a las siguientes necesidades de información que se presentan en la gestión del programa: Una herramienta que organice la información distribuida en documentos y hojas de

calculo hacia una única fuente. Reportar información a distintas entidades externas e internas. Mantener la información de beneficiarios actualizada y completa. Alimentar oros sistemas de la municipalidad con información proveniente del

programa. Cumplir los procesos del programa en forma rápida y fácil. Tener un sistema fácil de usar y flexible de acuerdo a nuevos requerimientos.

SISTEMA REBECA

El sistema de información REBECA es una herramienta importante que permite hacer seguimiento y control de los procesos operativos del PVL de forma tal que se puede: Organizar la información distribuida en documentos. Alertar al encargado del programa sobre posibles puntos críticos. Permitir el registro de compras por proveedor y sus valorización. Controlar las raciones entregadas por cada beneficiario y las descuentas

del monto total asignado para cada entrega. Brindar herramientas adicionales para compartir y comparar información

con otras municipalidades y para asegurar la información ingresada Entender y manejar fácilmente los procesos estandarizados del

programa.

Programa Redes Sostenibles para la Seguridad Alimentaria - REDESA

REDESA es un programa que busca mejorar la capacidad de las familias en relación a la disponibilidad, acceso y uso de los alimentos que posibilite mejores condiciones de salud, nutrición e higiene.

La intervención del programa se sustenta sobre la base de tres componentes: Generación de ingresos. Salud, nutrición, agua y saneamiento. Fortalecimiento de la sociedad civil y la gestión local

Como parte del componente de fortalecimiento de la sociedad civil y la gestión local se desarrollo.

El Sistema de Vigilancia Comunal – SIVICO El Sistema de Vigilancia de Desarrollo Local - SIVIDEL

El Sistema de Vigilancia Comunal - SIVICO

Instrumento de gestión comunal donde se tiene información periódica de las familias, caracterizado por ser un proceso de autovigilancia, autofocalización, seguimiento y control. Dado que el monitoreo abarca diferentes aspectos (sociales, culturales, económicos, etc.) permite tomar decisiones de manera rápida y adecuada frente a una crisis, facilita registros para la evaluación y la adecuación y actualización del Plan de Desarrollo Local Concertado.

El diseño e implementación del SIVICO se desarrolla de acuerdo al siguiente procedimiento:

Acordar en la asamblea del CODECO la implementación del SIVICO.

Elaborar del diagnóstico de la comunidad: se realiza a partir de la aplicación de un instrumento (ficha censal de hogares)

Elaboración de la línea de base de la comunidad: se procesa la información obtenida a través de la ficha censal de hogares.

Capacitación a los promotores de desarrollo y al CODECO en la gestión del SIVICO: de modo que sus gestión se desarrolle de forma adecuada.

Articulación del SIVICO al SIVIDEL y formalización del flujo de información.

El Sistema de Vigilancia de Desarrollo Local - SIVIDEL

Es una estrategia de promoción del desarrollo local para la vigilancia del proceso de desarrollo, la focalización de la inversión, el seguimiento y control del estado de la situación y prioridades de atención en la seguridad alimentaria y el desarrollo de las comunidades campesinas. Se alimenta de la información proporcionada por el SIVICO.

Pasos para la conformación del SIVIDEL

B IBLIOGRAFIA FAO (2001) Guía para la gestión municipal de programas de seguridad alimentaria y

nutricional. Dirección de alimentación y nutrición. Santiago de Chile. Bobadilla, P, L. Del Águila; ML. Morgan (1998) Diseño y evaluación de proyectos.

Proyecto de apoyo a ONGs. PACT/ Perú. FAO (1984). Material didáctico. Capacitación y gestión de programas de campo.

Alimentación y nutrición. Roma. Italia. FAO (1995) Manejo de proyectos de alimentación y nutrición en comunidades. Guía

didáctica. Roma. Vásquez, E., C. Aramburu, C. Figueroa y C. Parodi (2000). Gerencia Social: Diseño,

monitoreo y evaluación de proyectos sociales. Universidad del Pacífico, International Development Researh Centre (IDRC), Canadá. Lima, Perú.

Goodstein, L. D, Nolan T. M. y Pfeiffer J.W. (1998). Planeación Estratégica Aplicada.: Como desarrollar un plan que realmente funcione. Editado McGRAW-HILL. Interamericana SA. Santafé de Bogotá, Colombia.