Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de...

24
Taller de capacitación para la elaboración de las evaluaciones internas 2019 Ciudad de México, 16 de mayo de 2019

Transcript of Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de...

Page 1: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Taller de capacitación para la elaboración de las evaluaciones internas 2019

Ciudad de México, 16 de mayo de 2019

Page 2: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

Page 3: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

Evaluaciones Externasde la Política Social de la CDMX y emisión de

recomendacionesvinculantes

Lineamientos para la elaboración de Reglas

de Operación de Programas Sociales

Lineamientos para la realización de

Evaluaciones Internas

Programa de Verificación de

Padrones de Beneficiarios

Medir la pobreza y la desigualdad en la Ciudad de México

Seguimiento, capacitación y asesoríasobre la Política Social

de la CDMX

Informar a la Jefa de Gobierno sobre la

Evaluación Global de la Política Social

Elaboración y publicación de un

informe anual sobre la cuestión social

Atribuciones y competencias

Page 4: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

Normativa de las Evaluaciones Internas

El Artículo 42 de la Ley de Desarrollo Social del Distrito Federal establece:

• La evaluación interna es la que deben efectuaranualmente y conforme a los Lineamientos que emita elConsejo de Evaluación, las Dependencias, ÓrganosDesconcentrados, Delegaciones y Entidades de laAdministración Pública del Distrito Federal que ejecutenprogramas sociales.

• Los resultados de las evaluaciones internas seránpublicados y entregados en un plazo no mayor a seismeses después de finalizado el ejercicio fiscal.

Último día de junio de cada ejercicio fiscal

Publicación en Gaceta yentrega a Evalúa y a laComisión de DesarrolloSocial del Congreso

Page 5: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

Definición• Las evaluaciones constituyen procesos de aplicación de un

método sistemático que permite conocer, explicar y valorar almenos, el diseño, la operación resultados y el impacto de lapolítica y programas de Desarrollo Social.

• En este sentido, es posible clasificar las evaluaciones enfunción de las personas que la realizan. El proceso en que elpersonal de la entidad encargada de instrumentar la política oprograma lleva a cabo la evaluación se conoce comoevaluación interna.

Page 6: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

Evaluación Interna y externa

Tabla. 1 Cuadro comparativo evaluación externa e interna EVALÚA CDMX.

Evaluación Interna Evaluación ExternaDebe ser llevada a cabo por las Dependencias, los

Órganos Desconcentrados, las Delegaciones y

Entidades de la Administración Pública de la CDMX

que ejecutan programas sociales.

La realiza Evalúa CDMX de manera exclusiva e

independiente. Se produce cuando agentes no

integrantes del programa evalúan su funcionamiento.

Facilita el acceso a la información del programa y la

comprensión de su funcionamiento es más elevada

al contar con la experiencia y colaboración de las

personas que conocen los aspectos sustantivos del

programa.

Cuenta con un mayor grado de experiencia en

materias especializadas (economía, medicina,

educación).

Posee objetivos más acotados, vinculados al diseño,

seguimiento y control de las acciones planeadas.

Se cuenta con un menor conocimiento del contexto

operacional y organizacional del programa.

Page 7: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

Evaluación Interna 2019

• Derivado del cambio de gobierno, la Política Social sufrió transformacionesprogramáticas significativas. De los 65 Programas Sociales del Gobierno de laCiudad de México que operaron en 2018, más de la mitad dejó de operar en 2019 ymás de la mitad de los que Programas Sociales que continúan en 2019 sufrieronmodificaciones sustanciales en su diseño. En las alcaldías ha ocurrido un fenómenosimilar o incluso más pronunciado.

• Por ello, el planteamiento general de la Evaluación Interna 2019 está orientado aobtener información relevante que de cuenta de la Política Social 2018,simplificando la Evaluación Interna y generando valor público para las Unidades deEvaluación, Planeación y Monitoreo y las Unidades Responsables de Operar losProgramas Sociales.

Page 8: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

Evaluación Interna 2019: FIS

• El Consejo de Evaluación del Desarrollo Social de la Ciudad de México (Consejo CDMX) ha diseñadoun formato para ser llenado en el proceso de Evaluación Interna 2019 denominado Ficha Sintéticade Información de los Programas Sociales (FIS)

• Se deriva del análisis realizado por la institución, en el que se han identificado diversos problemasen los precedentes de evaluaciones internas:

- Amplio gasto de recursos humanos, materiales y financieros

- Limitación en los resultados y aplicabilidad de los productos de la evaluación interna

• Así, el esquema en 2019 plantea un modelo simplificado y ejecutivo de evaluación, con el fin dealcanzar los siguientes objetivos:

- Cerrar el ciclo de los programas que en 2018 dejaron de operar

-Generar y producir información sintética y aplicable de los programas que continúanoperando en 2019, con el propósito de contribuir a los procesos de diagnóstico, planeación yevaluación externa en curso

Page 9: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Ficha Sintética de Información de los Programas Sociales (FIS)

1. Información de referencia del Programa Social

2. Presupuesto y análisis presupuestal

3. Resultados del Programa

-Indicadores nivel fin y propósito

-Gráfica de evolución del indicador a nivel propósito

-Análisis de los resultados del programa

4. Evolución de la Satisfacción de los Usuarios (cualitativo o cuantitativo)

5. Resultados y evolución de auditorías, informes o evaluaciones previas

6. Conclusiones. Análisis integrador sobre el impacto y la calidad del programa

7. Previsiones y estrategia para la integración de padrones de beneficiarios (solo programas que continuen en 2019)

La ficha debe contribuír a concentrarinformación y a evitar reiteracionesy repeticiones en la presentación delanálisis, así como a simplificar elproceso evaluador

Page 10: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

1. Información de ReferenciaEsta sección contiene la información general del programa social a partir de los elementosadministrativos y presupuestales que permiten identificar información básica de la intervención pública.

Modalidad y Clave Presupuestaria. Identifica lainformación del presupuesto con base en laestructura programática de la Secretaria de Finanzas.

Unidad Responsable. Hace referencia a las entidadesque son directamente responsables de la ejecucióndel programa.

Nombre del Programa Social. Se deberá colocar elnombre completo o denominación oficial delprograma social, y si es el caso, la abreviatura con laque es conocido.

Page 11: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

1. Información de Referencia

Año de Inicio del Programa. La dependencia oentidad deberá registrar el año en que el programainició operaciones.

Ultimo Año de Operación. Sólo para los casos deprogramas que no continuaron en el ejercicio fiscal2019 (Identificador programas dejaron de operar).

Antecedentes del Programa Social. Indicar cuándoy con qué características surgió el programa social,considerando la situación problemática que sepretendía o pretende atender, incorporando lainformación pertinente para dimensionar elproblema público atendido.

Page 12: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

2. PresupuestoEsta sección contiene la información de los datos presupuestarios del programa y su evolución durante el sexenio anterior (2012-2018). Los programas creados después del periodo señalado, deberán reportar la

información desde el ejercicio de su creación.

Presupuesto aprobado y ejercido 2012-2018 por capitulode gasto. Integrar en la tabla la información referente a laevolución del presupuesto ejercido del periodo señalado,de acuerdo con el capítulo de gasto correspondiente.

Presupuesto por origen de los recursos periodo 2012-2018.Integrar en la tabla la información que contenga la evoluciónde la distribución porcentual del presupuesto de gastoaprobado y ejercido con base en el origen de los recursospúblicos (Local y Federal).

Page 13: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

2.Presupuesto

Consideraciones sobre el presupuesto. Se debe analizar con base en los datospresupuestarios las variaciones , restricciones presupuestales que presentó el programa socialdurante el periodo de tiempo correspondiente, así como el origen de los recursos. En esteapartado se debe analizar la información del presupuesto ejercido, aprobado y origen de losrecursos, buscando identificar la tendencia general y/o cambios relevantes en los montosdel presupuesto, a fin de que en la sección de Conclusiones se cuente con elementos paravalorar los resultados del programa.

Page 14: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

3. Resultados del Programa Social

Nombre del indicador. Debe colocarse el nombre completodel indicador a nivel Fin del programa.Descripción. Redactar de manera breve las característicasdel indicador a nivel Fin del programa.Método de cálculo. Formula utilizada para calcular elindicador.Unidad de medida. Unidad de medida en la que se calculael indicador (porcentaje, personas, etc.Frecuencia de Medición. Periodo de tiempo en el cual serealiza la medición del indicador.Línea Base. Valor del indicador que se establece comopunto de referencia para evaluarlo.Sentido del indicador. Dirección que tiene elcomportamiento del indicador para señalar cuando sudesempeño es positivo o negativo.Año línea base. Año en el cual se retoma el valor de lalínea base

Información del Indicador a nivel Fin. Hace referencia al indicador a nivel Fin plasmado en la Matriz de Indicadores del programa social,describe cómo el programa contribuye en el mediano o largo plazo a la solución de un problema público

Page 15: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

3. Resultados del Programa Social

Nombre del indicador. Debe colocarse el nombrecompleto del indicador a nivel Propósito del programa.Descripción. Redactar de manera breve las característicasdel indicador a nivel Propósito del programa.Método de cálculo. Formula utilizada para calcular elindicador.Unidad de medida. Unidad de medida en la que se calculael indicador (porcentaje, personas, etc.)Frecuencia de Medición. Periodo de tiempo en el cual serealiza la medición del indicador.Línea Base. Valor del indicador que se establece comopunto de referencia para evaluarlo.Sentido del indicador. Dirección que tiene elcomportamiento del indicador para señalar cuando sudesempeño es positivo o negativo.Año línea base. Año en el cual se retoma el valor de lalínea base

Información de su indicador a nivel Propósito. Hace referencia al indicador a nivel Propósito plasmado en la Matriz de Indicadores delprograma social, muestra el resultado logrado en la población objetivo como consecuencia de la entrega de los componentes del programa.

Page 16: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

Gráfica con la evolución de valores y metas delindicador a nivel Próposito.Se debe integrar un gráfico con la informaciónpertinente para conocer el avance del indicador a nivelPropósito del programa, mostrando la evolución delmismo partiendo del año y linea base definidos por elprograma social hasta la última medición realizada.

Consideraciones sobre el desempeño del indicador propósito.Se debe analizar con base en los datos del indicador laincidencia del programa en el problema público, es importanteutilizar información que permita dimensionar al menos dosmomentos en el tiempo. Se debe señalar si durante la operacióndel programa se logró cumplir con la meta establecida y lasimplicaciones que tiene sobre los resultados del programa elcumplimiento o en su caso, avance del indicador.

3. Resultados del Programa Social

Page 17: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

3. Resultados del Programa Social

Resultados del Programa Social. A partir de la definición del problema central o necesidad a la queresponde el programa y los objetivos establecidos en las reglas de operación 2018, se deberáreportar sus efectos en el tiempo y en los casos en que sea posible en el territorio.

Se deben considerar, además, los resultados a corto y mediano plazo, tomando como referencia losindicadores a nivel Fin y Propósito de la Matriz de Indicadores.

Page 18: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

4. Evolución de la Satisfacción de Usuarios

Evolución de la Satisfacción de Usuarios. Este apartado sólo tendrá que ser llenado para los programas quecontinúan en el ejercicio 2019. Para los programas que cuenten con información al respecto, se realizará unanálisis de tipo cuantitativo y/o cualitativo del grado de satisfacción del programa buscando identificar posiblescambios que puedan mejorar la atención y la resolución del problema o necesidad que se quiera atender.

A partir del ejercicio fiscal 2019, todas las unidades o dependencias que llevan a cabo programas socialesdeberán establecer mecanismos para el monitoreo del grado de satisfacción de los usuarios y/o beneficiarios.

Page 19: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

5. Resultados de auditorías, informes y/o evaluaciones previas

Principales resultados de auditorías, informes o evaluaciones previas. Este apartado sólo tendrá que ser llenadopara los programas que continúan en el ejercicio 2019. Describir de manera clara los principales hallazgosderivados de la elaboración de auditorías, informes o evaluaciones previas. En el caso de las auditorías esimportante señalar el nombre y número de auditorías realizadas, ente que elaboró la auditoría, año derealización de las auditorías, las principales observaciones y los ajustes realizados en el programa a partir de ellas(en caso de haber atendido las observaciones, deberá señalarse).

Page 20: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

6. Análisis de similitudes o complementariedades

Análisis de similitudes o complementariedades. Mediante un análisis de los programas vigentes de laAdministración Pública Federal (APF), del Gobierno de la Ciudad de México y de las 16 alcaldías, se identificaránaquellos que cuenten con similitudes o complementariedades a nivel de objetivos, mecanismo de intervención,problema social identificado, población o área de enfoque objetivo. Asimismo, se deberán señalar las acciones decoordinación a realizar con los operadores de los programas en los que se identifiquen complementariedades oposibles riesgos de similitud. (Al menos 3 programas sociales)

Page 21: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

7. Conclusiones

Conclusiones. Con base en la información utilizada para integrar la ficha, se presentará un análisis de losprincipales logros del programa considerando el conjunto de información de las secciones anteriores:• Cumplimiento de las metas establecidas desde su creación. En este apartado se deberá argumentar sobre lanecesidad de continuación, o en su caso, eliminar el programa, a la luz de la reestructuración de la políticasocial en 2019.• Ejercicio correcto de los recursos asignados.• Atención de las observaciones realizadas por órganos fiscalizadores o las áreas de evaluación correspondiente.• Influencia del programa social en la población objetivo.

Page 22: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

8. Padrón de Beneficiarios

Previsiones para la integración y operación del padrón de beneficiarios. Este apartado sólo tendrá que serllenado para los programas que continúan en el ejercicio 2019. Con la finalidad de crear el padrón debeneficiarios 2019, como parte de los lineamientos de evaluación interna, se solicita a los entes encargadosde programas sociales deberán desarrollar una estrategia para la integración del padrón de beneficiarios delos programas que continúan en 2019, a fin de dar seguimiento al programa, garantizando la consistenciaentre el diseño y la operación del mismo.

Page 23: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

Dirección GeneralCoordinación de Evaluación

Muchas gracias

Contacto:

• Rodolfo Hernández [email protected]• Ricardo Hernández [email protected]• Guillermo Jiménez [email protected]

55622294Télefono

Page 24: Taller de capacitación para la elaboración de las ...€¦ · Verificación de Padrones de Beneficiarios Medir la pobreza y la desigualdad en la Ciudad de México ... es posible

• Distribución y organización en grupos y mesas de trabajo

• Comienzo del llenado de la Ficha

• Identificación de procesos más dificiles para la obtención de la informaciónrequerida

• Identificación de similitudes y complementariedades

• Resolución de dudas, inquietudes y casos particulares

• Apoyo para la implementación de los aspectos más complejos de laEvaluación Interna

Taller