EVALUACIÓN DE LA MATRIZ DE INDICADORES PARA RESULTADOS€¦ · PED, es que ^en materia de...

EVALUACIÓN DE LA MATRIZ DE INDICADORES PARA

RESULTADOS

“LEGALIZACIÓN Y APOSTILLADO DE DOCUMENTOS OFICIALES”

DEL PROGRAMA PRESUPUESTARIO:

SERVICIOS DE LEGALIZACIÓN Y APOSTILLA DE DOCUMENTOS

Secretaría General de Gobierno

Evaluación Socioeconómica de Programas y Proyectos, S.C.

[ Secretaría de Finanzas y Tesorería General del Estado ] Página 1 de 28

Contenido

I. Introducción .........................................................................................................................................2

II. Evaluación .............................................................................................................................................2

III. Temas de Evaluación ............................................................................................................................2

A. Características del programa ............................................................................................................ 2

B. Vinculación y Contribución del Programa ........................................................................................ 6

C. Evaluación y Análisis de la Matriz de Indicadores para Resultados (MIR) ....................................... 8

FIN .....................................................................................................................................................8

PROPÓSITO .................................................................................................................................... 11

COMPONENTES ............................................................................................................................. 14

ACTIVIDADES ................................................................................................................................. 17

D. Evaluación de Indicadores por nivel de la MIR ............................................................................... 21

V. Fortalezas, Retos y Recomendaciones .............................................................................................. 23

VII. Conclusiones ...................................................................................................................................... 25

VIII. Responsabilidades y compromisos .................................................................................................. 26

Referencias .............................................................................................................................................. 27


I. Introducción

Como parte del proceso que el Gobierno del Estado de Nuevo León ha llevado a cabo para la

implementación y consolidación de un Presupuesto basado en Resultados (PbR) y un Sistema de

Evaluación del Desempeño (SED), y en cumplimiento a la estrategia elaborada para tal fin, se realizó la

Evaluación de la Matriz de Indicadores para Resultados (MIR) “Legalización y apostillado de

documentos oficiales” que corresponde a uno de los programas estratégicos de la entidad “Servicios

de legalización y apostilla de documentos”. Ello con el propósito de identificar si dicha matriz está

construida con base en la Metodología de Marco Lógico (MML), cumple con los elementos que deben

conformarla y con base en este análisis, emitir las recomendaciones que se consideren pertinentes,

que permitan mejorar el proceso de elaboración, diseño y contenido de la misma.

II. Evaluación

El análisis y evaluación de la MIR comprende la vinculación del programa presupuestario “Servicios de

legalización y apostilla de documentos” con los objetivos de planeación estatal y programas sectoriales

o especiales que se deriven de éste, la evaluación de la lógica vertical y horizontal la misma, así como

de los indicadores que miden el desempeño que corresponde a cada uno de los niveles que la

conforman.

Las preguntas que conforman esta Evaluación son respondidas a través de un sistema binario

(1=Cumple; 0=No Cumple), de acuerdo a la importancia de cada uno de los elementos de la MIR, cuya

ponderación se presenta de manera anexa.

III. Temas de Evaluación

A. Características del programa

“Servicios de legalización y apostilla de documentos” es un programa que lleva a cabo el Gobierno del

Estado de Nuevo León a través de la Unidad de Legalizaciones del Estado de Nuevo León., quien está

encargada de realizar, entre otras, las siguientes funciones:


Llevar el calendario oficial y el registro de autógrafos de los servidores públicos a quienes está

encomendada la fe pública para la legalización de firmas y sellos de autorizar que validan los

documentos signados por los servidores referidos.

Realizar el apostillamiento de documentos en los términos de los convenios y ordenamientos

respectivos.

Ordenar las publicaciones de edictos, balances, estados financieros y demás documentos que

soliciten publicar las personas físicas y morales en el Periódico Oficial del Estado, previo pago

de derechos.

Revisar y turnar a firma del Secretario y del Titular del Ejecutivo los títulos profesionales

otorgados por las diferentes Universidades Públicas o Privadas de la Entidad.

Llevar el control de las suscripciones de particulares al Periódico Oficial del Estado.

Con base en lo anterior, el programa Servicios de Legalización y Apostilla de Documentos tiene como

objetivo central que la ciudadanía cuente con certeza jurídica a través de documentos legalizados y

apostillados. Tal objetivo se pretende lograr por medio de: legalización y apostilla de documentos;

actualización de firmas y sellos digitales de funcionarios y control de títulos profesionales 1.

Población

Potencial.- Los ciudadanos del Estado de Nuevo León.

Objetivo.- Los ciudadanos del Estado de Nuevo León que necesiten servicios de legalización y apostilla

de documentos, así como de firmas y sellos digitales de funcionarios y control de títulos profesionales.

Atendida.- Los ciudadanos del Estado de Nuevo León que se beneficien con servicios de legalización y

apostilla de documentos, así como de firmas y sellos digitales de funcionarios y control de títulos

profesionales.

Vinculación a la Planeación Estratégica

El programa “Servicios de legalización y apostilla de documentos” da cumplimiento a lo establecido en

el Plan Estatal de Desarrollo del Estado de Nuevo León 2012-2015 (PED), dado que en el objetivo 9.3.2

“Servicios públicos eficientes y de calidad”, del eje de política pública “Gobierno Productivo y de

Calidad” se pretende proporcionar servicios gubernamentales modernos, eficientes y de calidad

centrados en las necesidades y expectativas ciudadanas.

1 http://www.nl.gob.mx/pics/pages/transparencia_itdif_base/Presupuesto_Basado_en_Resultados_2013.pdf.

http://www.nl.gob.mx/pics/pages/transparencia_itdif_base/Presupuesto_Basado_en_Resultados_2013.pdf


Dentro de las estrategias asociadas a este objetivo, el programa Servicios de Legalización y Apostilla de

Documentos, se encuentra alineado a la estrategia número 1: “Mejorar la calidad de los servicios que

se ofrecen al ciudadano”.

Asimismo, el programa, al proporcionar a la ciudadanía bienes y servicios relacionados con legalización

y apostilla de documentos, firmas y sellos digitales de funcionarios y control de títulos profesionales,

se encuentra directamente relacionado con las siguientes líneas de acción del PED:

Mejorar los sistemas institucionales para fortalecer la certeza jurídica en los trámites y

servicios al ciudadano, así como los del Registro Público de la Propiedad y del Comercio y el

Catastro, entre otros.

Acercar los servicios y soluciones del gobierno al ciudadano.

Fomentar la innovación en las dependencias y entidades de la administración pública estatal

para mejorar la prestación de los servicios, la eficiencia y la cobertura, y reducir costos.

Con respecto a la modernización a la que se hace mención, en el Programa Sectorial de Modernización

Administrativa y Transparencia Gubernamental se afirma que ésta debe pasar por diversos caminos,

entre los que destacan, para este caso específico, la eficientización y la incorporación de avances

tecnológicos en los procesos.

Problemática

Causas

La principal situación que se identifica como origen de la problemática del programa, detectada en el

PED, es que “en materia de gobernabilidad democrática y servicios al ciudadano, la interacción de las

instancias gubernamentales con la sociedad y las organizaciones civiles, así como de los tres órdenes

de gobierno, cuenta con mecanismos de coordinación y colaboración que aún son insuficientes para el

cabal aprovechamiento de su potencial. La comunidad reclama servicios públicos de buena calidad,

funcionarios capaces y honestos”.

También es cierto que en general los trámites que gestiona el gobierno, deben ser fortalecidos con la

incorporación de nuevas tecnologías, como es la modernización en sistemas y en infraestructura; por

lo tanto, es importante continuar impulsando la innovación tecnológica para el manejo digital del

acervo documental de las unidades administrativas y consolidar las bases de datos de forma

estandarizada que permita un mejor acceso a la información a fin de simplificar los trámites y

servicios2.

2 Programa Sectorial de Gobernación y Participación Ciudadana.


Tales requerimientos son muestra de la necesidad de implementar herramientas que mejoren la

operación y los servicios, ante las siguientes circunstancias:

Ante un acceso limitado a la legalización y apostilla de documentos, existen personas que

carecen de una acreditación formal del estatus legal que les caracteriza en función de sus

circunstancias particulares, especialmente en situaciones que requieren duplicados oficiales de

documentos cuyos originales son, por su naturaleza, de más difícil obtención.

La falta de disponibilidad de firmas y sellos digitales de funcionarios puede retrasar

significativamente los trámites legales que la población requiere, en muchas ocasiones con

premura.

Si no se tiene el debido control de los títulos profesionales que acreditan las calificaciones que

tienen las personas, esto se puede traducir en altos costos para éstas, como por ejemplo, los

que derivan en la pérdida de oportunidades laborales.

Efectos

La prevalencia de una situación social protagonizada, entre otros, por autoridades gubernamentales

que brindan servicios ciudadanos poco eficientes y de baja calidad, que limitan la obtención de

legalizaciones y apostilla de documentos, tiene como consecuencias inmediatas:

Un descontento generalizado con respecto a los servicios que proporciona el gobierno del

Estado, en virtud del reconocimiento de la función de este último como agente que debería

garantizar el acceso de los ciudadanos a servicios básicos eficientes y de calidad.

Que la población enfrente costos, no solo económicos, sino también de tiempo perdido, lo cual

puede entorpecer la realización de trámites, contratos y transacciones de diversa índole que, de

no llevarse a cabo pueden traducirse en problemas y pérdidas económicas sustanciales.

De las consecuencias recién enlistadas, la primera influye directamente en el bienestar de las

personas, afectando negativamente el contexto social y territorial en el que se desarrollan las

capacidades individuales.

La consecuencia última de la problemática descrita es que disminuya la cultura de la legalidad y la

convivencia armónica, ya que los trámites y registros gubernamentales que proporcionan certeza

jurídica, representan para la ciudadanía, constancia de su estado civil y familiar.


B. Vinculación y Contribución del Programa

1. ¿El Programa está alineado y/o vinculado con algún objetivo del eje de política pública del PED?

Respuesta = SI

El Programa Presupuestario “Servicios de legalización y apostilla de documentos” se encuentra

alineado al Eje de política pública del PED “Gobierno productivo y de calidad”, a su objetivo

estratégico “9.3.2. Servicios públicos eficientes y de calidad”, estrategia 1.- “Mejorar la calidad de

los servicios que se ofrecen al ciudadano” y a las siguientes líneas de acción:


servicios al ciudadano, así como los del Registro Público de la Propiedad y del Comercio y el



Estandarizar los servicios de atención e información que proveen las dependencias y

entidades gubernamentales.

Establecer sinergias entre las plataformas informáticas de las dependencias y entidades

gubernamentales.



Integrar mecanismos eficaces con el concurso de los tres niveles de gobierno, para lograr la

mejora regulatoria y la simplificación de trámites que favorezcan el establecimiento de

empresas y la generación de empleos.

2. ¿El Programa está alineado y/o vinculado con algún objetivo sectorial o especial?

Respuesta = SI

El Programa Presupuestario “Servicios de legalización y apostilla de documentos” se encuentra

alineado al Programa especial “Modernización administrativa y transparencia gubernamental”, al

objetivo estratégico número 11, “Proporcionar servicios gubernamentales modernos, eficientes y

de calidad centrados en las necesidades y expectativas ciudadanas” y a las siguientes líneas de

acción:


servicios al ciudadano, tales como los del Registro Público de la Propiedad y del Comercio y el



Estandarizar los servicios de atención e información que proveen las dependencias y

entidades gubernamentales.


Establecer sinergias entre las plataformas informáticas de las dependencias y entidades

gubernamentales.



Integrar mecanismos eficaces con el concurso de los tres niveles de gobierno, para lograr la

mejora regulatoria y la simplificación de trámites que favorezcan el establecimiento de

empresas y la generación de empleos.


C. Evaluación y Análisis de la Matriz de Indicadores para Resultados (MIR)

En esta sección se evaluará y analizará si la MIR “Legalización y apostillado de documentos oficiales”

está construida a partir de la Metodología de Marco Lógico, si está relacionada y diseñada de acuerdo

al problema y/o necesidad que se espera resolver con la ejecución del programa (Fin y Propósito), así

como su lógica interna; es decir, la relación de causa – efecto que existe entre los diferentes niveles

de la matriz, la definición de objetivos, indicadores y metas y la evaluación de los resultados

esperados en cada nivel de la misma.

Lógica Vertical y Horizontal de la MIR

FIN

3. ¿La sintaxis del resumen narrativo del objetivo de FIN es correcta y cumple con las siguientes

características?

a. ¿Se identifica claramente la contribución del programa al logro de un objetivo estratégico de

orden superior con el que está alineado, ya sea del Programa Estatal de Desarrollo (PED),

Sectorial o especial?

b. ¿El resumen narrativo utiliza las palabras “mediante / a través” para hacer referencia a la

solución del problema? Sintaxis: “Contribuir a (objetivo superior) mediante (complemento =

Propósito u objetivo central del programa)”

c. ¿El resumen narrativo especifica cómo se logrará la solución al problema?

Respuesta = SI

La sintaxis del resumen narrativo del objetivo de Fin “Contribuir a la prestación de servicios

públicos eficientes y de calidad mediante legalización y apostilla de documentos oficiales” es

correcta y define claramente la contribución del programa presupuestario “Servicios de

legalización y apostilla de documentos” al objetivo estratégico 9.3.2 del PED, al cual se encuentra

vinculado.

4. ¿El (los) indicador (es) de Fin permite (n) conocer lo siguiente:

a. Dar seguimiento de los avances y evaluar si el programa contribuye al logro de un objetivo

estratégico de orden superior con el que esté alineado (Objetivo de la Dependencia, del

Sector o del PED)?

b. Identificar y medir el impacto final que tendrá el programa?

Respuesta = SI


El indicador definido a nivel de Fin “Servicios otorgados” permite dar seguimiento de los avances

logrados con la ejecución del programa y evaluar su contribución al objetivo estratégico del PED

“Gobierno productivo y de calidad” al que se encuentra alineado, así como medir la evolución del

impacto final que tendrá el programa.

5. ¿El (los) indicador (es) de Fin cumple (n) con las siguientes características?

a. Las propiedades conocidas como SMART:

¿Es (son) claro (s)? Sí

¿Es (son) relevante (s)? Sí

¿Es (son) económico (s)? Sí

¿Es (son) monitoreable (s)? Sí

b. ¿Cuenta (n) con una ficha técnica que contenga los elementos que lo (s) componen:

Nombre Si Definición Si Tipo Si Dimensión Si Método de cálculo Si Unidad de medida Si Frecuencia de medición Si Línea base Si Metas Si Comportamiento del indicador Si Semáforos SI

c. ¿El método de cálculo del (los) indicador (es) de FIN cumple con las siguientes características:

¿Tiene especificada correctamente su fórmula de cálculo? Sí

¿Utiliza únicamente expresiones aritméticas y/o símbolos matemáticos que representen una relación de variables? Sí

d. ¿El tipo del (los) indicador (es) a este nivel es preferentemente estratégico y su dimensión es de

eficacia? Sí

e. ¿La unidad de medida del (los) indicador (es) corresponde con el método de cálculo, la línea

base y las metas? Sí

f. ¿La periodicidad del (los) indicador (es) permite (n) contar con al menos una medición sexenal

y/o anual? No

g. ¿El (los) indicador (es) cuenta (n) con línea base? Sí

El indicador definido para evaluar el objetivo de Fin es claro, económico, monitoreable y relevante;

cuenta con información cuantitativa y cualitativa; su método de cálculo está correctamente

formulado y utiliza expresiones aritméticas que representan una relación de variables; el tipo y


dimensión del indicador es el recomendado a este nivel (estratégico y de eficacia,

respectivamente) y cuenta con línea base. no obstante se recomienda anteponer “Porcentaje

de…” en el nombre del indicador (Porcentaje de servicios otorgados). En cuanto a la periodicidad,

es recomendable establecer un período más amplio para la medición; ya que, a nivel de FIN se

considera conveniente evaluar su medición anualmente o por lo menos, una vez en el curso de la

Administración Estatal, aunque es preferible que pueda medirse dos o tres veces durante la

Administración, a fin de tener tiempo para corregir las acciones, en caso de ser necesario.

6. ¿Con la intención de evaluar el objetivo de FIN, se incorporan los medios de verificación que

contengan la siguiente información, que permita obtener los datos requeridos para el cálculo del

(los) indicador (es) definido (s)?

a. ¿Se incluye el nombre o título del documento, reporte, registro o informe de la fuente de

información? Sí

b. ¿Se incluye la fecha de emisión de la fuente de información? Sí

c. ¿Se incluye el área emisora y/o responsable de su emisión? Sí

Los medios de verificación descritos a este nivel cumplen con los elementos mínimos necesarios

para la obtención del cálculo del indicador definido para evaluar el objetivo de Fin; es decir, el

nombre del registro o informe es “Reporte de documentos que ingresan a la DPEyC”, su emisión

es mensual y el área emisora y responsable de la información es DEPEyC.

7. ¿El nivel de FIN incorpora supuestos que contengan las siguientes características?

a. ¿La redacción del supuesto está expresada en términos positivos?

b. ¿La redacción del supuesto expresa el (los) riesgo (s) o condición (es) (externa) que enfrenta el

programa y qua está (n) fuera de su control?

c. ¿El (los) riesgo (s)/condición (es) expuesta (s) tiene (n) una probabilidad razonable de

ocurrencia?

d. ¿El (los) riesgo (s)/condición (es) expuesta (s) es (son) susceptible (s) de ser solventada para el

cumplimiento del objetivo de FIN?

e. ¿Es (son) lo suficientemente preciso (s) para estar en posibilidad de ser monitoreado (s)?

Respuesta = SI

Se considera que el supuesto diseñado a nivel de Fin “Los servicios de apostillado y legalización de

documentos generan certeza jurídica a los Ciudadanos” está redactado en términos positivos;

expresa una condición externa (fuera del control del programa), tiene probabilidad de ocurrencia,

es susceptible de ser solventada y es lo suficientemente preciso para ser monitoreado.


PROPÓSITO

8. ¿La sintaxis del resumen narrativo del objetivo de PROPÓSITO es correcta y cumple con las

siguientes características?

a. ¿Como sujeto de la oración, se identifica claramente la población objetivo o área de enfoque?

b. ¿El verbo de la oración está expresado en tiempo presente?

c. ¿El complemento de la oración establece claramente el resultado que se espera lograr

mediante la ejecución del programa?

Respuesta = SI

Aún cuando se considera que el resumen narrativo de Propósito “Los ciudadanos del Estado de

Nuevo León cuentan con certeza jurídica y servicios gubernamentales modernos, eficientes y de

calidad a través de la legalización y el apostillamiento de sus documentos legales” es correcta,

identifica la población objetivo y establece el resultado que espera alcanzar el programa; su

redacción también se asemeja a la sintaxis de nivel de Fin, al vincular el objetivo central del

programa con el objetivo estratégico del Programa Especial “Modernización Administrativa y

Transparencia Gubernamental” (Proporcionar servicios gubernamentales modernos, eficientes y

de calidad, centrados en las necesidades y expectativas ciudadanas); por lo que se sugiere analizar

la conveniencia de redefinir el resumen narrativo de Propósito, conforme a la sintaxis establecida a

este nivel: “(Población objetivo) (verbo en presente) (complemento: objetivo central del

programa)”. Por ejemplo: “Los ciudadanos del Estado de Nuevo León (población objetivo) cuentan

(verbo en presente) con servicios de legalización y apostillamiento modernos, eficientes y de

calidad que brindan certeza jurídica (objetivo central del programa)”.

9. ¿El objetivo de PROPÓSITO expresa claramente el efecto directo esperado sobre la población

objetivo o área de enfoque y/o la aportación específica (resultado esperado) a la solución del

problema identificado por el programa?

Respuesta = SI

El objetivo de Propósito describe claramente la aportación específica del programa o efecto

esperado sobre la población objetivo: “Certeza jurídica y servicios gubernamentales modernos,

eficientes y de calidad”.

10. ¿Se cuenta con al menos un indicador que permita conocer lo siguiente?

El cambio producido en la población objetivo, atribuible a la ejecución del programa

El resultado que espera alcanzar el programa


Respuesta = NO

Se considera que el indicador definido a nivel de Propósito “Documentos legalizados y apostillados

entregados” es un indicador de gestión que solo relaciona lo entregado respecto de lo realizado,

ya que simplemente permite calcular el avance en la entrega de servicios específicos que, además,

son parte del quehacer normal de una institución pública de esta naturaleza; por lo que, no

permite medir el resultado que espera alcanzar el programa sobre la población objetivo, mediante

la cobertura que éste va logrando durante su ejecución.

Por lo anterior, se recomienda definir a este nivel, un indicador estratégico, preferentemente de

eficacia o eficiencia que permita evaluar el resultado y/o cambio producido en la población

objetivo, atribuible a la ejecución del programa.

11. ¿El (los) indicador (es) de PROPÓSITO cumple (n) con las siguientes características?


¿Es (son) claro (s)? Sí

¿Es (son) relevante (s)? No

¿Es (son) económico (s)? Sí

¿Es (son) monitoreable (s)? Sí

b. ¿Cuenta (n) con una ficha técnica que contenga los elementos que lo (s) componen:

Nombre Si Definición Si Tipo Si Dimensión Si Método de cálculo Si Unidad de medida Si Frecuencia de medición Si Línea base Si Metas Si Comportamiento del indicador Si Semáforos Si

c. ¿El método de cálculo del (los) indicador (es) de PROPÓSITO cumple con las siguientes

características:



d. ¿El tipo del (los) indicador (es) a este nivel es preferentemente estratégico y su dimensión es

de eficacia y/o eficiencia? No


e. ¿La unidad de medida del (los) indicador (es) corresponde con el método de cálculo, la línea

base y las metas? Sí

f. ¿La periodicidad del (los) indicador (es) permite (n) contar con al menos una medición anual

y/o semestral? No

g. ¿El (los) indicador (es) cuenta (n) con línea base? Sí

El indicador definido para evaluar el objetivo de Propósito es claro, económico y monitoreable,

pero no es relevante; cuenta con información cuantitativa y cualitativa; su método de cálculo está

correctamente formulado y utiliza expresiones aritméticas que representan una relación de

variables; su dimensión es de eficacia; sin embargo el tipo (gestión) no es el recomendado a este

nivel (estratégico). En cuanto a la periodicidad del indicador, se sugiere que ésta sea por periodos

más prolongados; por ejemplo una o dos veces al año.

12. ¿Se incorporan los medios de verificación suficientes y necesarios para obtener los datos

requeridos para el cálculo del (los) indicador (es) definido (s), que permitan evaluar el objetivo de

PROPÓSITO y contengan, al menos, la siguiente información?


información?

b. ¿Se incluye la fecha de emisión de la fuente de información?

c. ¿Se incluye el área emisora y/o responsable de su emisión?


para la obtención del cálculo del indicador definido para evaluar el objetivo de Propósito; es decir,

el nombre del registro o informe es “Reporte mensual de legalización y apostillado de

documentos de la DPEyC”, la frecuencia es mensual y el área emisora y responsable de la

información es DPEyC.

13. ¿El nivel de PROPÓSITO incorpora supuestos que contengan las siguientes características?

a. ¿La redacción del supuesto está expresada en términos positivos? Sí


programa y qua está (n) fuera de su control? No


ocurrencia? Sí


cumplimiento del objetivo de Propósito? Sí

e. ¿Es (son) lo suficientemente preciso (s) para estar en posibilidad de ser monitoreado (s)? Sí

f. ¿Se considera (n) suficiente (s) y necesario (s) para el logro del objetivo propuesto y que la

ejecución del programa contribuya al logro de un objetivo de orden superior? No


Respuesta = No

Se considera que el supuesto diseñado a este nivel “Los procesos de apostillado y legalización

permiten la entrega a tiempo de los documentos” están redactados en términos positivos; sin

embargo no expresa una condición externa (fuera del control del programa), sino una condición

propia del programa (atribuible al mismo); aun cuando sí tienen probabilidad de ocurrencia, es

susceptible de ser solventada y es lo suficientemente preciso para ser monitoreado.

COMPONENTES

14. ¿Los COMPONENTES de la matriz de indicadores para resultados especifican claramente cuáles son

los bienes y/o servicios públicos que debe producir o entregar el programa durante su ejecución

para cumplir con su Propósito?

Respuesta = SI

Se considera que los Componentes diseñados en la MIR y que a continuación se relacionan,

especifican claramente los servicios públicos que debe producir y entregar el programa durante su

ejecución, para estar en posibilidad de cumplir con el Propósito definido; sin embargo, los

componentes 2 y 3 parecieran ser más actividades necesarias para brindar el servicio que el

programa proporciona (Legalización y apostilla de documentos oficiales).

1. Legalización y apostilla de documentos realizada

2. Digitalización de firmas y sellos de funcionarios actualizada

3. Títulos profesionales identificados

15. ¿La sintaxis del resumen narrativo de los COMPONENTES es correcta y cumple con las siguientes

características?

a. ¿El sujeto de la oración se refiere a los productos terminados y/o servicios proporcionados para

el logro del Propósito del programa? Sí

b. ¿La oración contiene un verbo en pasado participio que permita relacionar los bienes y servicios

producidos por el programa? Sí

El resumen narrativo de cada uno de los componentes diseñados en la MIR cumple con la sintaxis

establecida a este nivel, el sujeto de la oración se refiere a los servicios proporcionados por el

programa para el logro del Propósito y contiene un verbo en pasado participio que permita

relacionar los bienes y servicios producidos por el programa.

16. ¿Se considera que los COMPONENTES diseñados, son los suficientes y necesarios para el logro del

Propósito?


Respuesta = SI

Como se comentó en la respuesta a la pregunta 14, se considera la conveniencia de analizar si la

legalización y apostillamiento sea el único servicio que brinda el programa “Legalización y

apostillado de documentos oficiales"; por lo tanto solo éste representa el único producto y/o

servicio suficiente y necesario para el logro del Propósito y, tanto la digitalización de firmas y sellos

de funcionarios, como la identificación de títulos profesionales, representan acciones (Actividades)

necesarias para producir el bien o servicio que el programa proporciona.

17. ¿Los indicadores definidos para cada COMPONENTE permiten medir si los bienes y/o servicios

producidos y/o entregados por el programa a los beneficiarios se realizan en la cantidad y calidad

necesaria, de acuerdo con los resultados esperados?

Respuesta = SI

Los indicadores definidos permiten evaluar el desempeño en cuanto a la cobertura y variación de

los componentes que se han incluido en la matriz. No obstante, se sugiere incorporar, al menos, un

indicador de calidad, que permita conocer el nivel de satisfacción de los beneficiarios del

programa.

18. ¿Los indicadores definidos para cada COMPONENTE cumplen con las siguientes características?


¿Son claros? Sí

¿Son relevantes? Sí

¿Son económicos? Sí

¿Son monitoreables? Sí

b. ¿Cuentan con una ficha técnica que contenga los elementos que los componen?

Simbre Si Definición Si Tipo Si Dimensión Si Método de cálculo Si Unidad de medida Si Frecuencia de medición Si Línea base Si Metas Si Comportamiento del indicador Si Semáforos Sí

c. ¿El método de cálculo de los indicadores de cada COMPONENTE cumple con las siguientes

características:



¿Utiliza únicamente expresiones aritméticas y/o símbolos matemáticos que representen una

relación de variables? Sí

d. ¿Se incluye al menos un indicador de calidad que permita conocer el nivel de satisfacción de

los beneficiarios? No

e. ¿La unidad de medida de los indicadores corresponde con el método de cálculo, la línea base y

las metas? Sí

f. ¿La periodicidad de los indicadores permite contar con al menos una medición semestral y/o

trimestral? No

g. ¿Los indicadores cuentan con línea base? Sí

Los indicadores definidos para evaluar los Componentes son claros, relevantes, económicos y

monitoreables y. aún cuando cuentan con información cualitativa y cuantitativa, si bien, es

importante anteponer “Porcentaje de…” en el nombre de cada uno de los indicadores. Su método

de cálculo está correctamente formulado y utilizan expresiones aritméticas que representan una

relación de variables; aunque se sugiere revisar el orden de las variables de los indicadores para los

Componentes 1 y 3 [C1.- Solicitudes de legalización = (Número de solicitudes de legalización y

apostilla de documentos recibidas / Número de documentos legalizados y apostillados)*100) y C3.-

Identificación de títulos profesionales = (Número de títulos profesionales a trámite de legalización

/ Número de títulos legalizados)*100]; ya que se considera que éstas deben ser invertidas. Por

ejemplo: C1.- Solicitudes de legalización = (Número de documentos legalizados y apostillados /

Número de solicitudes de legalización y apostilla de documentos recibidas)*100 y C3.-

Identificación de títulos profesionales = (Número de títulos profesionales legalizados / Número de

títulos a trámite de legalización)*100. En cuanto a la periodicidad, se recomienda que el indicador

se mida cada 3 o 6 meses y se sugiere incorporar, al menos, un indicador de calidad.


requeridos para el cálculo de los indicadores definidos, que permitan evaluar el objetivo de cada

COMPONENTE y contengan, al menos, la siguiente información?


información?




para la obtención del cálculo de los indicadores definidos para evaluar los Componentes; es decir,

el nombre de los registros o informes son “Reporte de documentos legalizados y apostillados de

la DPEyC”, “Reporte de firmas digitalizadas por la DPEyC” y “Reporte mensual de legalización de


títulos de la DPEyC”, la frecuencia es mensual y el área emisora y responsable de la información

es DPEyC.

20. ¿El nivel de COMPONENTES incorpora supuestos que contengan las siguientes características?



programa y qua está (n) fuera de su control?


ocurrencia?


cumplimiento del objetivo?


f. ¿De cumplirse el supuesto definido a este nivel, es posible alcanzar el Propósito?

Respuesta = SI

Se considera que los supuestos diseñados para los Componentes 1 y 3 “Los estudiantes egresados

de la Universidad acuden a legalizar su título profesional” y “Los estudiantes que deciden estudiar

en el extranjero apostillan sus documentos”, respectivamente, están redactados en términos

positivos; expresan condiciones externas (fuera del control del programa), tienen probabilidad de

ocurrencia, son susceptibles de ser solventadas y son lo suficientemente precisos para ser

monitoreados; sin embargo, el supuesto diseñado para el Componente 2 “Los procesos

establecidos de manera adecuada permiten la entrega de los documentos” representa una

condición propia del programa (atribuible al mismo); por lo que se recomienda omitirlo, o en su

caso, sustituirlo por otro supuesto que represente una condición externa (fuera del control del

programa).

ACTIVIDADES

21. ¿El resumen narrativo de las ACTIVIDADES de la matriz de indicadores para resultados contiene las

siguientes características?

a. ¿Detalla claramente todas las acciones necesarias para producir los bienes y/o servicios

(componentes) que debe producir o entregar el programa? No

b. ¿Las actividades están agrupadas o estructuradas de manera que permitan identificar a que

componente corresponden? Sí

Aún cuando las Actividades descritas están agrupadas de manera que pueden ser identificadas al

Componente que corresponden; sin embargo no detallan claramente las acciones necesarias para

producir cada uno de los componentes (bienes y/o servicios que el programa proporciona).


22. ¿La sintaxis del resumen narrativo de las ACTIVIDADES es correcta y cumple con la siguiente

característica?

a. ¿El inicio de la oración contiene un sustantivo derivado de un verbo (acción), acompañado de

un complemento, que permita relacionarse con los componentes del programa?

Respuesta = NO

El inicio de la oración del resumen narrativo de la mayoría de las Actividades inicia con un verbo en

infinitivo (enviar, registrar, dar de alta); por lo que se sugiere modificar su redacción, de manera

que el inicio de la oración contenga un sustantivo derivado de un verbo (P. ej. Envío, recepción,

registro, entre otros). Adicionalmente, en algunos casos, el complemento de la oración no

corresponde a los elementos necesarios para la producción de los bienes y/o servicios que se

relacionan con cada Componente.

23. ¿Se considera que las ACTIVIDADES descritas son las suficientes y necesarias para producir cada

uno de los Componentes propuestos.

Respuesta = NO

Se considera que las Actividades descritas en la MIR “Legalización y apostillado de documentos

oficiales", no son suficientes y necesarias para producir cada uno de los Componentes que se

presentan actualmente; ya que se identifican tareas (acciones) adicionales que pueden incidir en la

producción de los bienes o servicios que el programa proporciona, como se detalla a continuación:

1. Entrega de documentos legalizados y /o apostillados.

2. Revisión y/o selección de documentación recibida, entre otros.

Adicionalmente y como se comentó con anterioridad, es necesario considerar si los Componentes

2 y 3 (Digitalización de firmas y sellos de funcionarios actualizada y Títulos profesionales

identificados, respectivamente) representan bienes y/o servicios que el programa entrega a los

beneficiarios o son Actividades necesarias para el desarrollo del servicio y por lo tanto, debieran

ser reasignados a este nivel.

24. ¿Los indicadores definidos para cada ACTIVIDAD permiten medir el esfuerzo administrativo

aplicado a las actividades principales y a los insumos para obtener los bienes y servicios?

Respuesta = SI

Los indicadores definidos permiten medir el esfuerzo administrativo aplicado a las Actividades

principales y a los insumos para obtener los bienes y servicios que el programa proporciona.

25. ¿Los indicadores definidos para cada ACTIVIDAD cuentan con las siguientes características?



¿Son claros? Sí

¿Son relevantes? Sí

¿Son económicos? Sí

¿Son monitoreables? Sí

b. Una ficha técnica que contenga los elementos que los componen:

ombre Si Definición Si Tipo Si Dimensión Si Método de cálculo Si Unidad de medida Si Frecuencia de medición Si Línea base Si Metas Si Comportamiento del indicador Si Semáforos Sí

c. ¿El método de cálculo de los indicadores de cada ACTIVIDAD cumple con las siguientes

características:



d. ¿La unidad de medida de los indicadores corresponde con el método de cálculo, la línea base y

las metas? Sí

e. ¿La periodicidad de los indicadores permite contar con al menos una medición trimestral y/o

mensual? Sí

f. ¿Los indicadores cuentan con línea base? Sí

Los indicadores definidos para evaluar las Actividades son claros, relevantes, económicos y

monitoreables; cuentan con información cualitativa y cuantitativa; su método de cálculo está

correctamente formulado y utilizan expresiones aritméticas que representan una relación de

variables; la periodicidad es mensual y cuentan con línea base; no obstante, se recomienda

anteponer “Porcentaje de…” en el nombre de todos los indicadores.


requeridos para el cálculo de los indicadores definidos, que permitan evaluar el objetivo de cada

ACTIVIDAD y contengan, al menos, la siguiente información?



información?



Respuesta = SI


para la obtención del cálculo de los indicadores definidos para evaluar las Actividades, nombre del

registro, reporte o informe: “Reporte mensual de recepción de documentos de la DPEyC”,

“Reporte de digitalización de firmas de la DPEyC “, “Reporte de títulos enviados a firma de la

DPEyC”, “Reporte mensual de registro firmas para digitalización de la DPEyC”, “Reporte de

registros en el sistema la DPEyC” y “Registro de títulos dados de alta en el sistema ´por la

DPEyC”; su emisión: mensual y el área responsable y /o: emisora de la información es la DPEyC .

27. ¿El nivel de ACTIVIDAD incorpora supuestos que contengan las siguientes características?


b. ¿La redacción del supuesto expresa el (los) riesgo (s) o condición (es) (externa) que enfrenta

el programa y qua está (n) fuera de su control?


ocurrencia?


cumplimiento del objetivo?


f. ¿De cumplirse el supuesto definido a este nivel, es posible el logro de cada COMPONENTE?

Respuesta = SI

Se considera que los supuestos diseñados para las Actividades y que a continuación se describe4n,

cumplen con las características establecidas; es decir, están redactados en términos positivos;

representan riesgos o condiciones que enfrenta el programa que están fuera de su control, tienen

una probabilidad de ocurrencia, son susceptibles de ser solventados para al cumplimiento del

objetivo de la Actividad a la que corresponden y son lo suficientemente precisos para ser

monitoreados.

A1.1 La ciudadanía investiga sobre los servicios que ofrece la DPEyC

A1.2 Los funcionarios públicos asisten a registrar sus firmas

A1.3 Los envíos de los títulos a firma se llevan a cabo en el tiempo establecido

A2.1 Los funcionarios públicos envían oportunamente sus firmas para digitalizar

A2.2 Se recibe a tiempo la información de la digitalización de firmas para darlas de alta en el sistema

A3.1 El sistema de registro funciona adecuadamente.


D. Evaluación de Indicadores por nivel de la MIR

En esta sección, se presenta, un cuadro resumen de todos los indicadores definidos para evaluar el

logro de los objetivos de cada nivel que integra la MIR “”Legalización y apostillado de documentos

oficiales”, que contiene una valoración de los elementos que los conforman, así como las

recomendaciones que se emiten para los mismos.

Recomendaciones:

Definir un indicador estratégico a nivel de Propósito, preferentemente de eficacia o eficiencia,

que permita dar seguimiento de los avances y evaluar la cobertura y/o cambio producido en la

población objetivo, atribuible a la ejecución del programa.

Incluir las palabras “Porcentaje de…” en el nombre de todos los indicadores de la MIR.

Evaluar la posibilidad de incluir un indicador de calidad a nivel de Componentes que permita

medir el nivel de satisfacción de los beneficiarios.

Nivel de

ObjetivoNombre del Indicador

Método de

CálculoDefinición Claro Relevante Económico Monitoreable Adecuado Tipo

Unidad de

Medida

Fin Servicios otorgados Sí Sí Sí Sí Sí Sí Sí Estratégico Sí

PropósitoDocumentos legalizados y

apostillados entregadosSí Sí Sí No Sí Sí No Gestión Sí

Nivel de


Método de


Unidad de

Medida

Componente 1 Solicitudes de legalización No Sí Sí Sí Sí Sí Sí Gestión ´Sí

Componente 2 Digitalización de firmas Sí Sí Sí Sí Sí Sí Sí Gestión Sí

Componente 3Identificación de títulos

profesionalesNo Sí Sí Sí Sí Sí Sí Gestión Sí

Nivel de


Método de


Unidad de

Medida

Actividad 1.1 Solicitudes revisadas Sí Sí Sí Sí Sí Sí Sí Gestión Sí

Actividad 1.2Digitalización de firmas de

funcionarios públicosSí Sí Sí Sí Sí Sí Sí Gestión Sí

Actividad 1.3 Títulos enviados a firmas Sí Sí Sí Sí Sí Sí Sí Gestión Sí

Actividad 2.1 Firmas digitalizadas Sí Sí Sí Sí Sí Sí Sí Gestión Sí

Actividad 2.2 Registro de firmas en el sistema Sí Sí Sí Sí Sí Sí Sí Gestión Sí

Actividad 4.2Registro de títulos dados de alta

en el sistemaSí Sí Sí Sí Sí Sí Sí Gestión Sí

Tabla 1. Evaluación de Indicadores por Nivel (parte 1)



Nombre del Programa: Servicios de legalización y apostilla de documentos

Dependencia/Entidad: Secretaría General de Gobierno

Unidad Responsable: DPEyC


Analizar la posibilidad de que la frecuencia de medición de los indicadores definidos a nivel de

Fin, Propósito y Componentes sea mayor a la establecida (mensual); por ejemplo: Anual o

sexenal a nivel de Fin, anual o semestral a nivel de Propósito, semestral o trimestral a nivel de

Componentes.

Revisar el orden de las variables en el método de cálculo de los indicadores correspondiente al

primer y tercer Componente a fin de analizar la posibilidad de que éstas sean invertidas.

Tener en cuenta que los valores para el ejercicio fiscal 2013 deberán ser actualizados al cierre

del informe de la cuenta Pública.


V. Fortalezas, Retos y Recomendaciones

Con base en las respuestas descritas en la presente Evaluación y como resultado de las mismas, a

continuación se presenta un análisis FODA (Fortalezas, Oportunidades, Debilidades y Amenazas) de los

temas o elementos evaluados que integran la MIR “Legalización y apostillado de documentos

oficiales”:

Fortalezas

La mayoría de los elementos que integran la matriz se encuentran definidos en la misma y presenta un

importante grado de avance en su elaboración. Está construida bajo una metodología de marco lógico,

con relaciones de causalidad entre los distintos niveles, que resulta en una adecuada lógica vertical y

horizontal de la misma, permitiendo que operen las relaciones de causalidad entre éstos.

En los objetivos descritos a nivel de Fin y Propósito se identifica claramente la contribución del

programa al objetivo estratégico al cual se encuentra vinculado, así como el resultado que se espera

alcanzar e impacto sobre la población objetivo, atribuible a la ejecución del Programa,

respectivamente.

En general, el resumen narrativo cumple con la sintaxis definida para cada nivel y describe claramente

cada uno de sus objetivos. Asimismo, contiene indicadores que permiten evaluar sus objetivos,

cumplen con los criterios de validación y expresan una relación de variables, cuenta con los requisitos

necesarios para verificar la información de los indicadores y la mayoría de los supuestos están

FORTALEZAS OPORTUNIDADES

Contribución del Programa a un objetivo estratégico y

resultado que se espera alcanzar claramente identificado

Lógica vertical y horizontal en la estructura de la MIR

Resumen Narrativo con forme a Sintaxis recomendada

Medios de verificación y supuestos adecuados

DEBILIDADES AMENAZAS

Actividades insuficientes y necesarias

Supuesto inadecuado a nivel de Propósito

Componentes que representen los bienes y/o servicios

que el programa debe proporcionar.

Indicador estratégico a nivel de Propósito que permita

medir el cambio producido en población objetivo y/o

resultado que se espera alcanzar con ejecución del

Programa.


redactados en términos positivos y expresan un factor externo que interviene en el desarrollo del

Programa.

Oportunidades

Como ya se señaló anteriormente, se carece de un indicador relevante y adecuado que mida

correctamente el objetivo de Propósito; por lo que, la oportunidad que se presenta, se basa

fundamentalmente, en redefinir o incorporar, a este nivel, un indicador estratégico que pueda medir

el resultado esperado del programa (que la población cuente con certeza jurídica y servicios

gubernamentales modernos, eficientes y de calidad en el trámite de legalización y apostillamiento de

documentos legales). El indicador podría ser establecido en términos de documentos de facilitación

del trámite, entrega de documentos sin errores, oportunidad de la entrega o en relación al tiempo que

la población debe esperar para que se le brinde el servicio, por decir algunos.

Debilidades.

Es recomendable realizar el análisis para establecer si los Componentes descritos: 2.- Digitalización de

firmas y sellos de funcionarios actualizada y 3.- Títulos profesionales identificados representan en

realidad los servicios producidos y proporcionados por el programa a la población objetivo para el

logro del Propósito o forman parte de las Actividades para desarrollar y producir el Componente 1.-

Legalización y apostilla de documentos realizada.

Revisar si las Actividades definidas son suficientes y necesarias para el logro de los Componentes o

existen acciones adicionales o complementarias que inciden en la producción y logro de los mismos.

Adicionalmente y, de ser el caso de redefinir el o los Componentes (bienes y/o servicios que el

programa proporciona), en consecuencia, será necesarios redefinir también las Actividades necesarias

para el desarrollo y producción del o los Componentes finalmente establecidos.

Como se comentó en la sección correspondiente, es conveniente rediseñar un supuesto a nivel de

Propósito que represente una condición externa (fuera del control del programa); ya que el definido

para este nivel “Los procesos de apostillado y legalización permiten la entrega a tiempo de los

documentos” se considera una condición propia; toda vez que la operación de dichos procesos son

responsabilidad del mismo.


VII. Conclusiones

En términos generales, la MIR del programa Servicios de Legalización y Apostilla de Documentos que

actualmente implementa la Unidad de Legalizaciones del Estado de Nuevo León, presenta un buen

grado de avance; toda vez que presenta imprecisiones a nivel de Propósito, así como en las Actividades

necesarias para el desarrollo de los Componentes, certeza en cuales son los bienes o servicios que

deben ser entregados y conduzcan al logro del Propósito del programa.

En virtud de lo anterior, se recomienda enriquecer la matriz principalmente mediante la redefinición

de los diversos elementos que conforman el nivel de Propósito (resumen narrativo, indicador y

supuesto), así como la reestructuración de los niveles de Componentes y Actividades. Todo ello bajo

una lógica y definición de conceptos que permitan a dichos elementos dar cohesión y coherencia a los

diversos niveles de la matriz, al tiempo que esta última sea capaz de reflejar el impacto del programa

sobre la población objetivo.


VIII. Responsabilidades y compromisos

La presente Evaluación de la MIR “Legalización y apostillado de documentos oficiales” estará sujeta a

la revisión y análisis por parte de la unidad coordinadora de la evaluación y por la unidad

administrativa que opera el programa, así como de la concertación de posibles modificaciones,

basadas en información soporte que fundamente las mismas.

Por lo anterior, la Unidad Responsable de la ejecución del Programa deberá revisar el informe

borrador que representa este informe y entregar oportunamente los comentarios que de la revisión

resulten, a fin de que sean incorporadas las observaciones pertinentes en la versión final del informe.

Programa Presupuestario: Servicios de Legalización y Apostilla de Documentos

MIR: Legalización y Apostillado de Documentos Oficiales

Área Responsable: Unidad de Legalizaciones

Fecha:

Nombre Cargo Firma

Lic. Miguel Ángel Bazaldúa Ibarra

Lic. Eduardo Sánchez Rosete Coordinador de la Evaluación

Evaluación Socioeconómica de

Programas y Proyectos, S.C.

Lic. Adriana Sánchez Evaluador

Evaluación Socioeconómica de

Programas y Proyectos, S.C.

10 de diciembre 2014

Coordinador de Planeación

Dirección de Planeación Secretaría General de Gobierno


Referencias

Instituto Latinoamericano Y Del Caribe De Planificación Económica Y Social (ILPES). 2004. Metodología Del Marco Lógico. Boletín Del Instituto, No. 15.

Secretaría de Hacienda y Crédito Público (SHCP), Secretaría de la Función Pública (SFP), Consejo Nacional de Evaluación de la Política de Desarrollo Social (CONEVAL). 2010. Guía para la Construcción de la Matriz de Indicadores para Resultados.

SHCP. 2012. Beneficios - El A, B, C del PbR-SED.

http://www.shcp.gob.mx/EGRESOS/sitio_pbr/Paginas/conceptualizacion.aspx.

World Economic Forum. 2011. The Global Competitiveness Report 2011-2012. Ginebra, Suiza.

http://www.shcp.gob.mx/EGRESOS/sitio_pbr/Paginas/conceptualizacion.aspx

EVALUACIÓN DE LA MATRIZ DE INDICADORES PARA RESULTADOS€¦ · PED, es que ^en materia de...

Documents

Transcript of EVALUACIÓN DE LA MATRIZ DE INDICADORES PARA RESULTADOS€¦ · PED, es que ^en materia de...