10 Ana Ruiz Evaluación de las políticas públicas y …...Ana Ruiz Martínez Presidenta Agencia...
36
Ana Ruiz Martínez Presidenta Agencia Estatal de Evaluación de las Políticas Públicas y la Calidad de los Servicios “Evaluación de las políticas públicas y políticas de igualdad. ¿Cuál puede ser la contribución de AEVAL?”
Transcript of 10 Ana Ruiz Evaluación de las políticas públicas y …...Ana Ruiz Martínez Presidenta Agencia...
Ana Ruiz MartínezPresidentaAgencia Estatal de Evaluación delas Políticas Públicas y la Calidad de los Servicios
“Evaluación de las políticas públicas y políticas de igualdad. ¿Cuál puede ser la
contribución de AEVAL?”
1. AEVAL no tiene funciones específicas en materia de evaluación depolíticas de igualdad: Secretaría de Estado de Servicios Sociales eIgualdad
2. En las jornadas han participado personas expertas en estamateria, por lo que esta presentación estará más enfocada hacialas aportaciones de la evaluación a la calidad y resultados de laspolíticas, para contribuir a la construcción de un determinado tipode sociedad…. más igualitaria, más equitativa
PLANTEAMIENTO DE LA EXPOSICIÓN
El enfoque de evaluación en AEVAL
EVOLUCIÓN DEL CONCEPTO EVALUACIÓN (I)
1. MEDICIÓN DE RESULTADOS
Fuertes exigencias metodológicas/cuantitativas.Utilidad real limitada, ya que no explica bien la conexión entre el conocimiento obtenido y
la mejora de la acción.No se explican las razones de los resultados generados.Existe cierto renacimiento a partir de la popularización de los sistemas de indicadores y de
perspectivas comparadas (benchmarking) que a su vez se combinan con abordajes cualitativos
2. DESCRIPCIÓN DEL PROGRAMA
Se modifica la unidad de análisis.
El foco pasa de individuos o servicios aislados a programas públicos, entendidos como diseñosorientados por objetivos para la resolución de problemas
La evaluación trata de explicar los resultados por su conexión con el funcionamiento delprograma.La mejora de los resultados se vincula al contraste de las hipótesis subyacentes al programa y
las realizaciones conseguidasSe analizan variables internas, pero no el contexto lo que limita y condiciona su utilidad
EVOLUCIÓN DEL CONCEPTO EVALUACIÓN (II)
3. JUICIO SOBRE LAS POLITICAS Y PROGRAMAS
El elemento central son los objetivos de los programas.
Evaluación para esclarecer el verdadero impacto de los programas.
Conocer el cambio observado y qué parte es debida a la intervención y qué partes a otrosfactores internos o contextuales
Juicio sobre la capacidad real de los programas y políticas para solucionar los problemas
La dificultad está en establecer nexos causales entre programas y resultados dada lacomplejidad de las decisiones publicas y los escenarios sociales en lo que se implantan losprogramas.
4. PERSPECTIVA MÁS POLÍTICA O DE PROCESO SOCIAL
Giro con respecto a la situaciones anteriores que pretendían aportar más elementos objetivos.
El elemento central son posiciones, actitudes y orientaciones de actores con influencia en el proceso político.
La evaluación deja de ser un proceso estrictamente técnico e incorpora más debate y reflexión social.
No sólo conocer si un programa ha funcionado bien o mal y en qué grado, sino abrir una negociación entre losactores implicados acerca de “qué es y en qué consiste el éxito de determinada política”.
El evaluador pasa de agente externo a mediador, teniendo un papel importante para la construcción de lasdistintas posiciones respecto a las políticas
La dificultad está en la pérdida de datos objetivos, y referentes fuertes de comparación y análisis de impactos.
LA EVALUACIÓN PONE EN RELACIÓN UNA DETERMINADA POLÍTICA CON LOS VALORES DE REFERENCIA
DEBE TENER CARÁCTER PERMANENTE. NECESITA DE UNA CULTURA, HÁBITOS Y ACTITUDES PRÓXIMOS AL PENSAMIENTO ESTRATÉGICO
DEBE POTENCIAR EL APRENDIZAJE
UNA HERRAMIENTA PARA LA REFLEXIÓN POLÍTICA
Una organización que mantenga su capacidad de rendir cuentas, de ser transparente en su gestión, de evaluar su quehacer, será una organización capaz de aprender tanto de sus aciertos como de sus errores. Subirats, 2005
Legitimación de las políticas sociales y en general de las acciones del gobierno para resolver los problemas públicos
Reforzamiento del estado del bienestar
Análisis de los efectos de las políticas sobre los ciudadanos
Contribución de las políticas para crear un determinado tipo de sociedad
UNA HERRAMIENTA DE CALADO SOCIAL
Evaluación de
las Políticas Públicas
El proceso político por el que se legitima un marconormativo adecuado para el desarrollo de la función deevaluación a partir de la estructuración de espacios einstancias de las administraciones públicas a las queencargar tal función, ubicándolos en distintos nivelesde gobierno y según las distintas actividades o sectoresa evaluar.
INSTITUCIONALIZACIÓN DE LA EVALUACIÓN
PANORAMA DE LA EVALUACIÓN EN ESPAÑA: 2006
SPEE CC.AA
EE.LL
Fundaciones
Sociedades deevaluación
Institutos de InvestigaciónUniversidades
Fondos estructurales
Fondo de Cohesión
CES
PANORAMA DE LA EVALUACIÓN EN ESPAÑA: 2011
Sectoriales Generalistas Orientación Generalista que inician el camino
Incorporan actividades de evaluación de políticas públicas de carácter generalista
Fondos comunitarios
Universidades
InstitutosInvestigación
Otros....
Difusión de la cultura de evaluación.
Evaluaciones de políticas y programas.
Elaboración de metodologías, sistemas de información e indicadores.
Promoción de la cultura de calidad institucional.
Evaluaciones de servicios públicos y de la actividad de las Agencias Estatales.
Observatorio de la Calidad de los Servicios.
Directrices metodológicas, difusión de buenas prácticas y certificaciones de calidad.
FUNCIONES DE LA AEVAL
ENFOQUE DE EVALUACIÓN DE AEVAL
Proceso sistemático y razonado de generación de conocimiento, a partir de larecopilación, análisis e interpretación de información, encaminado a lacomprensión integral de una intervención pública – sea ésta una política, plan,programa o norma‐, para alcanzar un juicio valorativo, basado en evidencias,respecto de su diseño, puesta en práctica y efectos (resultados e impactos)
Enfoque integral de la evaluación:
Incluyendo las dimensiones estratégicas y operativas de las intervencionespublicas.Contemplando todo el ciclo de las intervencionesConsiderando la acción pública como un continuo (macro, meso, micro).
CRITERIOS DE VALOR
EFICACIA EFICIENCIA
RACIONALIDAD Y COHERENCIA
SOSTENIBILIDADCOMPLEMENTARIEDAD
COBERTURA
CALIDADTÉCNICA/GESTIÓN:
BUENA ADMINISTRACIÓN
La evaluación como instrumento para lograr mayor calidad en lagestión pública
Criterios de interés en el nivel gestor
IMPLEMENTACIÓN
CRITERIOS DE VALOR (II)
APERTURA PARTICIPACIÓN
COHESIÓN
ALINEAMIENTO
RESPONSABILIDAD
EQUIDAD
CALIDADDEMOCRÁTICA: BUEN GOBIERNO
como instrumento para lograr mayor calidad democrática
Criterios en el nivel de políticas = nivel técnico + Criterios de Gobernanza + Criterios “Ad Hoc”
TRANSPARENCIA
OTROS “AD HOC”
Los programas y las políticas públicas que anualmente le encargue el Consejo de Ministros.
El grado de aplicación y de éxito de las principales medidas del Programa Nacional de Reformas ‐PNR‐
La Estrategia Española de Desarrollo Sostenible en colaboración con el observatorio de la Sostenibilidad de España (OSE)
Realizar un informe anual para el Congreso de los Diputados sobre la actividad desarrollada por las Agencias Estatales y sus compromisos para mejorar la calidad de los servicios prestados a los ciudadanos, y
Realizar un informe anual del Observatorio de la Calidad de los Servicios Públicos que incluya la percepción del ciudadano sobre la calidad de dichos servicios
UN LUGAR DESTACADO EN LA AGENDA POLÍTICA
MANDATOS PARLAMENTARIOS Y GUBERNAMENTALES
PNR53%
EEDS10%
Otras políticas37%
EVALUACIONES AEVAL 2007‐2011
EVALUACIONES AEVAL – SECTORES DE POLÍTICA PÚBLICA
Política sanitaria 6,3 Política de seguridad 3,1
Políticas medioambientales
12,5
Política I+D+i 9,4
Políticas de empleo (PAMT) 9,4
Política educativa 3,1
Política de modernización AAPP 9,4
Políticas Protección Social 9,4
Política de fomento empresarial 18,8
Política de Cooperació
n 3,1
Política de Inmigración 3,1
Política Regional 3,1
Política Energética 6,3
Otros 6,3
La igualdad de género en las evaluaciones de la Agencia: algunosejemplos
Sistema General de Becas Educativas
LA IGUALDAD DE GÉNERO EN LAS EVALUACIONES DE LA AGENCIA
El Abandono Escolar PrematuroEvolución del porcentaje de población de 18 a 24 años que han abandonado prematuramente el sistema educativo español por sexo.
Fuente: Instituto de Evaluación. MEPSYD
El nivel educativo de la madre y el hecho de ser mujeraumentan la probabilidad de cursar estudios postobligatorios
Sistema General de Becas Educativas
LA IGUALDAD DE GÉNERO EN LAS EVALUACIONES DE LA AGENCIA
Fuente: Panorama de la Educación. OCDE 2008. Informe de España
Pero el coste de “no estudiar” esmenor para los hombres:
La tasa de desempleo solo varíaen 3 puntos porcentuales entrelos niveles mínimo y máximo deformación. Las mujeres duplican la tasa dedesempleo de los hombres encualquier nivel formativo.
LA IGUALDAD DE GÉNERO EN LAS EVALUACIONES DE LA AGENCIA
Política de bonificación y reducción de cuotas a la seguridad social
Las mujeres tienen una probabilidad mucho mas elevada deacceder a un contrato bonificado, inicial o de conversión, que aun contrato indefinido ordinario
En las contrataciones consideradas estables, las mujerescontratadas mediante contratos bonificados tienen una mayorprobabilidad de perder el empleo.
Los resultados muestran que los contratos más inestables serían los bonificados realizados a jóvenes varones menores de 30 años y a mujeres.
Distribución de la relación con la actividad de las personas con discapacidad por tipo de discapacidad y sexo
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Var
ones
Muj
eres
Var
ones
Muj
eres
Var
ones
Muj
eres
Var
ones
Muj
eres
Var
ones
Muj
eres
Var
ones
Muj
eres
Var
ones
Muj
eres
Var
ones
Muj
eres
Visión Audición Comunicación Aprendizaje Movilidad Autocuidado Vida doméstica Interaccionessociales
Inactividad-EstudiandoInactividadParoEmpleo
LA IGUALDAD DE GÉNERO EN LAS EVALUACIONES DE LA AGENCIA
Política de bonificación y reducción de cuotas a la seguridad social para personas en situación de discapacidad
LA IGUALDAD DE GÉNERO EN LAS EVALUACIONES DE LA AGENCIA
Política de bonificación y reducción de cuotas a la seguridad social para personas en situación de discapacidad
Los trabajadores discapacitados de más edad y las mujeres discapacitadas añaden a su discapacidad las barreras de acceso al mercado de trabajo
asociadas al género y a la edad.
Empleo Ordinario Un 68% de las empresas con trabajadoresdiscapacitados no contaba con mujeresdiscapacitadas en su plantilla.El peso de las mujeres sobre el total detrabajadores discapacitados contratados suponeun 22,3%.
Empleo Protegido El peso de las mujeres alcanza casi un 40% enpromedio en los CEE
Teniendo en cuenta que según datos de EDAD‐2008 las mujeres suponen el 52,5% y los mayores de 45años el 62,2% (de ellos el 57% son mujeres) de la población de discapacitados potencialmente activa, sugrado de inserción laboral en el empleo ordinario puede considerarse insuficiente.
LA IGUALDAD DE GÉNERO EN LAS EVALUACIONES DE LA AGENCIA
Vacaciones para mayores y Termalismo social
6,6 9,8 10,321 16,2
5,8
‐14,1
‐32,6
‐56,7
15,2
hasta 600 600‐960 961‐1320 1321‐1800 mas de 1800
solicita viaja
11,520,5
36,949,8
63,2
‐22,2 ‐19,7‐12,8
‐5,2
2,3
Hasta 720€ 720‐1.200 1.201‐1.560 1.561‐1.800 Más de 1.800
solicita viaja
269,4
63,9
12,4 8,9
191,1
41,8
‐12,8 ‐20,864 y menos 65‐69 70 y mas 75 y mas
solicita viaja173,1
81,6
‐17,7 ‐26,0
182,5
93,7
‐7,7 ‐16,7
64 y menos 65‐69 70 y mas 75 y mas
solicita viaja
LA IGUALDAD DE GÉNERO EN LAS EVALUACIONES DE LA AGENCIA
Vacaciones para mayores y Termalismo social
769654
375 376 374 369
1.282
1.035906 847
780674
662 636 609 589 564 512
0
200
400
600
800
1.000
1.200
1.400
60 - 64 65 - 69 70 - 74 75 - 79 80 - 84 85 y más
incapacidad jubilación viudedad
Interacción de los factores edad, renta y género.
A partir de los 75 años un 36% de las pensiones son de viudedad, es presumible que esta participaciónrelativa decreciente de los más mayores se deba también a su menor capacidad económica.
Y a todas las edades afectaría especialmente a las mujeres
ANÁLISIS DE LA EFICACIA PIFTEPERIODO 2005‐2008 RESULTADOS
Formación por áreas temáticas
1. Gobernanza, participación ciudadana y desarrollo institucional: 29% participantes eligió formación en esta área.
2. Cobertura de necesidades sociales : 20%
3. Promoción del tejido empresarial: 10%
“PROGRAMA IBEROAMERICANO DE FORMACIÓN TECNICA ESPECIALIZADA (PIFTE)”
4. Medio Ambiente: 18% de participantes
5. Cultura y desarrollo:
7. Prevención de conflictos y construcción de la paz: 8%
6. Género y desarrollo: 8%
FACTORES EXPLICATIVOS DE LA TASA DE BAJA
TASA DE BAJA (individuos que experimentan baja/población protegida)
En el periodo 2007‐2008:
• Un 72% de la población no experimentó ningún episodio de Itcc.• Un 17,5% experimentó un proceso.• Un 10,5% experimentó más de un proceso.
2,11%
3,00% 3,16%
5,87%
7,15%
11,83%
12,72%
0%
2%
4%
6%
8%
10%
12%
14%
SEXO TAMAÑO DE LAEMPRESA
TRIMESTRE GRUPOS DECOTIZACION
ACTIVIDADECONOMICA
TIPO DEEMPLEADOR
PREMATERNIDAD
LA IGUALDAD DE GÉNERO EN LAS EVALUACIONES DE LA AGENCIA
Incapacidad Temporal
Contribución de las variables del modelo a la variabilidad de la duración de la IT
0 0,5 1 1,5 2 2,5 3 3,5
CARGAS FAM.
NIVEL DE ESTUDIOS
SEXO
TIPO DE CONTRATO
TIPO DE EMPLEADOR
TAMAÑO DE LA EMPRESA
ENTE GESTOR
BASE REGULADORA DIARIA C.C.
MATERNIDAD
ACTIVIDAD ECONOMICA
EDAD
COMUNIDAD AUTONOMA
GRUPOS DE COTIZACION
REGIMEN DE LA SEG.SOCIAL
FACTORES EXPLICATIVOS DE LA DURACIÓN DE LAS BAJAS
LA IGUALDAD DE GÉNERO EN LAS EVALUACIONES DE LA AGENCIA
Incapacidad Temporal
El recurso a la IT por necesidades familiares ante la ausencia de otros institutos protectores existe, perono es muy elevado.
EL RECURSO A LA IT ANTE ESPACIOS DE DESPROTECCIÓN
DURACIÓN INCIDENCIA
RECURSO ANTE NECESIDADES FAMILIARES
LA IGUALDAD DE GÉNERO EN LAS EVALUACIONES DE LA AGENCIA
Incapacidad Temporal
Retos para la evaluación de las políticas de igualdad y de laspolíticas públicas en general
LA EVALUACIÓN DE LAS POLÍTICAS DE IGUALDAD DEBE CONSTRUIRSE SOBRE CIERTOS FACTORES QUE FACILITAN SU
GENERALIZACIÓN E INSTITUCIONALIZACIÓN
FACTORES PREVIOS QUE FACILITAN LA EVALUACIÓN DE LAS POLÍTICAS DE IGUALDAD
Concepción y estructuración de los planes de igualdad
Institucionalización de compromisos respecto a los planes y a su evaluación.
Aval internacional y grado de acuerdo tanto en la necesidad de las políticas y la estrategia a utilizar.
Fortaleza y estabilidad institucional de los organismos de igualdad.
El reconocimiento de la evaluación y la extensión de la cultura de la evaluación en España.
(Adaptado de Bustelo, 2004)
FACTORES PREVIOS QUE DIFICULTAN LA EVALUACIÓN DE LAS POLÍTICAS DE IGUALDAD
Planes demasiado generales
Horizontalidad e integralidad de la política pública: mas complejidad , multiplicidad de actores
Sensibilización y persuasión como una actividad a desarrollar por organismos de igualdad
Necesidad de promoción de la cultura, institucionalización y recursos para la evaluación
Falta de suficientes equipos profesionales preparados
Necesidad de incorporación de la evaluación en la planificación
(Adaptado de Bustelo, 2004)
Déficit en las buenas formulaciones. Déficit de herramientas de
planificación estratégica. Déficit de los sistemas de
seguimiento.
Promovercam
biosen
lacultura
delaplanificación
Difusión y conocimiento de la evaluación en lasAA.PP
Involucración al máximo nivel de las OO.PP Desarrollo de estrategias para que la evaluación
se utilice Reglamentación de la evaluación Sistema Público de evaluación
Avanzarenlacultura
delaevaluación
Mayor vinculación Planificación‐Evaluación: evaluaciones ex‐ante yevaluaciones de evaluabilidad
Desconocimiento de lo que es y aporta laevaluación.
Necesidad de diferenciar la evaluación de otrasmaneras de valorar la acción pública.
La evaluación no se percibe como una actividadestructural.
La evidencia de la complementariedad
Avanzarenla
institucionalización
AEVAL: Retos
No es sólo importante evaluar las políticas de génerotambién lo es construir un entorno favorable a la evaluación
La decisión de evaluar no puede ser el fruto de la voluntadindividual ni tener carácter coyuntural. La evaluación debeestar asentada desde el punto de vista legal y normativo,institucional y formar parte de la cultura de lasorganizaciones públicas.
AEVAL, puede contribuir al avance de la evaluación de laspolíticas de género a través de la práctica de la evaluaciónque promueve en paralelo, la cultura de la evaluación.
www.aeval.esAgencia Estatal de Evaluación de las Políticas Públicas
y la Calidad de los Servicios
