Evaluación Multicriterio Departamento Nacional de Planeación

Evaluación Multicriterio

Departamento Nacional de PlaneaciónDirección de Inversiones y Finanzas Públicas

Bogotá, Octubre 4 de 2011

NOTA: Tanto la información como los ejemplos que aparecen en esta presentación fueron sustraídos del documento: “PACHECO Juan Francisco, CONTRERAS Eduardo. Manual metodológico de evaluación multicriterio para programas y proyectos. Instituto Latinoamericano y del Caribe de Planificación Económica y Social (ILPES); Santiago de Chile, julio de 2008”

El concepto de evaluación multicriterio

La evaluación de proyecto se centra básicamente en la TOMA DE DECISIONES

ENCONTRAR LA SOLUCIÓN ÓPTIMA PRECISA

Se puede conocer la información necesaria para la toma de decisiones a través de la su cuantificación y aplicación de criterios únicos. Pero existe el riesgo de dejar por fuera efectos intangibles que pueden ser incluso más relevantes que los cuantificados.

SOLUCIÓN:1. Incorporar variables cualitativas que pesan en las decisiones de los agentes.2. Incorporar procesos de toma de decisión que son crecientemente grupales.

COMPLEMENTO A LA EVALUACIÓN FINANCIERA, ECONÓMICA Y SOCIAL


¿POR QUÉ LA EVALUACIÓN MULTICRITERIO?

Incorpora en la evaluación y priorización métodos basados en criterios de evaluación relacionados con múltiples objetivos en una métrica común.

Trabaja con varios criterios a la vez identificando la importancia relativa de cada uno.

Evalúa entre diferentes alternativas con diferente naturaleza de factores implícitos en una situación específica.

Puede manejar diferentes métodos de comparación (simples o complejos- cuantitativos, cualitativos mixtos)


¿EN QUÉ MOMENTO SE PUEDE APLICAR LA EVALUACIÓN MULTICRITERIO?

“Durante todo el ciclo de vida del proyecto”

En la identificación para el análisis de objetivos.En la identificación de las alternativas de solución involucrando criterios

cualitativos.En los estudios de prefactibilidad y factibilidad cuando los costos del desarrollo de

las alternativas son difíciles de cubrir.En la priorización de proyectos a ser financiados. Contribuye a mejorar la

transparencia en la asignación de recursos.Durante la ejecución para eliminar arbitrariedad y generar mayor participación.

Métodos de comparación

MÉTODOS CUANTITATIVOS

Capturan una realidad estática y objetiva estudiando las relaciones entre variables cuantitativas.

MÉTODOS SIMPLES - Indicadores económicosDesventaja: No cuentan con suficiente información. Excluye criterios que no pueden expresarse en términos monetarios.

MÉTODOS COMPLEJOS - Programación Lineal (suma VAN)- Dominancia entre proyectos (condiciones de incertidumbre)

Métodos de comparación

MÉTODOS CUALITATIVOS

Mide la relación entre variables cualitativas, otorgando una evaluación integral, pues complementa la evaluación cuantitativa. Puede tener capacidad de cuantificación si se le asigna valor a sus atributos.

MÉTODOS SIMPLES - Lista de verificación (Escalas)- Aporte a metas (Ponderación sobre meta

total)- Q-sorting (interacción nominal)

MÉTODOS COMPLEJOS - Método Delphi (Predicción de eventos en situación de incertidumbre)

MÉTODOS MIXTOS - Modelos de puntuación- AHP (Analitic Hierarchy Process)

Métodos de evaluación multicriterio

PROCESO DE DECISIÓN

Se requiere una herramienta de decisión eficaz, por ello, entre más elementos de análisis, el proceso es más adecuado.

DECISIÓN

COMPARA ELEMENTOS

MEDICIÓN

Complejidad en la toma de decisiones

• Individuales • Grupales• Variables tangibles• Variables intangibles• Problemas públicos• Problemas privados

La evaluación multicriterio

integra factores diversos en el

proceso de evaluación

PASOS PARA LA APLICACIÓN DE TOMA DE DECISIONES

Definir criterios y restriccionesDefinir tipos de variables (Discretas, continuas)Modelamiento de las preferencias

Optimizar por separado cada objetivo Asignar pero a cada objetivo y encontrar una sola solución

Definir si es un modelo determinístico o aleatorio: Simuladores Análisis probabilístico

Definir métodos de agregación Juicio de expertos Factor analysis Escalonamiento multidimensional AHP Otros


CLASIFICACIÓN DE LAS TÉCNICAS MULTICRITERIO

Se clasifican de acuerdo a cómo fluye la información entre los actores.

TÉCNICAS SIN INFORMACIÓN A PRIORI Flujo del analista al decisor (método de ponderaciones)

TÉCNICAS CON INFORMACIÓN A PRIORI Flujo del decisor al analista y depende el número de alternativas (Métodos de agregación-función de valor- jerarquía y métodos basados en relaciones de orden- Métodos de superación- comparación con relaciones binarias)

TÉCNICAS INTERACTIVAS Combinación de las dos anteriores


CONSTRUCCIÓN DE JERARQUÍAS

Las jerarquías están compuestas por los siguientes niveles:

Características:

Específicas (Evaluadas con los mismos criterios y ponderaciones) Permanentes en el tiempo (seguimiento) Pueden ser esquematizadas

FOCO

CRITERIOS

SUBCRITERIOS

ALTERNATIVAS

FOCO

CRITERIOS

Rige toda la evaluación

Elementos que definen el objetivo principal

Elementos que definen el criterio debajo del cual

ellos se encuentran

Soluciones o cursos de acción


Las jerarquías se organizan bajo la siguiente estructura:



MÉTODO SENCILLO DE ESTANDARIZACIÓN 01-Z

Identifica la importancia relativa entre criterios e integrar una variedad de indicadores cuantitativos como cualitativos. Se distingue por el uso de una matriz de comparaciones de criterios y el uso de la herramienta estadística Z (Homogeniza las escalas de medida).

Procedimiento para aplicar el método:

Paso 1: Identificar el objetivoPaso 2: Identificar los criterios cuantitativos y cualitativosPaso 3: Estandarizar la medida de los criterios (Media y desviación estándar)Paso 4: Estandarizar los datos (Distribución normal)Paso 5: Integrar los criterios en uno solo y elegir el mejor. (1-0)Paso 6: Conocer las ponderaciones de los criteriosPaso 7: Hallar la ponderación de cada alternativa y totalizar


MÉTODO SENCILLO DE ESTANDARIZACIÓN 01-Z

Ejemplo:

Paso 1: Objetivo: Mejorar la educación en una zona geográfica.

Paso 2: Criterios e indicadores:

Paso 3: Estandarización de indicadores:


Paso 4: estandarizar datos:

Paso 5: Integrar los criterios (0-1):

Paso 6: Ponderación de criterios:

Paso 7: Hallar ponderación y totalizar:


MÉTODO DE PROCESO ANALÍTICO JERÁRQUICO AHP

Consiste en la descomposición de estructuras complejas por sus componentes organizados jerárquicamente y ase cuantifica a través de juicios de preferencia.

Ordena el pensamiento analítico de acuerdo a 3 principios:

Construcción de jerarquías Establecimiento de prioridades Consistencia lógica



Construcción de jerarquías:

Aplicar el esquema: FOCO

CRITERIOS

SUBCRITERIOS

ALTERNATIVAS



Establecimiento de prioridades:

Comparación a pares con respecto a un criterio dado: «Escala de Intensidades de Preferencias»

Tipos de preferencias:

• Importancia• Preferencia• Más probable



Principio de consistencia lógica:

Establecimiento de relaciones entre objetivos

CONSISTENCIA = TRANSITIVIDAD + PROPORCIONALIDAD

Respeto a las relaciones de orden

entre elementos

Las proporciones deben estar dentro de un margen de error permitido



Ventajas del AHP:

Esta metodología es una herramienta de apoyo a la toma de decisiones que permite:

Definir el problema que se desea resolver. Identificar los criterios discriminantes en la toma de decisiones. Trabajar con un equipo multidisciplinario. Estructurar los criterios y subcriterios en una jerarquía. Determinar la importancia de cada criterio en términos de ponderadores y

sintetizar toda esta información para tomar la mejor decisión. Llegar a un resultado en consenso.

Proceso parala evaluación multicriterio

Analytic Hiearchy Process (AHP)*:

Comparación por Pares Uso de las Escalas de Medición del AHPAHP

MetasCriterios Escala de MediciónAlternativas

1 Igualmente Preferida3 Moderadamente Preferida5 Fuertemente Preferida 7 Muy Fuertemente Preferida 9 Extremadamente Preferida

AHP Escala de Medición

• Facilidad de Uso• Permite Rápida Replaneación• Incorpora Factores Cualitativos

y Cuantitativos• Consistente Medición de

Desempeño

Aplicación del Proceso Analítico Jerárquico- AHP

* T.L. Saaty, The Analytical Hierarchy Process, New York, MacGraw Hill.

Ejemplo de aplicación del AHP (1):• Objetivo: Seleccionar entre tres programas educativos (T1, T2 y T3)• Criterios:

– Costo– Confiabilidad– Disponibilidad

• Costo: T1($100/hora); T2($90/hora); T3($125/hora)– T2 es moderadamente preferido a T1– T1 está entre fuerte y muy fuertemente preferido a T3– T2 es muy fuertemente preferido a T3


Ejemplo de aplicación del AHP (2):

• Se construye la matriz de preferencias con respecto del COSTO; se califica basados en la escala de medición:

1 1/7 1/6

7 1 3

6 1/3 1T1

T2

T3

T1 T2 T3


• Se construye la matriz normalizada del criterio COSTO, dividiendo cada término de la matriz de preferencias entre la suma de su columna:

1/14 3/31 1/25

1/2 21/31 18/25

3/7 7/31 6/25T1

T2

T3

T1 T2 T3

1 1/7 1/6

7 1 3

6 1/3 1T1

T2

T3

T1 T2 T3



• Se obtiene el vector de prioridad del criterio COSTO, promediando cada fila de la matriz normalizada:

1/14 3/31 1/25

1/2 21/31 18/25

3/7 7/31 6/25T1

T2

T3

T1 T2 T3

0.0694

0.6325

0.2981T1

T2

T3

Vector de prioridad del criterio COSTO



• Se sigue el mismo procedimiento para los demás criterios.• Criterio CONFIABILIDAD:

– T1 es muy fuertemente preferido a T2– T1 es igual a moderadamente preferido a T3– T2 es fuertemente preferido a T3

1 1/5 1/2

5 1 1/7

2 7 1T1

T2

T3

T1 T2 T3

Matriz de preferenciascon respecto del criterioCONFIABILIDAD:



• Se sigue el mismo procedimiento para el criterio CONFIABILIDAD:

1/8 1/41 7/23

5/8 5/41 2/23

1/4 35/41 14/23T1

T2

T3

T1 T2 T3

0.1512

0.2780

0.5708T1

T2

T3

Vector de prioridad del criterio CONFIABILIDAD



• Criterio DISPONIBILIDAD:– T1 está entre muy fuerte y extremadamente preferido a T2– T1 es igualmente preferido a T3– T3 está entre muy fuerte y extremadamente preferido a T2

1 8 1

1/8 1 1/8

1 8 1 T1

T2

T3

T1 T2 T3

Matriz de preferenciascon respecto del criterioDISPONIBILIDAD:



• Se sigue el mismo procedimiento para el criterio DISPONIBILIDAD:

8/17 8/17 8/17

1/17 1/17 1/17

8/17 8/17 8/17T1

T2

T3

T1 T2 T3

0.4706

0.0588

0.4706T1

T2

T3

Vector de prioridad del criterio DISPONIBILIDAD



• Se sigue el mismo procedimiento para los CRITERIOS.– El COSTO es muy fuertemente preferido a la CONFIABILIDAD– El COSTO es extremadamente preferido a la DISPONIBILIDAD– La CONFIABILIDAD es muy fuertemente preferida a la DISPONIBILIDAD

Matriz de preferencias de los CRITERIOS:

1 1/7 1/9

7 1 1/7

9 7 1Costo

Confiabilidad

Disponibilidad

Cost

o

Conf

i abi

li da d

Dis p

onib

i l ida d



• Se sigue el mismo procedimiento para los CRITERIOS:

0.0550

0.2162

0.7288

Vector de prioridad de los CRITERIOS

1/17 1/57 7/79

7/17 7/57 9/79

9/17 49/57 63/79Costo

Confiabilidad

Disponibilidad

Cost

o

Conf

i abi

li da d

Dis p

onib

i l ida d



• Finalmente, se forma una matriz con los vectores de prioridad de los tres criterios y se multiplica por el vector de prioridad de criterios:

.0550

.2162

.7288

Vector de prioridad de los TRANSPORTISTAS

.4706 .1512 .0694

.0588 .2780 .6325

.4706 .5708 .2981

Cos t

o

Con f

iabi

l idad

Disp

o ni b

il idad

T1

T2

T3

0.1092

0.5243

0.3665T1

T2

T3



GRACIAS

Departamento Nacional de PlaneaciónDirección de Inversiones y Finanzas Públicas

www.dnp.gov.coTeléfono: (1) 3815000 ext. 3300

http://www.dnp.gov.co/

Evaluación Multicriterio Departamento Nacional de Planeación

Documents

Transcript of Evaluación Multicriterio Departamento Nacional de Planeación