Post on 10-Feb-2018
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 1/18
BASES CONCEPTUALES Y METODOLÓGICASEN EL DISEÑO Y LA EVALUACIÓN
DE PROGRAMAS DE INTERVENCIÓNO TRATAMIENTOS PSICOLÓGICOS
Maite Garaigordobil LandazabalFacultad de Psicología
Universidad del País VascoE-mail: maite.garaigordobil@ehu.es
http://www.sc.ehu.es/garaigordobil
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 2/18
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 3/18
EFICAZ : CUANDO LOS OBJETIVOS ESTABLECIDOS HAN SIDOCONSEGUIDOS. META DEL PROGRAMA.EFECTIVO: CUANDO CON INDEPENDENCIA DE LOSOBJETIVOS ESTABLECIDOS, EL PROGRAMA HA CONSEGUIDOUNOS EFECTOS POSITIVOS.EFICIENCIA: RELACIÓN COSTES-BENEFICIOS.
JUICIOSVALORATIVOS
BASES CONCEPTUALES
DEFINICIÓN Y JUICIOS VALORATIVOS
INVESTIGACIÓN DEL MÉRITO, VALOR O ÉXITO DECONCRETOS TRATAMIENTOS, INTERVENCIONES OPROGRAMAS LLEVADOS A CABO CON LA FINALIDADDE PRODUCIR CAMBIOS COMPORTAMENTALES
INVESTIGACIÓN DE LOS RESULTADOS DE UNAINTERVENCIÓN
DEFINICIÓN
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 4/18
EVALUACIÓN
SUMATIVA
EVALUACIÓNFORMATIVA
MODELOS
Estima magnitud de los efectos del programa enfunción de las hipótesisFinalidad demostrativaEvaluador externo e independientePlanificación, evaluación, e implementaciónestructuradas desde el principio
LINEAL
Entender porqué se ha producido determinadoresultadoFinalidad explicativaEvaluador implementador del programaContinua interacción y modulación recíproca entreplanificación, implementación y evaluación
NO LINEAL
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 5/18
FASES Y TAREAS DEL PROCESO
FASE 1. DISEÑO DEL PROGRAMA DE INTERVENCIÓN
JUSTIFICACIÓN Y ANTECEDENTES DEL PROGRAMA
FUNDAMENTACIÓN TEÓRICO-EMPÍRICA DEL PROGRAMA
CARACTERÍSTICAS DEL PROGRAMA
OBJETIVOS DEL PROGRAMA
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 6/18
FASES Y TAREAS DEL PROCESO
CONFIGURACIÓN DEL PROGRAMA: MÓDULOS
FASE 1. DISEÑO DEL PROGRAMA DE INTERVENCIÓN
ACTIVIDADES O ACCIONES DEL PROGRAMA
FACTORES DE INFLUENCIA EN EL PROGRAMA
PROCEDIMIENTO PARA LA IMPLEMENTACIÓN DEL PROGRAMA
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 7/18
FASES Y TAREAS DEL PROCESO
IDENTIFICAR VARIABLES DEPENDIENTESINSTRUMENTOS DE EVALUACIÓN
FASE 2. DISEÑO DE LA EVALUACIÓN DEL PROGRAMA
FINALIDAD DE LA EVALUACIÓN Y FACTIBILIDAD
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 8/18
FASES Y TAREAS DEL PROCESO
SELECCIÓN DEL DISEÑO DE INVESTIGACIÓN
ELEGIR ENTRE LOS 2 MACROMODELOS
ELEGIR EL DISEÑO DE INVESTIGACIÓN:EXPERIMENTALES - NO EXPERIMENTALES
AMENAZAS A LA VALIDEZ INTERNA Y EXTERNA
FASE 2. DISEÑO DE LA EVALUACIÓN DEL PROGRAMA
CALENDARIO DE LA EVALUACIÓN
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 9/18
FASES Y TAREAS DEL PROCESO
IMPLEMENTACIÓN DEL PROGRAMA
FASE 3. IMPLEMENTACIÓN Y EVALUACIÓN DEL PROGRAMA
ANÁLISIS DE LOS DATOS
RECOGIDA DE DATOS PARA LA EVALUACIÓN
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 10/18
FASES Y TAREAS DEL PROCESO
FASE 4. ELABORACIÓN DEL INFORME DE LA EVALUACIÓN DEL PROGRAMA
PORTADA DEL INFORME
DISEÑO Y PROCEDIMIENTO DE LA INVESTIGACIÓN
RESUMEN
OBJETIVOS E HIPÓTESIS DEL ESTUDIO
PARTICIPANTES
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 11/18
DESCRIPCIÓN DEL PROGRAMA DE INTERVENCIÓN
METODOLOGÍA E INSTRUMENTOS DE EVALUACIÓN DEL PROGRAMA
RESULTADOS
CONCLUSIONES
RECOMENDACIONES
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 12/18
CUESTIONES METODOLÓGICAS
DISEÑOS DE INVESTIGACIÓN
DISEÑOS EXPERIMENTALES Y CUASI-EXPERIMENTALES
Diseños experimentales de caso únicoDiseños clásicos de grupos
DISEÑOS NO EXPERIMENTALES: DESCRIPCIÓN NATURALISTA
TIPOSDE
DISEÑO
La estructura que actúa como guía para facilitar laordenación de los datos desde su obtención,almacenamiento, y posterior tratamiento
En función de las características del programa
ELECCIÓNDISEÑO
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 13/18
PRETEST-POSTEST CON GRUPO DE CONTROL EQUIVALENTE
DISEÑOS CLÁSICOS DE GRUPOS
DISEÑO PRETEST-POSTEST CON GRUPO DE CONTROL NO EQUIVALENTE
DISEÑO POSTEST CON GRUPO DE CONTROL EQUIVALENTE
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 14/18
DISEÑO DE SERIES TEMPORALES CON GRUPO EXPERIMENTAL
DISEÑO DE SERIES TEMPORALES CON UN GRUPO DE CONTROLNO EQUIVALENTE
DISEÑO PRE-EXPERIMENTAL ANTES-DESPUÉS
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 15/18
INSTRUMENTOS DE EVALUACIÓNCARACTERÍSTICAS
Objetividad: Que los procedimientos de recogida de información esténlibres de los errores procedentes de la interpretación del evaluador
Estabilidad: Que la medida no presente excesivas fluctuaciones debidas asu propia naturaleza, de forma que al juzgar los cambios debidos al
programa éstos no puedan confundirse con fluctuaciones en el tiempodel propio instrumento
Exactitud, Precisión o Validez: Que la medida elegida refleje lo que sepretende juzgar, es decir, que las técnicas utilizadas sean una medida,lo más precisa posible, de lo que se pretende dar cuenta
Sensibilidad al cambio: Que el procedimiento elegido sea sensible ante elprograma de acción propuesto.
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 16/18
CUALITATIVOS CUANTITATIVOS Entrevista abierta.Observación no estructurada: diarios....Técnicas sociométricas.Grupos de discusión.Cuestionarios o encuestas abiertas.Técnicas etnográficas: entrevistacallejera… AutobiografíaAnálisis históricos: a través de distintostipos de datos como periódicos oinformes con los que se pretendeestablecer la historia pasada de unevento.Método Delphi: expertos a los que seenvían los cuestionarios y los resultadosde los mismos…
Entrevista estructurada.Autoinformes: el sujeto se valora a sí mismoCuestionarios: medidas de autoinforme sobrehabilidades, nivel de satisfacción, logrosobtenidos con el programa desde la percepciónsubjetiva del cambio… Indicadores estadísticos y sociales: número detoxicómanos, tasas de empleo...Observación estructurada y/o sistemática:frecuencia de conductas observables...Archivos: calificaciones, hojas de servicio...Medidas de rastro y erosión: número decigarros, botellas… Escalas de apreciación: jueces (padres oprofesores) califican al sujeto en una escala deestimación en relación a alguna conducta… Pruebas de ejecución y de inteligencia: piezasinsertadas, número de aciertos, tiempo deejecución...Pruebas de rendimiento: exámenes...
INSTRUMENTOS DE EVALUACIÓNTIPOS DE INSTRUMENTOS
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 17/18
PROBLEMAS METODOLÓGICOS DEL PROGRAMA
DEFECTOS DE PLANTEAMIENTO
Programas mal definidos Vaguedad en los objetivos
Fines no realistas
Objetivos contrapuestos
Falta de claridad en el enunciado de las tareas requeridas
Inexistencia de organigrama relativo a la secuenciación
Falta de calendario
Imprecisión respecto al estudio empírico
IRREGULARIDADES EN LA IMPLEMENTACIÓN
Falta de formación
Incorrecta cumplimentación
7/22/2019 1. Bases Conceptuales y Metodologicas Evaluacion SINTESIS
http://slidepdf.com/reader/full/1-bases-conceptuales-y-metodologicas-evaluacion-sintesis 18/18
ANALISIS DE DATOS
ANÁLISIS EXPLORATORIO DE LOS DATOS: ESTADÍSTICOSDESCRIPTIVOS: FRECUENCIA, MEDIA, MEDIANA, MODA, DESVIACIÓNTÍPICA...
ANÁLISIS INFERENCIAL PRIMARIO: UNIVARIADO O MULTIVARIADO(ANOVA, MANOVA, ANCOVA, MANCOVA, REGRESIÓN MÚLTIPLE...)
REANÁLISIS COMPARATIVO
INTERPRETACIÓN DE LOS RESULTADOS