Taller de prácticas basadas en la evidencia en la psicología industrial organizacional

Carlos A. Andújar Rojas, Ph.D.

1

Objetivos:

• Al final del taller, los participantes podrán:Familiarizarse con el término de prácticas basadas en la

evidenciaDiferenciar entre lo que son las prácticas basadas en la

evidencia y las creencias convencionales y no informadas sobre el término y sus aplicaciones

Conocer formas simples de recoger información para evidenciar nuestras prácticas

Identificar las fuentes investigativas que fortalecen nuestras prácticas

Distinguir entre las prácticas basadas en la evidencia en la psicología industrial organizacional y otras disciplinas

2

Agenda:

• Bienvenida e introducción• Lo que sabemos y lo que no de las PBE• Practicas basadas en la evidencia en perspectiva• Estrategias para evidenciar las prácticas en la

psicología industrial organizacional• Resumen, evaluación y cierre

3

Prácticas basadas en la evidencia

• Se ha popularizado en la sociedad norteamericana con el propósito de que profesiones como la medicina, psicología, educación, política pública y arquitectura.

• El zeitgeist es requerir que los y las profesionales basen sus prácticas en evidencias en la medidad que sea posible.

• La APA desarrolló un “taskforce”para definir el concepto.

4

Prácticas psicológicas basadas en la evidencia (PPBE)• Quehacer del/de la psicólogo/a en cualquiera de

sus especialidades que procure la integración de los mejores hallazgos investigativos disponibles en su práctica psicológica al peritaje profesional en el contacto de las características del cliente, sus preferencias y su cultura.

• Esta integración debe asegurar que los resultados de las investigaciones consultadas respondan a las características, necesidades y contexto sociocultural de nuestra clientela.

5

Evidencia

• Resultados de todo esfuerzo investigativo cualitativo, cuantitativo o la combinación de ambos, que le provea al profesional de la psicología una base documentada en la cual fundamentar su práctica en un momento determinado.

6

Algunos tipos de evidencia

• Estudios empíricos• Estudios de casos• Análisis de contenido• Entrevistas• Historias de vida• Benchmark

7

Confusiones

• Prácticas basadas en la evidencia• Tratamientos basados en la evidencias• Teorías basadas en la evidencia• Gerencia basada en la evidencia

8

Prácticas en las organizaciones

• Se implantan muchas modas de forma acrítica.• Se percibe que la investigación no tiene un uso

práctico.• Se parte de concepto de “one size fit’s all”• Se cree en la percepción de validez generalizada.• No se toma en consideración la evaluación de

resultados.• Se usa la experiencia de forma acrítica.

9

Retos de las prácticas basadas en la evidencia• ¿Cómo se usará la evidencia?• ¿Cuál es la mejor evidencia disponible?• Se usará el método científico o otros de carácter

cualitativo o ambos?• ¿Cómo la evidencia recopilada ayuda a darle

dirección a la intervención?• ¿Cómo los elementos de validez interna y externa se

relacionan con la evidencia y la intervención?• ¿Debe existir una jerarquía de evidencias que

sostengan las intervenciones organizacionales?• ¿Cómo sintetizar las evidencias?

10

Retos de las prácticas basadas en la evidencia (Cont.)• ¿Cuán representativos son los clientes de las

intervenciones?• ¿Cómo afectan las característic as de las personas

y de las organizaciones tanto en la recopilación de la evidencia, como a la intervención?

• ¿Cómo las diversidad cultural impacta la recopilación de la evidencia y las intervenciones?

11

Retos de las prácticas basadas en la evidencia (Cont.)• ¿Cuán amplias son las intervenciones y cómo se

relacionan con la efectividad?• ¿Cómo recoger evidencias en intervenciones a

gran escala?• ¿Cuál es la mejor evidencia en intervenciones a

gran escala?

12

Retos de las prácticas basadas en la evidencia (Cont.)• ¿Cuánto ayudan los resultados de los estudios en

la práctica real?• ¿Cómo la evidencia me ayuda a maximizar la

eficiencia y la eficacia de las intervenciones organizacionales?

• ¿Dónde ubicar la investigación básica en las prácticas basadas en la evidencia?

• ¿Cómo maximizar el uso de la investigación aplicada?

13

Recomendaciones para las prácticas basadas en la evidencia en el ámbito gerencial• Enfóquese en principios donde la ciencia es clara.• Desarrolle conciencia sobre las decisiones que se

toman en la práctica profesional.• Diagnostique factores subyacentes relacionados a las

decisiones.• Contextualice el conocimiento relacionado al uso de

la evidencia.• Desarrolle mecanismos de apoyo para las decisiones

usando las prácticas basadas en la evidencia.• Prepárese para acceder a nueva evidencia.

14

Algunas investigaciones• Aarons y Sawitzky (2006) estuvieron las actitudes

de los proveedores de salud mental hace adoptar prácticas basadas en la evidencia y su relación con el contexto organizacional.

• Este estudio evaluó la asociación de cultura y clima organizacional, actitudes hacia adoptar prácticas basadas en la evidencia.

• Los participantes fueron 300 servidores públicos del campo de la salud provenientes de 49 programas para jóvenes y familias.

15

Algunas investigaciones (Cont.)• Cont.• Se llevaron a cabo análisis de correlación y regresión

jerárquica controlando por la características personales.

• Se encontró una asociación entre cultura constructiva y actitudes positivas hacia las prácticas basadas en la evidencia y pobres climas de trabajo con intenciones de descarrilar las prácticas basadas en la evidencia.

• Las organizaciones de cuidado de salud se pueden beneficiar de cómo el clima y la cultura afecta las actitudes hacia el cambio en las prácticas de trabajo.

16

Algunas investigaciones (Cont.)• Gerrish y Clayton (2004) examinaron los factores que

ayudan a lograr prácticas basadas en evidencia.• Presenta un estudio llevado a cabo un hospital de

Inglaterra a través de un periodo de cinco años.• Se utilizó una muestra de 330 enfermeras clínicas,

donde se les administró un cuestionario que les pedía que informara sobre sus prácticas, barreras percibidas para acceder a la información sobre las prácticas basadas en la evidencia, efectuar el cambio en la práctica y la autoevaluación de las destrezas que se necesitan para aplicar las prácticas basadas en la evidencia.

17

Algunas investigaciones (Cont.)• Cont.• Los resultados señalan que la mayor parte de las

prácticas se fundamentan en la experiencia a través de su interacción con pares, médicos y pacientes.

• Se valían más de informes y procedimientos operacionales que de estudios o investigaciones.

• Enumeraron la falta de recursos, tiempo y autoridad de superiores para cambiar las prácticas y sustituidas por otras basadas en evidencia nueva.

18

Algunas investigaciones (Cont.)

• Cont.• Las organizaciones de salud necesitan considerar

múltiples estrategias para facilitar y promover las prácticas basadas en evidencia. Hace falta el apoyo gerencial, la facilitación y una cultura receptiva a estos cambios.

19

Estudios de casos• El estudio de caso puede ser una herramienta

cualitativa muy útil para demostrar efectividad y eficiencia.

• Permite también ser parte de la evidencia a considerar dentro una intervención organizacional.

• Lo importante los estudios de caso es que los mismos se lleve a cabo con el rigor adecuado y que se utilicen múltiples estrategias para validar la información.

20

Hoja de análisis de casos

• Problemas o áreas de oportunidad▫ Macro▫ Micro

• Causas• Alternativas• Recomendaciones

21

Caso 1: Validar inferencias escala de afectividad positiva• Análisis de reactivos

▫ Índices de discriminación de .30 o más• Confiabilidad de consistencia interna

▫ alfa de Cronbach▫ Indice igual o mayor a .70

• Análisis de factores (técnica de estimación de máxima verosimilitud)▫ Valor eigen igual o mayor de 1.00▫ Factores de carga inicial de .30 o más

22

Midiendo la eficacia

• Eficacia. Es el criterio institucional que revela la capacidad administrativa para alcanzar las metas o resultados propuestos (la eficacia administrativa se ocupa esencialmente del logro de los objetivos educativos)

23

Ejemplos

• Hemos reducido en un 70% las quejas de nuestros clientes

• Los gastos operacionales han sido reducidos en un 10%

• Las ventas aumentaron un 30 por ciento

24

Medición de la eficacia• Caso 2: Estrés en Pharmacorp• Pharmacorp desea llevar a cabo un estudio piloto de un

programa de manejo del estrés para los empleados.• Debido a los altos costos de operación, la organización

quiere ver si este taller ayudaría a que todos los empleados disminuyeran los niveles de estrés en su trabajo.

• El año anterior se hizo una encuesta donde se encontró que el promedio de estrés de la población era 60.

• Luego del taller, se administró una escala para medir estrés, donde el promedio de estrés de los participantes fue de 49.

25

Solución

• Llevar a cabo una prueba t para un grupo• Se busca ver si existen diferencias

estadísticamente significativas en el promedio de la muestra y el promedio de la población

26

Caso 3: Evaluando el impacto antes y después de un taller de toma de decisiones• Secure Inc. ha enfrentado serias dificultades debido a

que su personal de gerencia y supervisión ha estado tomando decisiones de manera errática y desacertada.

• Usted ha propuesto un adiestramiento que tiene como objetivo aprender un modelo estructurado de toma de decisiones.

• Se administró al grupo una prueba de conocimientos y destrezas en la toma de decisiones. Llevo a cabo un adiestramiento de un día y al final de éste, le administró la misma prueba.

27

Solución

• Prueba t para medidas dependientes• Busca evaluar si existen diferencias

estadísticamente significativas en los promedios de ambas medidas como resultado de una intervención organizacional

28

Caso 3: Mejorando el servicio al cliente• Salesmart es una empresa que vende productos al detal

que ha sido muy exitosa en las pasadas décadas.• En los últimos años, las ventas han bajado gracias a los

bajos precios de la competencia y a las constantes quejas de sus clientes.

• Le han pedido que haga un taller de servicio al cliente para todos los empleados, pero quieren que el mismo sea piloteado antes de ofrecércelo a todos los empleados.

• Se seleccionaron dos grupos de 15 personas cada uno: uno tomó el taller de servicio al cliente y el otro una charla de beneficios marginales.

• Ambos grupos tomaron una escala de servicio al cliente luego de cada actividad.

29

Solución

• Hacer una prueba t para grupos independientes.• Se busca saber si existen diferencias

estadísticamente significativas en las puntuaciones promedios de ambos grupos partiendo de la premisa de que hubo cambios en conductas y actitudes a través del taller de servicio al cliente.

30

Eficiencia y retorno de inversión

• Eficiencia. Es el criterio económico que revela la capacidad administrativa de producir el máximo de resultados con el mínimo de recursos, energía y tiempo.

• Retorno de la inversión. Es la medida en dólares y centavos, que se obtiene luego de un tiempo de haber hecho una determinada inversión.

31

Eficiencia

• Caso 4: Horas de adiestramiento y productividad• Sigma es una empresa de servicios y asesoría en

ingeniería.• Ellos quieren saber si existe una relación entre las

horas de adiestramiento que invierten en sus empleados y la productividad en dólares generada en los proyectos.

32

Solución

• Regresión simple• Nos permite observar el cambio en dólares

cuando las horas de adiestramiento cambian una unidad ▫ Y=a+b*X▫ Y=Resultado de regresión▫ a = Intercepto = 0▫ b = Pendiente = coeficiente de regresión▫ X = Variable independiente

33

Validez de criterio económico

• Es la validez predictiva de un conjunto de pruebas con resultados económicos.

• Se busca la predicción a largo plazo con un criterio cuantitativo tal como productividad medida en dólares

• Nos ayuda a determinar quiénes son los empleados más productivos.

34

Caso 5: validez predictiva de criterio económico• La empresa Vendemax usa en la selección de sus

vendedores instrumentos para medir inteligencia, personalidad, actitudes hacia el trabajo y una entrevista estructurada.

• La gerencia quiere que los resultados de estas pruebas sean correlacionados con las ventas en dólares que hacen sus empleados.

35

Solución

• Regresión múltiple• Nos permite observar el cambio en dólares

cuando las puntuaciones de los instrumentos cambian una unidad ▫ Y=a+b*X1, X2,X3,X…▫ Y=Resultado de regresión▫ a = Intercepto = 0▫ b = Pendiente = coeficiente de regresión▫ X = Variables independientes

36

Estrategias para evaluar los resultados de un adiestramiento en términos financieros• Análisis de utilidad. Es una técnica estadística que

permite analizar los resultados de un adiestramiento en términos financieros.

• Fórmula:▫ ∆U=T x N x dt x DSy-N x C▫ Donde:▫ ∆U= Resultado del adiestramiento en dólares▫ T= Número de años en que el taller ha afectado el

desempeño▫ N= Número de personas adiestradas▫ dt= La verdadera diferencia en el desempeño entre el grupo

adiestrado y el que no se ha adiestrado en puntuaciones z▫ C= Costo del adiestramiento de cada persona

37

Fórmula para determinar el tamaño del efecto (dt)• dt = Xe – Xc SD√ryyDonde:• Xe= Promedio del desempeño de los empleados

adiestrados• Xc= Promedio del desempeño de los empleados

no adiestrados• SD = Desviación estándar del desempeño del

grupo no adiestrado• ryy= Confiabilidad de la medida de desempeño

38

Para expresar el efecto del desempeño en términos porcentuales• % de cambio en X = dt x 100 x SD pre-test

promedio pre-test

39

Caso 6: Estimando el retorno de inversión de un programa de destrezas de supervisión• T= 2 años• N = 100• dt = .31• SD = $10,000• C = $500• ∆U = 2 x 100 x .31 x $10,000 – (100) ($500) = 200 x .31 x $10,000 - $50,000 = 62 x $10,000 - $50,000

= $620,000 - $50,000= $570,000

40

Estimando retorno de inversión…

• El ROI del taller en dos años es de $570,000• Haciendo un ajuste de descuento de 15%, como

sugieren Mathieu y Leonard (1987) se convierte en $423,000

• Se deben de considerar los impuestos

41