Gerardo Antonio Muñeton LópezX Semestre Medicina

Universidad Nacional de Colombia

VALIDACION DE ESCALAS DE MEDICION EN SALUD

Validación escalas de medición en salud

• En salud se presenta la necesidad de realizar mediciones objetivas sobre algún fenómeno para poder estudiar las variaciones que este presenta frente a situaciones que puedan modificarlo.

• En numerosas ocasiones esto se realiza mediante la medición de una sola variable.

• Existen fenómenos que no puede medirse directamente.

• Dependen de varios componentes, y su medición deberá realizarse evaluando diferentes variables que los representen. Calidad de vida.. inteligencia

Validación de escalas de medición en salud

• Para garantizar que estas variables representen lo que se plantea medir, deben ser seleccionadas cuidadosamente, y sometidas a un riguroso proceso de validación.

Errores

Cambio de evaluador

Dificultades comprensión

Diferencias interpretación

otros•Medición no representa el fenómeno a medir•Resultados debido a errores

La validación buscara llevar estos errores al mínimo, garantizando que todos los resultados de la medición sean reflejo de la realidad del fenómeno sin importar quien lo realice o donde.

Proceso de la validación

• Para que una escala este validada para realizar mediciones en salud debe cumplir con los siguientes requisitos o seguir los siguientes pasos.

• Elección o creación de la escala• Traducción adecuada• Pruebas preliminares• Pruebas de Validez• Pruebas de confiabilidad• Demostrar utilidad.

Selección de la escala

• Elección de la escala

– La mejor escala disponible en evaluación del tema

– Amplio uso

Traducción de la escala

• Conformar comité de revisión– Dos personas expertas en el tema sobre el que se va a

trabajar– Dos personas con dominio del idioma original de la escala– Dos personas que presenten o hayan presentado el

fenómeno que desea ser medido

– Prever dificultades debido a diferencias culturales o geográficas.• Jugar hockey sobre hielo• Metro

– Realizar sugerencias y buscar traduccion.

• Traductores– Dominar ambos idiomas– Estar inmersos en la cultura en la cual va a ser

validada la escala– Dos con idioma primario del lugar donde se

pretende validar la escala– Mínimo uno cuyo idioma primario sea el original de

la escala a validar– Conocimientos básicos sobre medición en salud– Entrenamiento en construcción de medición.

Traducción de la escala

• Traducción directa

– Realiza dos traducciones por traductores diferentes – Consensuar una versión

• Traducción inversa– Realizarse por traductor con idioma primario igual al de la

escala• Revisión

– Comité de revisión determinara si hay diferencias entre las dos versiones

– Realizara una versión para iniciar las pruebas preliminares.

Traducción de la escala

Creación de la escala

Estamos ante algo que creemos que realmente existe y que queremos medir.

Lo que queremos medir es un fenómeno complejo, que no es observable directamente y que esta compuesto por diferentes conceptos.

Se descompone lo que queremos medir en grupos de síntomas o manifestaciones que siempre están presentes. Esos grupos se llaman Factores o Dominios

Se desarrolla una estrategia para medir los Factores o Dominios, usualmente mediante la construcción de ítem

• La versión definida se aplicara a un grupo de 10 a 15 personas por parte de 2 a 3 evaluadores– Evaluación preliminar referente a items

– Evaluacion preeliminar de la utilidad

Pruebas preliminares

• Evaluación referente a items

– Grado de comprensión

– Ambigüedad

– Frecuencia de respuesta.. Exclusión de variables

– Restricción de rango de respuesta… exclusión de opción

Pruebas preliminares

Corrección

• Pruebas preliminares en relación con utilidad

– Tiempo de diligenciamiento requerido

– Necesidad de entrenamiento

– Características de la forma.

– Facilidad para calificar escala

Pruebas preliminares

Pruebas de validezLa realidad existente está adecuadamente representada por la escala. En otras palabras, la escala parece medir lo que debe medir.

La escala refleja la estructura de Dominios o de Factores en los cuales fue dividida la realidad que se va a medir. En otras palabras, la escala no deja Factores sin medir, ni mide factores que no corresponden a la realidad.

La escala funciona de manera parecida a otros instrumentos para medir esa realidad que ya han sido “certificados”.

Validez de apariencia o contenido

Validez de constructo

Validez de criterio

Pruebas de validez

• Validez de apariencia o contenido

•Se conforman dos grupos uno de expertos, y otro de personas a ser evaluadas.

•Se llega a un consenso sobre si la escala parece medir lo que se desea medir, y si los items usados son pertinentes.

Pruebas de validez• Validez de constructo

Se realiza mediante análisis factorialEste proporcionara los datos necesarios para determinar cuantos y cuales factores son los que de verdad contribuyen a la medición, y cuales items contribuyen a cada factor y a la escala.

Disminuye el numero de factores y el numero de items para realizar la medición. Aquellos que no demuestren ser útiles son excluidos.

Cumple con el objetivo de la validez de constructo que es no dejar Factores sin medir, ni medir factores que no correspondan a la realidad.

• Análisis Factorial

Pruebas de validez

• Análisis Factorial

Creación de una matriz capaz de explicar la variabilidad conjunta de todas las variables

Extracción

Rotación

Estimación de las puntuaciones

Saturación

Comunalidad

# de factores

•Eliminar Items•Determinar factores

Pruebas de validez

• Análisis FactorialCOMUNALIDAD resultado es la proporción de la variancia de un item que puede sr explicado por el modelo factorial obtenido

AUTOVALOREScantidad de la varianza total que esta explicada por cada factor.

SATURACIONEs la correlación entre cada uno de las variables y los factores

ROTACION

Pruebas de validez• Validez de criterio

La escala funciona de manera similar a otras escalas o estrategias que midan el mismo fenómeno.

Si existe alguna escala ya validada debe demostrarse relación del nuevo instrumento con el ya validado mediante correlación de pearson. El resultado debe aproximarse a 1.

Si no existe otro instrumento ya validado, se puede realizar comparación con métodos de apreciación clínica subjetiva, como impresión general de salud según expertos

Otra estrategia es validar dos escalas de manera paralela y realizar el análisis de correlaciones.

Cuando la realidad que se está midiendo cambia, la escala puede detectar ese cambio?

Sensibilidad al cambio

Pruebas de validez

Se evalúa tomando una medición inicial y comparándola con el resultado de otra medido en una circunstancia en la que se supone que ha cambiado

Medir calidad de vida en personas enfermas, y en personas que sanaron.

Se mide con un método llamado effect size

Mayor a 0.8, no menor a 0.5

Pruebas de confiabilidad

La escala funciona bien bajo diferentes condiciones?

cuando es aplicada por distintas personas.

cuando se aplica en diferentes oportunidades mismo evaluador

Confiabilidad test-re test

Confiabilidad interobservador

Los items de la escala se correlacionan entre ellos, con sus factores y con los resultados de la escala.

Consistencia Interna

Pruebas de confiabilidad• Consistencia Interna

Cuando los items de una escala se correlacionan entre ellos, con sus factores y con los resultados de la escala se dice que hay consistencia interna, esto sirve para darle estabilidad a la escala y evitar que cambie con el numero de mediciones y no por verdaderas modificaciones del fenomeno a estudio

Se demuestra mediante el coeficiente de cronbach

Se recomiendan valores entre 0.7 y 0.9.

Valores mas bajos demuestran que los items miden fenómenos diferentes y no uno definido

Valores mayores a 0.9 se generan cuando la escala es muy homogénea- pueden existir factores o items redundantes

Pruebas de confiabilidad

• Confiabilidad test-re test

Se realiza con el fin de garantizar que cuando el fenómeno se ha mantenido estable los resultados de la escala no varían.

Deben realizarse varias mediciones en condiciones donde creamos que no ha variado el fenómeno. Por ejemplo calidad de vida hoy y mañana.

El análisis se realiza mediante el coeficiente de correlación intraclase CCI

Arroja un valor que significa el porcentaje de la varianza de los resultados que es explicado solo por la diferencia entre los sujetos. Si es 0.9 ,el 90% de los cambios fue debido a variabilidad entre los sujetos evaluados, y no por otros factores como azar, o cambio de tiempo

Se interpreta como adecuado valor de CCI mayor a 0.8

Pruebas de confiabilidad

• Confiabilidad interobservador

Se evalúa realizando la medición en la misma persona por observadores diferentes, cuando se garantiza que el fenómeno no ha cambiado, por ejemplo el mismo día. Esto debe hacerse en mínimo 15 pacientes.

Se estudia el porcentaje de concordancia entre los observadores

Coeficiente de kappa

Se considera muy bueno a partir de 0.8

Determinación de su utilidad

Debe informarse tiempo de aplicación

Entrenamiento del personal que la desarrollara

Condiciones previas en los pacientes

Entrenamiento para interpretar y calcular resultados finales

Lectura critica estudios de validación

• Item • ¿De dónde vienen?: • • De escalas previas. • • De observación clínica. • • De opinión de expertos. • • De reporte de pacientes. • • De hallazgos de investigación. • • De supuestos teóricos.

• Se midió en ellos: • • Frecuencia de respuesta • • Restricción en el rango • • Comprensión • • Ambigüedad • • Carga afectiva

Lectura critica estudios de validación

• Validez: • • - ¿Tiene validez de apariencia? • - ¿Hay evidencia de la validez de contenido? • - ¿Hay evidencia de la validez de constructo? • - ¿Se evaluó validez de criterio? ¿De manera

concurrente? ¿De manera pre-dictiva? • - ¿En qué grupos se evaluó la validez?

Lectura critica estudios de validación

• Confiabilidad: • • – ¿Se evaluó consistencia interna? si• – ¿Tiene buena confiabilidad test-retest? • – ¿Y confiabilidad interevaluador? • – ¿En qué grupos se midió confiabilidad? • – ¿Cómo se calculó la confiabilidad?

Lectura critica estudios de validación

• Utilidad: • – ¿Se puede aplicar en un tiempo razonable? • – ¿Qué tanto entrenamiento se requiere? • – ¿Es fácil de calificar?

Lectura critica estudios de validación

Referencias

• Validación escala medición en salud. Ricardo Sánchez, Jairo Echeverry Rev. Salud pública. 6 (3): 302-318, 2004

• Medición en salud: Algunasconsideraciones metodológicasAna m. Alarcón ma, Sergio muñoz Nb.Rev Méd Chile 2008; 136: 125-130