ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©)...

16
ANÁLISIS DE CONCORDANCIA ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J Gómez Jiménez J , Ferrando JB, Santos G, , Ferrando JB, Santos G, Magallón J, Prat J, Albert E. Magallón J, Prat J, Albert E. Servei d’Urgències. Hospital Nostra Senyora Servei d’Urgències. Hospital Nostra Senyora de Meritxell. Servei Andorrà d’Atenció de Meritxell. Servei Andorrà d’Atenció Sanitària (SAAS). Principat d’Andorra. Sanitària (SAAS). Principat d’Andorra.

Transcript of ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©)...

Page 1: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

ANÁLISIS DE ANÁLISIS DE CONCORDANCIA DE LA CONCORDANCIA DE LA NUEVA VERSIÓN DEL NUEVA VERSIÓN DEL

PROGRAMA DE AYUDA AL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©)TRIAJE (web_e-PAT v3.0©)

Gómez Jiménez JGómez Jiménez J, Ferrando JB, Santos G, , Ferrando JB, Santos G, Magallón J, Prat J, Albert E.Magallón J, Prat J, Albert E.

Servei d’Urgències. Hospital Nostra Senyora de Servei d’Urgències. Hospital Nostra Senyora de Meritxell. Servei Andorrà d’Atenció Sanitària (SAAS). Meritxell. Servei Andorrà d’Atenció Sanitària (SAAS).

Principat d’Andorra.Principat d’Andorra.

Page 2: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

IntroducciónIntroducción

• La Escala canadiense de triaje y urgencia La Escala canadiense de triaje y urgencia para los servicios de urgencias (CTAS), para los servicios de urgencias (CTAS), presenta problemas de concordancia presenta problemas de concordancia interprofesional e interhospitalaria cuando interprofesional e interhospitalaria cuando se aplica sobre pacientes en el triaje.se aplica sobre pacientes en el triaje.

• Es fundamental disponer de un instrumento Es fundamental disponer de un instrumento informático que homogenice la utilización informático que homogenice la utilización práctica de la CTAS.práctica de la CTAS. M. Bullart. SAEM 2003M. Bullart. SAEM 2003

Responsable del grupo de Responsable del grupo de trabajo de la CAEP para la trabajo de la CAEP para la informatización de la CTASinformatización de la CTAS

Page 3: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

IntroducciónIntroducción

•La concordancia modal exacta de la La concordancia modal exacta de la CTAS, sin soporte informático, se sitúa CTAS, sin soporte informático, se sitúa por debajo del 70% y con soporte por debajo del 70% y con soporte informático, se sitúa en el 73,7%.informático, se sitúa en el 73,7%. (Can J Emerg Med 2003; 5 (5): 323-(Can J Emerg Med 2003; 5 (5): 323-9).9). •La concordancia modal exacta del PAT La concordancia modal exacta del PAT v2.0 se sitúa en el 85%.v2.0 se sitúa en el 85%. (Emergencias 2003; 15 (6): 339-(Emergencias 2003; 15 (6): 339-344)344)

Page 4: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

IntroduccióIntroducció• La disponibilidad de un programa informático La disponibilidad de un programa informático

fiable y validado de ayuda al triaje, es una fiable y validado de ayuda al triaje, es una importante aportación del Modelo andorrano de importante aportación del Modelo andorrano de triaje (MAT) a las modernas escalas de triaje de 5 triaje (MAT) a las modernas escalas de triaje de 5 niveles.niveles.

• El análisis de concordancia de la versión 2.0 del El análisis de concordancia de la versión 2.0 del Programa de Ayuda al Triaje (PAT v2.0) permitió Programa de Ayuda al Triaje (PAT v2.0) permitió realizar una adaptación profunda de su escala y realizar una adaptación profunda de su escala y su trascripción a la nueva versión (web_e-PAT su trascripción a la nueva versión (web_e-PAT v3.0), incorporando una clasificación de motivos v3.0), incorporando una clasificación de motivos de consulta codificados (n = 575), entre otros de consulta codificados (n = 575), entre otros cambios sustantivos. cambios sustantivos.

Page 5: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

ObjetivosObjetivos

• Evaluar la capacidad del web_e-PAT v3.0 Evaluar la capacidad del web_e-PAT v3.0 para vincular correctamente los motivos de para vincular correctamente los motivos de consulta seleccionados por un grupo de consulta seleccionados por un grupo de profesionales de urgencias con los niveles profesionales de urgencias con los niveles de triaje.de triaje.

• Evaluar el grado de concordancia de los Evaluar el grado de concordancia de los resultados obtenidos con el web_e-PAT resultados obtenidos con el web_e-PAT v3.0, como medida de la fiabilidad del v3.0, como medida de la fiabilidad del programa informático. programa informático.

Page 6: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

MetodologíaMetodología

• Profesionales Profesionales – 12 médicos12 médicos– 20 diplomados universitarios en 20 diplomados universitarios en

enfermería (DUE)enfermería (DUE)

• Escenarios clínicos = 75 (niños y Escenarios clínicos = 75 (niños y adultos)adultos)– Motivo de la visitaMotivo de la visita– Constates y/o signos vitalesConstates y/o signos vitales– Nivel de dolor Nivel de dolor – Otra información clínica relevante Otra información clínica relevante

Page 7: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

MetodologíaMetodología

• Fase 1: Se realizó un triaje experto con el web_e-PAT Fase 1: Se realizó un triaje experto con el web_e-PAT v3.0, para confirmar que la clasificación de motivos v3.0, para confirmar que la clasificación de motivos de consulta contemplaba, al menos un motivo de de consulta contemplaba, al menos un motivo de consulta posible para cada uno de los escenarios consulta posible para cada uno de los escenarios clínicos. clínicos.

• Se solicitó a los observadores que seleccionasen un Se solicitó a los observadores que seleccionasen un motivo clínico de consulta entre los motivos motivo clínico de consulta entre los motivos codificados del web_e-PAT v3.0, considerando el codificados del web_e-PAT v3.0, considerando el motivo preferente o modal aquel que fue motivo preferente o modal aquel que fue seleccionado con más frecuencia en cada escenario. seleccionado con más frecuencia en cada escenario. Todos los motivos de consulta diferentes al Todos los motivos de consulta diferentes al preferente o modal fueron considerados preferente o modal fueron considerados discordantes.discordantes.

Page 8: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

MetodologíaMetodología

• Fase 2: CFase 2: Cada escenario clínico fue clasificado con el ada escenario clínico fue clasificado con el web_e-PAT v3.0, utilizando todos los códigos web_e-PAT v3.0, utilizando todos los códigos sintomáticos de entrada seleccionados, por los sintomáticos de entrada seleccionados, por los diferentes observadores, para cada escenario clínico. diferentes observadores, para cada escenario clínico.

• El estudio de concordancia se realizó con el El estudio de concordancia se realizó con el programa estadístico PC-Agree 2.0, cedido por programa estadístico PC-Agree 2.0, cedido por Stephen Walter (Universidad McMaster, Hamilton, Stephen Walter (Universidad McMaster, Hamilton, Ontario, Canadá) (Ann Emerg Med 1999; 34: 155-Ontario, Canadá) (Ann Emerg Med 1999; 34: 155-159). 159).

Page 9: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

ResultadosResultados• Motivos de consulta analizados: n = 2400 Motivos de consulta analizados: n = 2400

(75 escenarios x 32 observadores)(75 escenarios x 32 observadores)

63,25%

36,75%

0%

20%

40%

60%

80%

100%

%

Concordantes Discordantes

Concordancia de motivos de consulta

Discordancia = 36,75% (IC 95% 34,82%-Discordancia = 36,75% (IC 95% 34,82%-38,72%)38,72%)

Page 10: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

Nivel escogido Nivel escogido por el segundo observador. Probabilidad de concordancia por el primer observador I II III IV VI .99 .01 .00 .00 .00II .00 .96 .04 .00 .00III .00 .05 .90 .04 .01IV .00 .00 .04 .92 .04V .00 .01 .04 .18 .77x Estos valores representan las probabilidades de que el segundo observador seleccionadoal azar esté de acuerdo con el nivel escogido por el primer observador (CME)y Estos valores representan las probabilidades de que el segundo observador seleccionadoal azar coincida con un margen de discordancia de un nivel con el primer observador (CM1)

Distribución de la asignación de niveles (asumiendo 2 observadores elegidos al azar)

ResultadosResultados• Todos:Todos:

– k = 0.90 (IC 95% 0,89-0,91)k = 0.90 (IC 95% 0,89-0,91)– CME = 93%CME = 93%– CM1 = 99%CM1 = 99%

Page 11: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

ResultadosResultados• Médicos:Médicos:

– k = 0.88 (IC 95% 0,87-0,89)k = 0.88 (IC 95% 0,87-0,89)– CME = 91%CME = 91%– CM1 = 99%CM1 = 99%

Nivel escogido Nivel escogido por el segundo observador. Probabilidad de concordancia por el primer observador I II III IV VI .98 .02 .00 .00 .00II .00 .95 .05 .00 .00III .00 .05 .89 .05 .01IV .00 .00 .05 .90 .05V .00 .01 .03 .20 .75x Estos valores representan las probabilidades de que el segundo observador seleccionadoal azar esté de acuerdo con el nivel escogido por el primer observador (CME)y Estos valores representan las probabilidades de que el segundo observador seleccionadoal azar coincida con un margen de discordancia de un nivel con el primer observador (CM1)

Distribución de la asignación de niveles (asumiendo 2 observadores elegidos al azar)

NivelNivel KK

II 0,980,98

IIII 0,920,92

IIIIII 0,840,84

IVIV 0,870,87

VV 0,740,74

Page 12: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

ResultadosResultados• Enfermería:Enfermería:

– k = 0.92 (IC 95% 0,91-0,93)k = 0.92 (IC 95% 0,91-0,93)– CME = 94%CME = 94%– CM1 = 99%CM1 = 99%

Nivel escogido Nivel escogido por el segundo observador. Probabilidad de concordancia por el primer observador I II III IV VI .99 .01 .00 .00 .00II .00 .97 .03 .00 .00III .00 .04 .92 .03 .01IV .00 .00 .04 .93 .03V .00 .00 .05 .15 .80x Estos valores representan las probabilidades de que el segundo observador seleccionadoal azar esté de acuerdo con el nivel escogido por el primer observador (CME)y Estos valores representan las probabilidades de que el segundo observador seleccionadoal azar coincida con un margen de discordancia de un nivel con el primer observador (CM1)

Distribución de la asignación de niveles (asumiendo 2 observadores elegidos al azar)

NivelNivel KK

II 0,990,99

IIII 0,950,95

IIIIII 0,890,89

IVIV 0,910,91

VV 0,780,78

Page 13: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

ConclusionesConclusiones

• La capacidad demostrada en el correcto La capacidad demostrada en el correcto manejo de los motivos de consulta manejo de los motivos de consulta codificados del web_e-PAT v3.0 por los codificados del web_e-PAT v3.0 por los DUE ha sido excelente, obteniéndose DUE ha sido excelente, obteniéndose unos índices de concordancia unos índices de concordancia interobservador superiores a los de los interobservador superiores a los de los médicos. médicos.

Page 14: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

ConclusionesConclusiones

• A pesar de la dispersión observada en la A pesar de la dispersión observada en la interpretación del motivo de consulta por interpretación del motivo de consulta por los profesionales, el estudio ha permitido los profesionales, el estudio ha permitido demostrar la alta potencia del web_e-PAT demostrar la alta potencia del web_e-PAT v3.0 en condiciones controladas, pues ha v3.0 en condiciones controladas, pues ha mostrado una excelente fiabilidad, que le mostrado una excelente fiabilidad, que le ha permitido llegar, en cada escenario, al ha permitido llegar, en cada escenario, al mismo nivel de triaje en la práctica mismo nivel de triaje en la práctica totalidad de los casos.totalidad de los casos.

Page 15: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

ConclusionesConclusiones• La probabilidad de concordar en el nivel La probabilidad de concordar en el nivel

de triaje con el web_e-PAT v3.0 es muy de triaje con el web_e-PAT v3.0 es muy superior a la de la CTAS con soporte superior a la de la CTAS con soporte informático y sin élinformático y sin él

• El web_e-PAT v3.0 ha mostrado los El web_e-PAT v3.0 ha mostrado los mejores índices de concordancia mejores índices de concordancia obtenidos nunca con una escala de obtenidos nunca con una escala de triaje de 5 niveles, tanto en niños como triaje de 5 niveles, tanto en niños como en adultos.en adultos.

Page 16: ANÁLISIS DE CONCORDANCIA DE LA NUEVA VERSIÓN DEL PROGRAMA DE AYUDA AL TRIAJE (web_e-PAT v3.0©) Gómez Jiménez J, Ferrando JB, Santos G, Magallón J, Prat.

PREGUNTAS ?PREGUNTAS ?

Agradecemos a todos Agradecemos a todos los profesionales del los profesionales del Servicio de Urgencias Servicio de Urgencias del Hospital del Hospital Nostra Nostra Senyora de MeritxellSenyora de Meritxell, su , su inestimable inestimable colaboración para la colaboración para la realización del presente realización del presente estudio, a la SEMES su estudio, a la SEMES su apoyo a la promoción e apoyo a la promoción e implantación del SET, implantación del SET, así como a la FACMCB-así como a la FACMCB-SCMU su apoyo a la SCMU su apoyo a la promoción e promoción e implantación del MATimplantación del MAT

Servei Andorrà Servei Andorrà d’Atenció Sanitària d’Atenció Sanitària

(SAAS)(SAAS)