Taller “Verificación de Métodos...

Post on 06-Feb-2018

230 views 5 download

Transcript of Taller “Verificación de Métodos...

Taller“Verificación de

Métodos Cuantitativos”

Agenda

Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

Introducción

Objetivo del Taller:

- Verificar un procedimiento de medida cuantitativo.a)- Especificaciones del fabricante.b)- Requisito de la Calidad seleccionado de acuerdo al uso previsto del procedimiento de medida.

Introducción

Procedimiento de medida:

Glucosa en suero en mg/DLRequisito de la calidad : CLIA

IntroducciónProcedimiento de medida Glucosa en Suero

Unidades mg/dl

Requisito de la Calidad (CLIA) 6 mg /dl o 10 %

Plataforma Analítica SuperQC

Reactivo SuperQC

Alcance de la Evaluación Verificación

Precisión SI

Veracidad SI

Linealidad SI

Límite de Cuantificación NO

Verificación de Intervalo de Referencia SI

Glucosa en Suero en mg/dl

Introducción

Herramientas estadísticas a aplicar:

Parámetro Protocolo Aplicación

Precisión EP 15 A2 SIVeracidad EP 15 A2 SI

Linealidad EP 6 A SI

Límite de cuantificación EP 17 A No aplicaIntervalo de Referencia C 28 A3 SI

Introducción

Plan de trabajo:

1)- Requisito de la Calidad2)- EP 15 A23)- Rango Analítico4)- Intervalo de referencia5)- Evaluación del Desempeño

Agenda

Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

Requisito de la Calidad

Busco en la web la información disponible:http://www.westgard.com/clia.htm

Agenda

Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

EP 15 A2

¿Qué necesito?

a)- El protocolo.b)- 2 materiales de control

(niveles de decisión médico)c)- Informe del esquema interlaboratorioe)- Inserto del fabricantef)- Planillas de cálculo o software

EP 15 A2

a)- El protocolo

EP 15 A2

b)- 2 Materiales de Controlc)- Informe del esquema interlaboratorio

Nivel 1 Nivel 2mensual mensualacumulado acumulado

EP 15 A2

Mejor estimación del valor verdadero“Media acumulada del grupo par de

comparación”Nivel 1 Nivel 2

mensual mensualacumulado acumulado

Control 1 (mg/DL) Control 2 (mg/DL)

86,58 295,8

EP 15 A2

e)- Inserto del fabricante

Intraserial = Repetibilidad

RepetibilidadTotal = Precisión Intremedia

(Intralaboratorio)

Intralaboratorio

EP 15 A2

Buscamos las especificaciones:

Repetibilidad

Intralaboratorio

Concentración Evaluada =86,58 mg/DL

EP 15 A2

f)- Planilla de cálculo

Agenda

Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

Precisión: Planilla

Ingresar nombre del instrumento y su número de serie.Instrumento: SuperQCN° de Serie: 12345

Precisión: Planilla

Ingresar el lote del reactivo y su vencimiento:Lote de Rvo.: 4567M100Vto. Del Rvo.: 30/10/2012

Precisión: Planilla

Colocar el nombre del operador del instrumento:Operador: Juana Lopez

Precisión: Planilla

Insertar nombre del analito y unidades:Analito: Glucosa en sueroUnidades: mg/dl

Precisión: Planilla

Agregar nombre del material empleado con su lote y vencimiento si esta disponible:Material: QC1Vencimiento: 12/03/2014Lote: 987654

Precisión: Planilla

Agregar el lote del calibrador y su vencimiento:Lote del Cal.: 456789Vto. Del Cal.: 12/07/2013

Precisión: Planilla

Colocar la mejor estimación del valor verdadero del material empleado.“Material de control que participa en un

esquema interlaboratorio”

Precisión: Planilla

Mejor estimación del valor verdadero:Media acumulada del grupo par de comparación

86.58 mg/dl

Nivel 1 Nivel 2mensual mensualacumulado acumulado

Precisión: Planilla

Colocar la mejor estimación del valor verdadero del material empleado.

Media acumulada del grupo par de comparación

86.58 mg/dl

Precisión: Planilla

Vamos a trabajar con los datos del inserto del fabricante.

Precisión : PlanillaPremisa: Como la concentración evaluada está próxima a la concentración ensayada por el fabricante, se asume que podemos transferir los CV del inserto a nuestra concentración.

CV %

mg/DL86,5879,6

Concentración Evaluada 86,58 mg/DL

1,98

Repetibilidad(Intraserial)

Precisión : Planilla“Como la concentración evaluada está próxima a la concentración ensayada por el fabricante, se

asume que podemos transferir los CV del inserto a nuestra concentración.”

CV %

mg/DL86,5879,6

Concentración Evaluada 86,58 mg/DL

2,15

Intralaboratorio(Total)

Precisión: Planilla

¿Qué tengo?

¿Qué necesito?

Nivel de decisiónmédica

CVr CVi

86,58 mg/DL 1,98 % 2,15 %

Nivel de decisión

médica (NDM)

CVr SDr CVi SDi

86,58 mg/DL 1,98 % 2,15 %

Precisión: Planilla

Media: 86.58 mg/dlCVr: 1.98 %

CV = SD x 100Media

SDr = CVr * Media100

SDr = 1.98 * 86.56100

SDr = 1.714 mg/dl

Precisión: Planilla

Media: 86.58 mg/dlCVi: 2.15 %

CV = SD x 100Media

SDi = CVi * Media100

SDi = 2.15 * 86.56100

SDi = 1.816 mg/dl

Precisión : Planilla

Efectuar las corridas por triplicado durante 5 días y obtener los datos.

Día 1 Día 2 Día 3 Día 4 Día 501/05/2012 02/05/2012 03/05/2012 04/05/2012 05/05/2012

86,4 86,4 84,6 84,5 83,986,6 86,7 84,2 85,1 84,784,9 86,3 85,3 85,1 84,2

Precisión: Planilla

Ingresar las fechas de cada una de las 5 corridas:1, 2, 3, 4 y 5 de Mayo del 2012

Precisión: Planilla

Ingresar los triplicados de cada uno de los 5 dias.

Precisión: Planilla

Precisión: Planilla

La planilla efectúa los cálculos:

Precisión: PlanillaLa planilla saca sus conclusiones

Precisión: Planilla

Repetibilidad

Si SDr (datos propios) < SDr (fabricante)

Si SDr (datos propios) > SDr (fabricante)

Repetibilidadverificada

RepetibilidadAplicar

verificación

Precisión: Planilla

<

Precisión: Planilla

Desvío estándar en condiciones de repetibilidadobtenido a partir de nuestros datos:

Especificación del fabricante obtenida a partir del inserto para precisión en condiciones de repetibilidad:

¿Ha sido la precisión en condiciones de repetibilidad aceptada? ¿Por qué?

0.548

1.714

Si 0.548 1.714<

Precisión: Planilla

¿Ha sido necesario aplicar una verificación adicional? ¿Por qué?

¿Cuál es el valor de verificación (especificación aumentada) para el desvío estándar en condiciones de repetibilidad?

No 0.548 1.714<

2.543

Precisión: Planilla

RepetibilidadVerificada

Precisión: Planilla

Precisión Intermedia

Si SDi (datos propios) < SDi (fabricante)

Si SDi (datos propios) > SDi (fabricante)

Precisión Intermediaverificada

Precisión Intermedia

Aplicar verificación

Precisión: Planilla

<

Precisión: Planilla

Desvío estándar en condiciones de precisión intermedia obtenido a partir de nuestros datos:

Especificación del fabricante obtenida a partir del inserto para precisión en condiciones de precisón intermedia:

¿Ha sido la precisión en condiciones de precisión intermedia aceptada? ¿Por qué?

1.024

1.861

Si 1.024 1.861<

Precisión: Planilla

¿Ha sido necesario aplicar una verificación adicional? ¿Por qué?

¿Cuál es el valor de verificación (especificación aumentada) para el desvío estándar en condiciones de precisión intermedia?

No 1.024 1.861<

2.890

Precisión: Planilla

Precisión IntermediaVerificada

Agenda

Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

Veracidad: Planilla

Muchos datos se cargan en forma automática cuando son ingresados en la planilla de precisión y otros dependen del diseño del ensayo.

Veracidad: Planilla

Nombre del instrumento y número de serie

Nombre de analíto y unidades

Lote del reactivo y vencimiento

Lote del calibrador y vencimiento

Material empleado, lote y vencimiento

Mejor estimación del valor verdadero

Cantidad total de datos y cantidad de días

Veracidad: Planilla

Mejor estimación del valor verdadero:

“Media acumulada del grupo par”

Veracidad: Planilla

Sa = S.D. / √ n

Sa = 2.84 / √ 41

Sa = 0.444 mg/dl

Sa

Cantidad de replicados por día; cantidad de corridas

analíticas (cantidad de días).

Veracidad: PlanillaTodos estos

datos vienen de la

planilla de precisión

Veracidad: Planilla

Media de los 15 resultados (3 x 5)

X X = 85.26 mg/dl

Veracidad: Planilla

Varianza de los 15 datos

(triplicados durante 5 días)

Desvía Estándar de los 15 datos

(triplicados durante 5 días)

X = 85.26 mg/dl

Veracidad: Planilla

Grados de Libertad:=3xn -1n : 5 (Días)

3: Replicados por día

Grados de Libertad:=3x5 -1Grados de Libertad = 14

α: Probabilidad 0.01α: 1 %

Veracidad: Planilla

Veracidad: Planilla

X = 85.26 mg/dl

Sa = 0.444 mg/dl

Intervalo de Verificación = 85.26 + 2.624 x (0.9692 + 0.4442)1/2

Intervalo de Verificación = 85.26 + 2.80

Veracidad: Planilla

85.26 – 2.80

85.26 + 2.80

Intervalo de Verificación = 85.26 + 2.80

Veracidad: Planilla

85.2682.46 88.06

Media acumulada del grupo para de comparación

Valor Evaluado

86.58 mg/dl

Intervalo de Verificación = 85.26 + 2.80

Verificación Aceptada

Veracidad: PlanillaMedia acumulada del

grupo para de comparación

Valor Evaluado

86.58 mg/dl

Veracidad: Planilla

Media acumulada del grupo para de comparación

Valor Evaluado

86.58 mg/dl

Veracidad: Planilla

Media de las 15 repeticiones (triplicados

durante 5 días)

Veracidad: Planilla

Bias (c) = Valor Obtenido – Concentración Evaluada

Bias (c) = (85.26 – 86.58) mg/dl

Bias (c) = - 1.32 mg/dl

Veracidad: Planilla

Bias % = Valor Obtenido – Concentración Evaluada x 100Concentración Evaluada

Bias % = [85.26 – 86.58] x 10086.58

Bias % = 1.5 %

Agenda

Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

Rango Analítico

¿Qué necesito?

a)- El protocolo.b)- 1 muestra de concentración altac)- Inserto del fabricanted)- Diluyentee)- Softwareg)- Requisito de la Calidadh)- Material Volumétrico

Rango Analíticoa)- El protocolo

Aplica el concepto de linealidad estadística y clínica

Linealidad

Rango Analítico

b)- 1 Muestra de concentración altac)- Inserto del fabricanted)- Diluyente

Diluyente Solución Salina

Rango Analítico

Protocolo de concentraciones equidistantes.h)- Material Volumétrico

0%

25%

50%

75%

100%

Partes iguales

Partes iguales

Partes iguales

Rango AnalíticoNombre del Laboratorio

Fecha y Operador

Método

Unidades

Comentarios

Niveles ensayos

Diluciones equidistantes

Valor Muestra 1

Valor Muestra 5

Enter

Rango Analítico

Concentraciones teóricas de las 5 diluciones

Rango Analítico

Línea de referenciaOpción (1)No existe referenciaOpción (2)Línea rectaOpción (3)Calibración, se ingresanlas concentraciones de loscalibradores altos y bajos.

Rango Analítico

Se ingresan los valores obtenidos de los triplicados de cada dilución y luego se

selecciona Update

A Curva

obtenidaReferencia

Orden 1

Ensayo no lineal desde el punto de vista

estadístico

Selecciono la solapapolinomios

Curva grado 3

Selecciono la solapa

Nonlinearity

Curva obtenida

ReferenciaOrden 1

Rango Analítico

mg/dl

Error de no linealidad

Máximo a X= 500 mg/dl Promedio Unidades

Máximo error de no linealidadX= 500 mg/dlEn concentración: 3.76 mg/dlEn porcentaje: 0.77 %

Rango Analítico

mg/dl

Error de no linealidad

Máximo a X= 500 mg/dl Promedio Unidades

Máximo error de no linealidadX= 500 mg/dlEn concentración: 3.76 mg/dlEn porcentaje: 0.77 %

TESa permitido se presupuesta como 50% ETa

TESa = 0,50 * 10% TESa = 5 %

Rango Analítico

Máximo error de no linealidadX= 500 mg/dlEn concentración: 3.76 mg/dlEn porcentaje: 0.77 %

TEa (CLIA)6 mg/dl 0 10%TSEa : 0.5 * TEaTSEa : 3 mg/dl o 5%

Error máximo de NO linealidad < TESa0.77 % < 5 %

LINEALIDAD CLÍNICA ACEPTADA entre 0 y 500 mg/dl

Rango Analítico

Error de no linealidad

Máximo a X= 500 mg/DL Promedio Unidades

Máximo error de no linealidadX= 500 mg/DLEn concentración: 3.76 mg/DLEn porcentaje: 0.77 %

mg/DL

El procedimiento de medida no es estadísticamente

lineal en el rango de concentraciones evaluado

Evaluar linealidad Clínica

Rango Analítico

Error de no Linealidad

Error Sistemático

Error Sistemático

Hasta el 50 % del Requisito de la Calidad

Error de no Linealidad

Hasta el 50 % del Requisito de la Calidad

Rango Analítico

mg/dl

Error de no linealidad

Máximo a X= 500 mg/DL 0,77 %

ETa (CLIA)10 %

ETa * 0,5(50 % del Eta) 5 %

Rango Analítico

Error de no Linealidad

Hasta el 50 % del Requisito de la

Calidad

0,77 % 5 %<El procedimiento de medida es clínicamente

lineal en el rango de concentraciones evaluado considerando un ETa del 10 % con un

presupuesto de error sistemático del 50 %.

ETa (CLIA): 6 mg/DL o 10 % (el más grande)

Agenda

Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

Intervalo de Referencia

¿Qué necesito?

a)- El protocolob)- Intervalo Propuestoc)- Cuestionariod)- Mínimo 20 individuos “Sanos”e)- Criterio

Intervalos de Referencia

a)-El Protocolo

Intervalos de Referencia

(1) INDIVIDUOS DE REFERENCIAComponen una

(2) POBLACIÓN DE REFERENCIADe la cuál es seleccionada una

(3) MUESTRA DE GRUPO DE REFERENCIAEn la cuál son determinados

(4) VALORES DE REFERENCIAQue caracterizan

(5) DISTRIBUCIÓN DE REFERENCIADesde la cuál son calculados

(6) LÍMITES DE REFERENCIAQue pueden definir

(7) INTERVALOS DE REFERENCIA

(8) VALOR OBSERVADO en una persona pueden ser comparados con

Intervalos de Referencia

b)- Intervalo Propuesto Se identifica el intervalo de referencia

propuesto.

Se procesan las muestras de los 20 individuos “sanos”.

Se procesan los datos.

Intervalos de Referencia

c)- Cuestionario con consentimientoExamen fisco

Intervalos de Referencia

Intervalos de Referencia

Evaluación de los datos

Si NO más de 2 valores (o hasta el 10 %) caen fuera del intervalo propuesto

El IR se considera verificado para el Laboratorio

Intervalos de Referencia

Evaluación de los nuevos 20 datos

Si 3 o 4 más valores (o entre el 15 y 20 %) caen fuera del intervalo propuesto

El Laboratorio debería considerar seleccionar 20 individuos sanos nuevamente y repetir

Intervalos de Referencia

Evaluación de los datos

Si 5 o más valores (o mas del 25 %) caen fuera del intervalo propuesto

El Laboratorio debería considerar determinar su propio IR

Intervalos de Referencia

ResumenCantidad de Individuos fuera

del intervalo de referencia propuesto sobre 20

individuos evaluados

Porcentaje Conclusión / Acción

< 2 < 10 % Intervalo Propuesto Verificado

de 3 a 4 de 15 a 20 % Ensayar 20 individuos “sanos” nuevos.

> 5 > 25 % Establecer Intervalo de Referencia

Si se evalúan mas de 20 individuos prestar atencióna los porcentajes

Caso de Aplicación“Herramientas: C 28 A3 ”

Cantidad de Individuos fuera del intervalo de referencia

propuesto sobre 20 individuos evaluados

Porcentaje Conclusión / Acción

< 2 < 10 % Intervalo Propuesto Verificado

de 3 a 4 de 15 a 20 % Ensayar 20 individuos “sanos” nuevos.

> 5 > 25 % Establecer Intervalo de Referencia

Intervalos de Referencia

Intervalos de Referencia

Cantidad total de resultados obtenidos a partir de individuos

de referencia = 20

Porcentaje = Cantidad x 100N° Total

Porcentaje = 1 x 100 = 5 %20

Agenda

Introducción Requisito de la Calidad EP 15 A2 Precisión : Planilla Veracidad : Planilla Rango Analítico Intervalo de Referencia Evaluación de Desempeño

Evaluación de DesempeñoRequisito de la

CalidadFuente CLIA

Nivel de Decisión médica evaluado(Mejor estimación del valor verdadero)

Evaluación de Desempeño

SD y CV en condiciones de precisión Intermedia

(intralaboratorio ) obtenidos de la solapa de

precisión

Bias (Sesgo) expresado en porcentaje tomado

de la solapa de veracidad para el nivel

de decisión médica evaluado

Error TotalTE

Error Sistemático

“Sesgo”

Error Aleatorio“SD o CV”

Evaluación de Desempeño

TE TEa

SD: Desvío estándarCV: Coeficiente de variaciónTE: Error totalTEa: Requisito de la Calidad

Evaluación de Desempeño

TE(c) = Sesgo(c) + Z * SD

TE(%) = Sesgo(%) + Z * CVSD: Desvío estándarCV: Coeficiente de variaciónTE: Error totalZ: 2

Evaluación de Desempeño

TE(%) = Sesgo(%) + 2 * CVTE(%) = 1,5(%) + 2 * 1,2

Evaluación de Desempeño

Sigmaσ

TEa

SesgoCV

CV: Coeficiente de variaciónσ : SigmaTEa: Requisito de la Calidad

Evaluación de Desempeño

Sigma (σ) = ( TEa% – Sesgo% )CV %

CV: Coeficiente de variaciónσ : SigmaTEa: Requisito de la Calidad

Evaluación de Desempeño

Sigma = (TEa – Sesgo)/CVSigma = (10 – 1,5)/1,2

Evaluación de Desempeño

Sigma Desempeñoσ < 2 Inaceptable, no válido como procedimiento de

medición de rutina.

2 < σ < 3 Marginal, necesita que se le aplique un esquema de mejoramiento de la calidad.

3 < σ < 4 Pobre, va a necesitar de un esquema de control estadístico interno de la calidad con más de una corrida analítica (R) y varios resultados por corrida (N).

4 < σ < 5 Bueno, con un esquema de reglas múltiples se asegura la utilidad clínica de los resultados.

5 < σ < 6 Muy Bueno, con un esquema de regla única se asegura la utilidad clínica de los resultados.

σ > 6 Excelente!!!!!!!!!!!!

MUCHAS GRACIAS!

www.gmigliarino.comInfo@gmigliarino.com