Metodo de comparacion2011
Upcoming SlideShare
Loading in...5
×
 

Metodo de comparacion2011

on

  • 4,597 views

 

Statistics

Views

Total Views
4,597
Views on SlideShare
4,556
Embed Views
41

Actions

Likes
0
Downloads
116
Comments
0

1 Embed 41

http://tmumayor.com 41

Accessibility

Categories

Upload Details

Uploaded via as Microsoft PowerPoint

Usage Rights

© All Rights Reserved

Report content

Flagged as inappropriate Flag as inappropriate
Flag as inappropriate

Select your reason for flagging this presentation as inappropriate.

Cancel
  • Full Name Full Name Comment goes here.
    Are you sure you want to
    Your message goes here
    Processing…
Post Comment
Edit your comment

Metodo de comparacion2011 Metodo de comparacion2011 Presentation Transcript

  • Pedro Cortes Alfaro Tecnólogo Medico Magister en Administración en SaludAseguramiento de la Calidaden el Lab. Clínico: Control de Calidad Externo (CCE)
  • Composición de un dato de laboratorio Variabilidad Pre-analítica Valor (estimada como irrelevante)Resultado de la muestra verdadero Variabilidad analítica (imprecisión analítica total) Bias Analítico Variabilidad Biológica Intrínseca (una constante) VARIABILIDAD TOTAL Variabilidad Analítica + Bias Analítico = ERROR TOTAL (imprecisión analítica total)
  • CCI ASEGURAMIENTO DE LA Material Control CALIDAD FASE ANALÍTICA Corrida Analítica Material CCE Gráficas Levey-Jennings Control con Material Reglas de Westgard trazabilidad Control Si Error Total - Cartas OPSpecs – Cumple Nº Sigma - ΔSEcrit (inexactitud e imprecisión del método) No No Si AseguramientoAcciones Preventivas de la calidad de Cumple Resultados/ y Correctivas procedimiento View slide
  • ERROR (de una medida) Error Error sistemático aleatorioError sistemático Error sistemático conocido desconocido corrección Error remanente RESULTADO incertidumbre R + U (R) View slide
  • Error originado por causas aleatorias o fortuitas y probablemente no corregibles ERROR ALEATORIO Límite de alarma superior unidades 130 Límite de precaución superior 120 110 100 media 90 80 70 60 1 3 5 7 9 11 13 15 17 19 Tiempo: dias: fechasLímite de precaución inferior Límite de alarma inferior
  • Error Total Máximo: es el máximo error aceptable a un determinado nivel de concentración. Error Sistemático (ES) = x – “VV” “VV” x Error Aleatorio (EA) = 3 x S(n-1) Error Total Máximo = ES + EA
  • ERROR SISTEMÁTICO• Diferencia entre valor medio y valor verdadero.• Es el mismo para todas las medidas repetidas.• Depende de la veracidad del procedimiento de medida.• Causas del error sistemático: • Calibración incorrecta: afecta a todas las muestras. Debe ser evitado o corregido. • Inespecificidad (metrológica): afecta a las muestras • que contengan alguna interferencia. Debe prevenirse.Si se utiliza un procedimiento de medida muy específico yadecuadamente calibrado, los resultados están libres deerror sistemático.
  • Callum G. Fraser: BIOLOGICAL VARIATION: FROM PRINCIPLES TOPRACTICE Error Total(TE) puede ser calculado de diferentes formas. La manera mas usual es agregando el bias (sesgo) y precision “linealidad”. TE = bias + 2SD ( or CV) TE = bias + 3SD ( or CV) TE = bias + 4SD ( or CV) TEa= bias + 1,65 SD ( or CV) TEa= BA + 1,65 CVA
  • valor verdadero medida b medida aprobabilidad error aleatorio error sistemático 80 90 100 110 120 resultado medición -15 0 tamaño error sistemático
  • TIPOS DE ERRORES valor verdadero medidaprobabilidad error aleatorio error sistemático error de medida 80 90 100 110 120 imprecisión error máximo de medida
  • DESPLAZAMIENTO DE LA CONDICION ESTABLE-4 -3 -2 -1 0 +1 +2 +3 +4 +5 +6 s
  • ESTIMACIÓN DEL ERROR SISTEMÁTICO Valor valor verdadero convencional verdadero asignado a materiales comprar MRC referencia certificados obtenido en muestras con comparar procedimientos procedimientos de veracidad conocidaValor de consenso en participar en EQAScomparación interlaboratorios
  • CONTROL DE CALIDAD EXTERNOmétodo externo para validación del desempeño encuanto a exactitud de un laboratorio, mediante laevaluación de muestras ciegas y la comparación desus resultados con todos los laboratoriosparticipantes.
  • ESTIMACIÓN DEL ERROR EN EQASDiferencia respecto a un valor verdaderoconvencional– Mensurandos con valor independiente del método: valor de la media global (u otro vvc). Los valores de referencia son independientes del método.– Mensurandos con valor dependiente del método: valor de la media del método (u otro vvc). Enzimas, muchos inmunoanálisis. Los valores de referencia son dependientes del método.
  • EXPRESIÓN DEL ERROR EN EQAS• error absoluto = resultado lab - valor verdadero• error relativo (%) = 100 x error absoluto / valor verdadero – útil para comparar con el requisito de exactitud o con la incertidumbre o con otros mensurandos• error relativo (s) = SDI = error absoluto / sgrupo – útil para comparar con otros laboratorios
  • Bias: “Modelos de Estimación”¿De que forma podemos estimar el Bias denuestros métodos?1)- Comparación de Métodos.2)- Esquemas Interlaboratorio o Peer Group.3)- Control de Calidad Externo.- Regresión- T test4)- Estudios de Recuperación, verificación de la veracidad.5)- Otros.
  • Bias: “Comparación de Métodos”Los estudios de comparación de métodos se llevan a cabo a efectos dedeterminar el error sistemático del ensayo (cantidad) que está siendoevaluado.Se realizan analizando muestras con el nuevo método y un método decomparación.Sobre la base de las diferencias observadas entre los dos métodos secalcula el error sistemático.Las diferencias observadas se analizan en los distintos niveles dedecisión médica de la cantidad (analito) en cuestión, para juzgar sobrela aceptabilidad del método.Brindan información importante sobre la naturaleza del error(sistemático o constante).
  • Bias: “Comparación de Métodos” Objetivo“El propósito fundamental de los estudios de comparación demétodos es determinar si dos métodos son estadísticamentecomparables”Para que esto sea cierto se deben dar tres condiciones:1- La pendiente no debe ser significativamente diferente de 1.2- La intersección no debe ser significativamente diferente de 0.3- No debe existir diferencia significativa en los niveles dedecisión médica.
  • Bias: “Comparación de Métodos”Factores a Considerar1)- Método de Comparación.2)- Número de muestras a analizar.3)- Corrida Simple Vs. Duplicados.4)- Duración del estudio.5)- Estabilidad de las muestras.
  • Bias: “Comparación de Métodos”Método de Comparación-Se habla de método de comparación.-Debería seleccionarse un método de referencia para asegurarla veracidad de los resultados que genera.-Si el método de comparación es un método de referencia, lasdiferencias encontradas son asignadas al método en estudio.-Al momento de interpretar los resultados es muy importantesaber cual es la referencia que estamos empleando.- Conceptos relacionados : “Trazabilidad”; “Método Definitivo ode Referencia”
  • Bias: “Comparación de Métodos”Número de muestras a analizar-Deben seleccionarse entre 20 y 40 muestras depacientes, de manera tal que se cubra el rango detrabajo del ensayo en estudio.-La calidad de las muestras seleccionadas es másimportante que la cantidad.- Factor crítico: “Distribución de las muestras”.
  • Bias: “Comparación de Métodos”Corrida Simple Vs. Duplicados-Los duplicados brindan una verificación sobre la validezde las mediciones.-Incrementan costos.- Si no se trabaja con duplicados se deben verificar lospares de datos al momento que son obtenidos.
  • Bias: “Comparación de Métodos”Duración del estudio-Mínimo 5 días.-Optimo 20 días.-2 a 5 muestras por día.
  • Bias: “Comparación de Métodos”Estabilidad de las muestras-Genéricamente se recomienda no dejar pasar más de2 horas para procesar las muestras por ambosmétodos.-La estabilidad del analito en la muestra puede seruna limitante.- Ejemplos: Bicarbonato, lactato, amonio, gases ensangre.
  • Bias: “Comparación de Métodos”Interpretación de resultadosExisten 4 razones o motivos por los cuales se realizanestudios de comparación entre métodos:-Clínico-Analítico-Investigación-Armonización
  • Bias: “Comparación de Métodos”Interpretación de resultados Sensibilidad de parámetros estadísticos de tres clases de error Random Proporcional Constante Slope No Si No Intercept No No Si Std. Err. Est. Si No No Bias No Si Si Std. Dev. Diff. Si Si Si T Test Si Si Si Corr. Coef, (R) Si No No Med. Dec. Pt. No No No Predicted Bias No Si Si 95% Confs. Si Si SI Limit
  • Bias: “Comparación de Métodos”Interpretación de resultadosStd. Err. Est.(SEE)-Describe la dispersión de los puntos x,y alrededor de la líneade tendencia central.-Cuanto más chico sea el SEE mejor correlacionan losmétodos.- Si el desvío estándar de ambos métodos es idéntico, el SEEserá aproximadamente 1,4 veces el desvío estándar típico.
  • Bias: “Comparación de Métodos”Interpretación de resultadosStd. Err. Est.(SEE) valores observados constante proporcional valores verdaderos
  • Bias: “Comparación de Métodos”Análisis GráficoEs inicialmente útil para detectar outliers.Para los métodos que supuestamente tienen un gradode acuerdo importante se utiliza el “Difference plot”. Permite identificar outliers Permite visualizar errores www.westgard.com
  • Bias: “Comparación de Métodos” Análisis Gráfico Asociado Permite identificar outliers Verificar la calidad de las muestras Respuesta lineal en el rango analítico Acuerdo entre los métodoswww.westgard.com
  • Bias: “Comparación de Métodos” Diferentes modelos de regresión: Regresión lineal Regresión de Deming Passing-Bablok
  • Bias: “Comparación de Métodos”Interpretación de resultados -Ambos modelos funcionan minimizando la suma de los cuadrados de los residuales. -La regresión regular asume para hacerlo que le método de comparación es exacto. -Angulo definido por el cociente de los errores relativos de los 2 métodos.
  • Bias: “Comparación de Métodos”Interpretación de resultadosPassing Bablok- Es una aproximación diferente.- Calcula las pendientes de cada uno de los pares depuntos.-Descarta las pendientes horizontales y verticales yestima-la media del resto.- Descarta outliers.
  • Bias: “Comparación de Métodos” Coeficiente de correlación (r) “Describe el ancho relativo de la elipse que engloba los puntos de la serie de datos.”- Es sensible al error aleatorio, al rango de datos y al signo de lapendiente.- Mide el grado de asociación entre dos variables.
  • Bias: “Comparación de Métodos” Interpretación de resultados¿Cómo estimar el Bias en unidades de concentración y porcentajea partir de la ecuación de la recta obtenida del estudio decomparación de métodos?Pendiente: 1,0377 (m)Intercepto: 5,37 (b)Ecuación de la recta: Y = m * X + bY = pendiente * X + InterceptoY = 1,0377 * X + 5,37X : Concentración a la cual se va a evaluar el biasDebería representar un nivel de decisión médica
  • Bias: “Comparación de Métodos” Interpretación de resultadosY = 1,0377 x X + 5,37Lo que quiero saber es:- Para una muestra que tenga un valor verdadero de “X”que valor voy a obtener yo de acuerdo al Bias de mimétodo .- X = 100 mg/dl- Y = 1,0377 x 100 + 5,37-Y = 109,1mg/dl- Para una muestra con un valor verdadero de 100 mg/dlcon mi método yo obtendría un valor de 109,1 mg/dl.
  • Bias: “Comparación de Métodos” Interpretación de resultadosX = 100 mg/dl (valor verdadero)Y = 109,1 mg/dl (valor obtenido)¿Cuál es el Bias en unidades de concentración?Bias = Valor Obtenido – Valor VerdaderoBias = 109,1 – 100 = 9,1 mg/dl
  • Bias: “Comparación de Métodos”Interpretación de resultadosX = 100 mg/dl (valor verdadero)Y = 109,1 mg/dl (valor obtenido)¿Cuál es el Bias en porcentaje?Bias = Valor Obtenido – Valor Verdadero x 1oo Valor VerdaderoBias = 109,1 – 100 x 1oo 100Bias = 9,1 %
  • Bias: “Comparación de Métodos”Cada punto representa una muestra medida con dos procedimientos.La línea roja es la recta de regresión y la negra indica la igualdad x=y A Resultados idénticos B Error sistemático constante positivo
  • Cada punto representa una muestra medida con dos procedimientos.La línea roja es la recta de regresión y la negra indica la igualdad x=y C Error sistemático proporcional D Error mixto
  • Bias: “Esquemas Interlaboratorio” Interpretación de resultados“Los esquemas interlaboratorio brindan unainformación muy útil para la estimación del Bias”Puntos críticos:-Contra que me comparo.-Valor verdadero.-Trazabilidad.-Tamaño del grupo de comparación.-Niveles de decisión médica evaluados.
  • Bias: “Esquemas Interlaboratorio”Evaluemos Nivel 1:Supongamos valor verdadero: Media grupo parLab: 40,07Media grupo par: 39,05Bias: ( 40,07 - 39,05) = 1,02Bias %: (1,02 / 39,05)*100= 2,61
  • Bias: “Esquemas Interlaboratorio”Evaluemos Nivel 1:Supongamos valor verdadero: Media Acumuladadel laboratorioLab: 40,07Media acum. Lab.: 40,08Bias: ( 40,07 - 40,08) = -0,01Bias %: (0,01 / 40,08)*100= 0,02
  • Bias: “Esquemas Interlaboratorio”Evaluemos Nivel 1:Supongamos valor verdadero: Media del MétodoLab: 40,07Media del Método: 37,72Bias: ( 40,07 - 37,72) = 2,35Bias %: (2,35 / 37,72)*100= 6,2
  • Bias: “Esquemas Interlaboratorio”Evaluemos Nivel 2:Supongamos valor verdadero: Media grupo parLab: 185,6Media grupo par: 188,1Bias: ( 185,6 – 188,1) = -2,5Bias %: (2,5 / 188,1)*100= 1,3
  • Bias: “Esquemas Interlaboratorio”Evaluemos Nivel 2:Supongamos valor verdadero: Media Acumuladadel laboratorioLab: 185,6Media acum. Lab.: 186,4Bias: ( 185,6 - 186,4) = -0,8Bias %: (0,8 / 186,4)*100= 0,4
  • Bias: “Esquemas Interlaboratorio”Evaluemos Nivel 2:Supongamos valor verdadero: Media del MétodoLab: 185,6Media del Método: 188,1Bias: ( 185,6 – 188,1) = -2,5Bias %: (2,5 / 188,1)*100= 1,3
  • Criterios de Evaluación Programas de Evaluación externa%sesgo - %BIAS - DRP SDI – IDE - Puntaje-Z X-X X-X * 100 X S SRZ n Zi SRZ i 1 nSRZ (promedio últimos 6 Puntaje-Z, últimas muestras)
  • ERROR TOTAL (Competencia) En Términos de Error Total permitido: Probabilidad Unidirection Bidereccion (%) al z - Score al Z- ScoreET %SESGO 1.65%CV 99 2,33 2,58 98 2,05 2,33 97 1,88 2,17 Inexactitud Imprecisión 96 1,75 2,05 95 1,65 1,96 90 1,28 1,65 85 1,04 1,44
  • Criterios de aceptabilidad de los resultados de los PEEC ERROR TOLERABLE MAXIMO, ETMEstablece un intervalo de variación aceptable alrededor delvalor asignado. En la práctica, dicho valor asignado tiene queser igual o cercano a la concentración crítica para el analito -ETM X=A +ETM
  • Criterios para determinar el ETM CRITERIO DE TONKS 1963 Establece un error de tolerancia máximo (ETM) para cada constituyente, considerando el intervalo de referencia (IR) o valor de referencia para éste, y se calcula de la fórmula siguiente: ETM = (0.25*IR/valor medio del IR)*100 Ejemplo, para glucosa: IR = 80 a 120 = 40 valor medio del IR = (80 + 120)/2 = 100, luego ETM =(0.25 * 40/100) * 100 = 10 %luego el D.R.P. aceptable para glucosa es entre - 10 % a + 10 %
  • xi xm DRP 100 xm Xm D.R.P.(-) D.R.P.(+) D.R.P. Desvio Relativo Porcentual: mide en % la diferencia entre el valor informado por ellaboratorio para cada constituyente sérico (xi) y elvalor promedio del método analítico (xm) obtenido por consenso.
  • ENFOQUES DE CALIDAD ERROR TOTAL CALIDAD ANALÍTICA CALIDAD CLÍNICACONVENCIONAL PLANIFICADA PLANIFICADA IMPRECISIÓN FACTORESIMPRECISIÓN ESTABLE PREANALÍTICOS ESTABLE INEXACTITUD IMPRECISIÓN ESTABLE ESTABLEINEXACTITUD MARGEN DE CC INEXACTITUD ESTABLE SEGURO ESTABLE Misma base de fondo, diferentes costos MARGEN DE CC SEGURO Distinta base de fondo, diferentes costos
  • Grafico de Precisión . . . . .. ... . .... . . ... . . .. . .. . . . .Precisa y Imprecisa Precisa e Imprecisa Exacta Y exacta Inexacta E Inexacta
  • Ejemplos de Precisión Control Interno y Externo Solo Control Interno .. ... 95. . . 95. .. . .PRECISO Y EXACTO PRECISO E INEXACTO
  • Bias: “Verificación de Veracidad” Recuperación
  • Desempeño del MétodoPremisa:“Establecer los Requisitos de Calidad”Conocemos el desempeño de nuestros métodos en condicionesestables a partir de la verificaciones y validaciones analíticas demétodos.Una vez conocido el método como aceptable (cumple con nuestrorequisitos de calidad), trabajamos con control de calidad paraasegurarnos que el método permanece estable en función deltiempo.Operando correctamente los datos de desempeño analítico delmétodo obtenidos de las corridas de los controles (esquemasinterlaboratorio), junto con los requisitos de calidad podemos seguircual es el comportamiento del método de acuerdo a nuestrasexpectativas.
  • Desempeño del MétodoLos errores calculados son:- Error Aleatorio: A partir de los protocolos de Precisión Simpley Compleja. SD y CV- Error Sistemático: A partir del protocolo de Comparación deMétodos. Y = Pendiente * X + IntersecciónDe la combinación de conceptos y errores surge ladecisión acerca de la aceptabilidad del método en estudio.Existen varios modelos para esta combinación.Los más apropiados son: 1-Method Desicion Chart 2-Six Sigma
  • Desempeño del MétodoMethod Desicion Chart- Recomendaciones para combinación de errores: • bias + 2SD < TEa • bias + 3SD < TEa • bias + 4SD < TEa- A partir de los protocolos de evaluación obtenemos los siguientesdatos: BIAS CV- BIAS y CV se calculan en concentraciones consideradas niveles dedecisión médica.
  • Desempeño del MétodoEl TE a debe expresarse en porcentaje.Si TE a está expresado en concentración, debe transformarseen porcentaje considerando el nivel de decisión médicaseleccionado: TE a: 1 mg/dl (Calcio) Nivel de decisión médica: 11 mg/dl TE a%: (1/11)*100 = 9.1 % TE a: 0.5 mEq/l (Potasio) Nivel de decisión médica: 3.0 mEq/l TE a%: (0.5/3.0)*100 = 16.7 %
  • Desempeño del MétodoCrear el gráfico:- Rotular el eje Y como Inexactitud permitida ( BIAS %) y estableceruna escala de 0 a TE a%.- Rotular el eje X como Imprecisión permitida ( CV %) y estableceruna escala de 0 a TE a.0.5 (la mitad)- Dibujar la línea bias + 2SD uniendo el TE a en el eje Y con el TEa.0.5 en el eje X.- Dibujar la línea bias + 3SD uniendo el TE a en el eje Y con el TEa.0.33 en el eje X.- Dibujar la línea bias + 4SD uniendo TE a en el eje Y con el TE a.0.25en el eje X.- Rotular las zonas ( de derecha a izquierda) como Pobre, Marginal,Bueno y Excelente.
  • Desempeño del Método
  • Desempeño del Método
  • Desempeño del MétodoPobre: El método no cumple con los requerimientos de calidad, nisiquiera trabajando en condiciones de base, por lo tanto, es inapropiadopara ser empleado como método de rutina.Marginal: El método provee la calidad requerida solo bajo condicionesmuy controladas. Será difícil trabajarlo como método de rutina y debeestablecerse una estrategia de calidad total.(entrenamiento deoperadores, QC exhaustivo, plan de mantenimiento frecuente, controlde resultados).Bueno: Cumple con los requerimientos de calidad y puede serempleado en forma rutinaria con un QC planificado.(multiregla o N:4)Excelente: Cumple con los requerimientos de calidad y es fácil demanejar con un QC mínimo.