Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

Validación de instrumentos

1,939 views

Published on

Published in: Education
  • Be the first to comment

Validación de instrumentos

  1. 1. Creación y validación de instrumentos de medida en Psiquiatría JA Ramos Brieva Servicio de Psiquiatría Hospital Universitario “Ramón y Cajal” Universidad de Alcalá (Madrid)
  2. 3. TIPOS DE INSTRUMENTOS <ul><li>Instrumentos de cribaje o de screening. </li></ul><ul><li>Entrevistas clínicas, de registro psicopatológico o diagnósticas. </li></ul><ul><li>Escalas que miden intensidad o son sensibles al cambio. </li></ul><ul><li>Escalas especiales. </li></ul>
  3. 4. Instrumentos de cribaje o de screening . Objetivos detectar casos en amplios grupos de población Tipos Generales (GHQ) Específicas (depresión: WHO/SADD, CES-D) Autoaplicadas (GHQ, CES-D) problemas : *dependen de niveles de lectura y comprensión. *restrictivos (hipocondría, delirios). *respuestas socialmente indeseables. ventajas : *economía de medios. Heteroaplicadas: (WHO/SADD) problemas : *aplicación costosa ventajas : *minimizan problemas autoaplicadas.
  4. 5. Entrevistas clínicas Objetivos Especificar diagnósticos en posibles casos Entrenamiento en captación de la psicopatología Tipos Heteroaplicadas : >estructutadas (para legos) >semiestructuradas (para psiquiatras) Generales (DIS, SCAN, SCID) Específicas : depresión (WHO/SADD) depresión y esquizofrenia... Suelen desarrollarse con programas informáticos que contienen algoritmos diagnósticos
  5. 6. Escalas que miden intensidad o son sensibles al cambio y especiales Objetivo Evaluar de modo mensurable aspectos parciales o completos de un tópico psicopatológico. Tipos Específicas : depresión, ansiedad, calidad de vida, alexitimia.... Autoaplicadas : Problemas :  dependencia de niveles de lectura, (Zung, Beck) comprensión y motivación.  restrictivos (hipocondría, delirios, crónicos. Ventajas :  comodidad de aplicación. Heteroaplicadas : Ventajas :  minimizan problemas autoaplicadas. (Hamilton) Problemas :  entrevistadores cualificados. (médicos, enfermeras, psicólogos)
  6. 7. VALIDEZ : el instrumento mide lo que dice medir. SEGURIDAD : el instrumento mide lo que dice sin error. Existen diferentes conceptos de validez y seguridad, cada uno de los cuales persigue fines diferentes. Algunos son comunes, otros no son aplicables a todos los tipos de escalas. VALIDEZ y SEGURIDAD están relacionados... Exigencias básicas que deben cumplir las escalas
  7. 8. Va I II III IV V Vesp Ve 1,00 R h 2 VARIANZA TOTAL OBTENIDA : VaI + VaII + VaIII… + Vesp + Ve = 1,00 VaI + Va II + Va III... = proporciones de la varianza total explicada por los distintos factores de la prueba. Vesp = varianza específica del test, exclusivamente suyo, que introduce sistemáticamente. Ve = varianza de error (fluctuaciones aleatorias). FIABILIDAD o SEGURIDAD = proporción de la varianza total obtenida que es verdadera, sin error ( R= 1- Ve ). VALIDEZ = varianza de factor común o comunalidad (h 2 ), compartida por todos los componentes o factores de la prueba (h2= VaI + VaII + VaIII + VaIV + VaV= R - Vesp ). Primer Teorema de la Teoría del Análisis Factorial
  8. 9. Instrumentos de cribaje o de screening . Criterios de validez y seguridad Validez de contenido. Validez de constructo. Validez concurrente. Validez predictiva (criterio externo). Seguridad (consistencia interna, temporal). Estabilidad temporal.
  9. 10. Entrevistas clínicas. Criterios de validez y seguridad Validez de contenido. Validez predictiva (criterio externo). Seguridad (entre entrevistadores): Seguridad (frente al criterio diagnóstico). Estabilidad temporal.
  10. 11. Escalas que miden intensidad o son sensibles al cambio y especiales Validez de contenido. Validez de constructo. Validez concurrente. Seguridad entre entrevistadores. Seguridad (consistencia interna). Sensibilidad al cambio. Estabilidad temporal. Criterios de validez y seguridad
  11. 12. Validez de contenido Selección de ítems relevantes . Alta proporción de presencia en la muestra destinataria (%). Consulta de instrumentos preexistentes. Consulta de textos relacionados. Selección propia arbitraria. Amplio listado y selección estadística casos/controles. -No comparaciones emparejadas. -Análisis Discriminante Escalonado ( 100% varianza total explicada...).
  12. 13. ---- Atención a la construcción de los ítems ---- Definición : clara, breve y sin ambigüedades. Inclusión : relevante. Intervalos de medida : si/no (relativamente informativa) incluir escalas de intervalos Escalas de intervalos : ventajas : respuestas más flexibles manejables como si fueran continuas. inconvenientes : definiciones imprecisas. Ejemplos: 0 (No)* 0 (No)** 1 (ligero) 1 (ligeramente, rara vez) 2 (moderado) 2 (bastante, a menudo) 3 (extremo) 3 (extremadamente, siempre) *Beck; **Osgood
  13. 14. Validez de constructo. El mejor estadístico para evaluar la estructura interna y la validez de constructo de un instrumento es el ANÁLISIS FACTORIAL. Permite conocer las dimensiones contenidas (factores) Permite expresar esa validez de forma mensurable (h 2 ). Valores >50% (ó 0,50) de varianza total explicada.
  14. 15. Validez concurrente. Si un instrumento es válido debe medir el objetivo de forma semejante a otro instrumento semejante preexis-tente y si no existe, una ICG. Estadístico a emplear: correlación.
  15. 16. Validez predictiva. Si un instrumento está destinado a realizar diagnósticos debe disponer de una buena validez predictiva respecto a un criterio externo aúreo. -sensibilidad (V+) -especificidad (V-) -% casos mal clasificados -fiabilidad diagnóstica kappa (  ) -probabilidad pi de acertar (  )
  16. 17. -sensibilidad (V+): a/(a+b) -especificidad (V-): d/(c+d) -% casos mal clasificados: c+b/Total SI No SI a b a+b NO c d c +d a+c b+d Total Criterio externo Instrumento F+: c/(c+d): 1-especificidad F-: b/(a+b): 1-sensibilidad Validez predictiva. -fiabilidad diagnóstica kappa (  ) 
  17. 18. Fiabilidad diagnóstica kappa (  ): kappa es un coeficiente de concordancia;  = 2 ( ad - bc )/(p1q2+p2q1) SI No SI a b p2 NO c d q2 p1 q1 1,00 Criterio externo Instrumento Fleiss y Cohen (1973) -fiabilidad diagnóstica kappa (  ) con valores a partir de 0,70 Validez predictiva, seguridad entre entrevistadores (  , r,  )... r (Pearson) para variables continuas;  (Spearman) para ordinales. κ Interpretación < 0 Pobre 0.0 – 0.20 Baja 0.21 – 0.40 Bastante 0.41 – 0.60 Moderada 0.61 – 0.80 Importante 0.81 – 1.00 Casi perfecta
  18. 19. SI No SI a b a+b NO c d c +d a+c b+d Total Criterio externo Instrumento Probabilidad pi de acertar (  ) H = a+d / Total  = (1 + √ 2H-1)/2
  19. 20. -Correlación ítem/total (r Pearson). El cuadrado de esa correlación (r 2 ) es un coeficiente de determinación. -Método de las dos mitades. Correlación más corrección de Spearrman-Brown: R= 2.r/(1+r) -Coeficiente correlación intraclase alfa de Cronbach (  )  = n.ř/ [1+(n-1) ř] n= número de ítems; ř =correlación media del ítem con los demás Seguridad (consistencia interna).
  20. 21. -Diferencias estadísticamente significativas entre Día 0 y Día XX -Correlación con una ICG u otra escala en el tiempo. -Otros procedimientos ( Día XX: R+..., R-..., Análisis Discriminante, de Regresión ...) Sensibilidad al cambio.
  21. 22. Prueba test-retets (r,  ) Pruebas de concordancia (  ) Estabilidad temporal.
  22. 23. Prueba test-retets (r,  ) Pruebas de concordancia (  ) Estabilidad temporal. GRÁCIAS

×