Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi Road Bangkok 10400, Tailandia E-mail Traducción al español, Dr en C Nicolás Padilla Raygoza, Facultad de Enfermería y Obstetricia de Celaya, Universidad de Guanajuato, México padillawarm@gmail.com o padilla@celaya.podernet.com.mx

Objetivo: al finalizar la conferencia, el estudiante será capaz de: 1. Conocer los conceptos y definición de validez y confiabilidad 2.Listar la importancia e impacto de la validez y de la confiabilidad 3. Especificar estrategias para evaluar validez y confiabilidad 4.Listar estrategias para incrementar la validez y confiabilidad 5. Describir principales tipos de sesgos

1. Validez 2. Confiabilidad Contenidos: 1. Validez 2. Confiabilidad Definición y sinónimos Puntos importantes Acceso a validez y confiabilidad Estrategias para incrementar la validez y confiabilidad 3. Principales tipos de sesgos

Medición válida Medición confiable Estudio médico o epidemiológico, la principal consideración es obtener: Medición válida Medición confiable de los factores de exposición y resultados de interés en la población en estudio “SIN SESGO y SIN ERRORES” o Minimizarlos lo más posible.

Validez y confiabilidad de las mediciones Para lograr un estudio de una calidad elevada: Asegúrese de las respuestas adecuadas a las preguntas del estudio Buen diseño de estudio Validez y confiabilidad de las mediciones Controle cualquier posible sesgo Buena cooperación entre * grupo de investigación, y * población del estudio

Monitoreo para comida rápida y perfil de colesterol sérico entre personas x1 x2 x3 X11, x12, x13 X21, x22, x23 X31, x32, x33 x6 x4 x5 X41, x42, x43 X51, x52, x53 X61, x62, x63

Monitoreo para comida rápida y niveles de colesterol sérico entre personas x1 x2 x3 X11 X21 X31 x5 x6 x4 X41 X51 X61

Instrumento o herramienta de investigación “equipos” Un contador de eritrocitos Un medidor de pH Una báscula electrónica “formas” Un cuestionario Un diario semanal de dieta “personas” Observadores/investigadores técnicos

¿Qué tan bueno es el instrumento o la herramienta? medición Sin sesgo ni error minimize sesgo Valor verdad verdadero medición válida/segura precisa/confiable

¿Qué es seguridad y precisión? ¿En qué piensa primero, cuando hablamos de validez y confiabilidad? ¿Cuál es la diferencia entre validez y confiabilidad? ¿Por qué la validez y confiabilidad son importantes en la conducción de cualquier investigación médica -en el laboratorio y en el campo?

• Reproducibilidad Precisión • Repetibilidad • Consistencia Definición: Una medición precisa teniendo el mismo valor cada vez que es medida Sinónimos • Confiabilidad • Repetibilidad • Reproducibilidad • Consistencia • Aceptación

Puntos importantes Precisión depende de: Tamaño de muestra Eficiencia del estudio VIP influencia el poder del estudio Precisión, confiabilidad y consistencia son afectados por ERROR ALEATORIO

Evaluando precisión Usando D.S. s Varianza (s2) Usando Coeficiente de variación= D.S. X Usando estadístico Kappa Usando alfa de Cronbach

Estrategias para aumentar la precisión 1. Estandarizando los métodos de medición Preparación del protocolo del estudio Preparación del manual de operaciones Escribiendo guías específicas o instrucciones para cada medición Sirviendo como base para descripción de métodos cuando se reporten los resultados

Estrategias para aumentar la precisión Preparación del manual de operaciones Escriba con precisión: - Como preparar al sujeto y el ambiente - Como efectuar y registrar la entrevista - Como calibrar los instrumentos

Estrategias para aumentar la precisión Escribir guías específicas o instrucciones para realizar las mediciones realización uniforme durante la duración del estudio

Estrategias para aumentar la precisión 2. Entrenando y certificando a los observadores Mejorando la consistencia de las técnicas de medición (varios observadores) Realizando un estudio piloto Para probar el poder de las técnicas especificadas en el manual de operaciones

Estrategias para aumentar la precisión 3. Refinando los instrumentos Escribiendo los cuestionarios o entrevistas para incrementar la claridad 4. Automatizando los instrumentos Usando aparatos mecánicos automáticos

Estrategias para aumentar la precisión 5. Repitiendo la medición El impacto del error aleatorio de cualquier origen, puede reducirse por Repitiendo la medición Usando el promedio de las dos mediciones

Seguridad validez conformidad Definición: El grado en el cual los resultados de una medición corresponden al verdadero estado o verdad Sinónimos: validez conformidad

Puntos importantes Seguridad es una función de “ERROR SISTEMÁTICO” VIP influencia la validez interna y externa del estudio A mayor error sistemático, menos segura la variable

Puntos importantes Es atribuido a: Aspectos metodológicos del diseño del estudio o análisis Selección de sujeto Calidad de la información obtenida Confusión Modificación de efecto (interacción) Misclasificación

Evaluando seguridad Comparación con técnicas de referencia Estándares dorados

Estrategias para aumentar seguridad 1. Estandarización de métodos de medición 2. Entrenamiento y certificación de los observadores 3. Refinación de instrumentos 4. Automatizando los instrumentos 5. Haciendo mediciones informales 6. Cegando 7. Calibración de instrumentos

Principales tipos de sesgos Sesgo de observador Sesgo del sujeto Sesgo instrumental Sesgo de información Sesgo de selección

Principales tipos de sesgos Sesgo del observador distorsión consistente en el reporte de la medición por el observador - Mediciones más intensivas en ciertos sujetos - Hace cuestiones acerca de exposiciones específicas algunas veces en casos, pero sólo una vez en controles

Principales tipos de sesgos Sesgo de observador Ej. Una tendencia a subestimar la tensión arterial en casos que sabemos está siendo tratados Ej. Una búsqueda persistente de registros médicos para una historia de tabaquismo en pacientes que se sabe tienen cáncer de pulmón

Principales tipos de sesgos Sesgo de sujetos distorsión consistente de la medición al sujeto de estudio - Recuerdo o reporte selectivo de un evento sesgo del respondente o sesgo de recuerdo

Principales tipos de sesgos Sesgo de instrumento - Puede resultar de función defectuosa de un instrumento mecánico - Puede resultar de uso inadecuado de herramientas o técnicas para una medición objetiva dando lugar a preguntas sobre el cuestionario

Principales tipos de sesgos Sesgo de información una distorsión en el estimado del efecto o variable, debido a: * Error en la medición * Misclasificación de los sujetos en la variable medible * Medición no válida

Principales tipos de sesgos Sesgo de información * Criterios diagnósticos incorrectos * Datos registrados previamente, inadecuados * Vigilancia diagnóstica desigual entre los grupos de exposición en estudios con seguimiento

Principales tipos de sesgos Sesgo de selección una distorsión del estimado del efecto resultado de cómo los sujetos fueron seleccionados de la población en estudio “sesgo de auto-selección”

Principales tipos de sesgos Sesgo de selección puede resultar de: Elección de grupos a ser comparados (en todos los tipos de estudios) - Elección del esquema de muestreo - Pérdida de seguimiento o NO RESPUESTA durANTE LA COLECCIÓN DE DATOS ( en estudios con seguimiento)

Principales tipos de sesgos Sesgo de selección puede resultar de: - Vigilancia selectiva/vigilancia diagnóstica varia con el status de exposición - Mediciones más intensivas en ciertos sujetos

Resumen 1. Confiabilidad : Precisión, reproducibilidad Error aleatorio 2. Validez : seguridad, conformidad Error sistemático Sesgo

Principales tipos de sesgos Sesgo de observador Sesgo de sujeto Sesgo de recuerdo Sesgo de respondente Sesgo de instrumento Sesgo de información Sesgo de selección

Confiabilidad y validez de la medición Definición El grado en el cual una variable tiene el mismo valor cuando se mide varias veces El grado en el cual una variable actualmente represente lo que se supone que representa Mejor forma de evaluar Comparación entre diferentes mediciones Comparación con un estándar de referencia

Validez Confiabilidad Aumento del poder para detectar efectos Aumento de la validez de las conclusiones Valor del estudio Amenazados por Error sistemático (sesgo) contribuye: Error aleatorio (varianza) contribuye: El observador El sujeto El instrumento El observador El sujeto El instrumento

Ilustración de las diferencias entre . . Ilustración de las diferencias entre precisión y seguridad

Ilustración de las diferencias entre . Buena precisión Pobre seguridad Pobre precisión Buena seguridad Ilustración de las diferencias entre precisión y seguridad

Diferencias entre validez y confiabilidad Frecuencia Valor verdadero Medición A C No confiable No válido B D Diferencias entre validez y confiabilidad

Diferencias entre validez y confiabilidad Frecuencia A C A- Válido y confiable B- Válido y no confiable C- No válido, confiable D- No válido no confiable No confiable No válido B D Medición Valor verdadero