Evaluación de conocimientos Exámenes escritos Claudia Castro

Tipos de preguntas De recordación Respuesta abierta: (ensayo o composición) Respuesta restringida: (respuesta breve) De reconocimiento Respuesta cerrada: (Verdadero – Falso, Selección Múltiple, Ordenamiento, Correspondencia)

Exámenes Escritos. Clasificación Pruebas de ensayo: preguntas de respuesta abierta Pruebas semi-estructuradas: preguntas de respuesta breve o restringida Pruebas estructuradas: preguntas cerradas

Pruebas de ensayo o desarrollo Preguntas abiertas: en general se propone un tema para que el alumno escriba “todo lo que sabe o recuerda” Ejemplo: “Inmunizaciones”

Pruebas de ensayo Posibilidades Posibilidad de evaluar habilidades relacionadas con el dominio de la lengua escrita (capacidad de síntesis, organización, etc.) Limitaciones Escasa validez Escasa Objetividad Baja confiabilidad La corrección insume una gran cantidad de horas docentes

Pruebas semi-estructuradas Preguntas de respuesta breve o restringida Se acota la respuesta, no permiten que el estudiante se explaye en temas irrelevantes o que no están en los objetivos de aprendizaje.

Pruebas semi estructuradas Posibilidades Las preguntas son de fácil diseño Aumenta la cantidad de temas a explorar Mayor posibilidad de acuerdo en la clave de respuestas entre los evaluadores Limitaciones Escasa validez Con frecuencia las preguntas suelen ser triviales y explorar el recuerdo de información La corrección insume bastante tiempo

Pruebas semi-estructuradas Ejemplo ¿Qué es el rinatovir? (Clave: Antiviral inhibidor de las proteasas) Pueden solicitar el recuerdo de información o explorar la capacidad de análisis y aplicación en situaciones clínicas

Pruebas estructuradas, “objetivas” Preguntas cerradas: los alumnos deben recordar, reconocer o identificar y marcar la respuesta entre las opciones que se le ofrecen: Alternativas Constantes Apareamiento o correspondencia Ordenamiento Selección múltiple ................................................................................................................................................................................................................................................................................................................................................................................................................................................................................................................................

Alternativas constantes Alternativas constantes. Verdadero – Falso; Si – No; Correcto - Incorrecto Ejemplo: Un niño con enfermedad aguda leve, tratado con terapia antimicrobiana puede ser vacunado. V ( ) F ( )

Apareamiento o correspondencia Relacione las formas de TBC extrapulmonar con las características clínicas o epidemiológicas. Pleuritis tuberculosa ...................... Meningitis tuberculosa .................. Adenitis tuberculosa .................... TBC miliar Más frecuente en la mujer PPD negativa en el 50% de los casos El examen físico suele ser normal Se asocia a elevada mortalidad Inicio incidioso Es la forma más grave de TBC extrapulmonar Inicio en forma brusca

Ordenamiento Ordene la siguiente secuencia de eventos celulares (no observables clínicamente) que llevan a un cuadro de asfixia neonatal. Coloque al lado de cada opción el número que corresponda a la secuencia correcta. a) Falla secundaria de energía .......... b) Muerte neuronal ......... c) Falla primaria de energía........... d) Alteración del intercambio gaseoso ......... e) Mecanismos de citotoxicidad ........

Selección múltiple Son aquellos ítem en las que dada una pregunta o enunciado se ofrecen 4 ó 5 opciones entre las que el alumno debe elegir una como respuesta correcta. Generalmente se los identifica como “choice”.

Preguntas de selección múltiple. Ejemplo ¿Cuál es la secuela electrocardiográfica más frecuente en pacientes operados de Tetralogía de Fallot? a) hemibloqueo anterior izquierdo b) bloqueo de rama derecha (Clave) c) bloqueo auticuloventricular completo d) bloqueo de rama izquierda

Preguntas de selección múltiple. Un varón de 3 meses es llevado al consultorio por dificultades en la alimentación y mal progreso de peso. Es un niño nacido de término, con peso adecuado y sin complicaciones perinatológicas. La madre refiere que cuando lo prende al pecho succiona débilmente y que ha tenido varios episodios de tos y ahogo durante la alimentación. Aumentó 500 gramos desde el nacimiento, no tiene sonrisa social ni línea media, es francamente hipotónico y presenta criptorquidia bilateral. El resto del examen es normal.

El estudio de este paciente se debe iniciar con: a) Interconsulta con genética. b) Dosaje de enzimas musculares. c) Electromiograma y velocidad de conducción. d) Biopsia muscular y de nervio periférico

Pruebas estructuradas Posibilidades Mayor validez Mayor objetividad Permiten evaluar un gran número de alumnos en poco tiempo Fácil corrección Limitaciones Dificultad en la preparación Generalmente, exploran niveles taxonómicos bajos Efecto de “reconocimiento” en los estudiantes

¿Cómo mejorar los exámenes escritos estructurados? Seleccionar los objetivos de aprendizaje que se van a explorar en la prueba Elaborar la tabla de especificaciones (validez) Escribir las claves de respuesta esperadas Consensuar las claves entre docentes Acordar en UNA sola respuesta correcta (objetividad)

Tabla de especificaciones (validez) Se trata de planificar el examen de modo de garantizar la validez de contenido. Es una manera racional de planificar la prueba, ayuda a decidir cuáles son los aspectos útiles o importantes que se deben explorar.

Tabla de especificaciones Se puede confeccionar como un cuadro de doble entrada donde aparecen en una coordenada los distintos tipos de conducta esperados o niveles de profundidad de las preguntas (categorías taxonómicas) y, en la otra, los temas. Se pondera la importancia de cada tema y cada nivel taxonómico con mayor o menor número de preguntas

Tema a evaluar: Primer año de vida. Atención del niño sano Subtemas a considerar I C A T Alimentación: - LM - Alimentación complementaria Vacunas Indicaciones Contraindic. Screening Visión Audición

I C A Total 80 30 20 Subtemas a considerar Alimentación: - LM complementaria 30 Vacunas Indicaciones Contraindic. Screening Visión Audición 20 80

I C A Total 80 12 10 8 30 9 2 20 33 29 18 Subtemas a considerar Alimentación: - LM - Alimentación complementaria 12 10 8 30 Vacunas Indicaciones Contraindic. Screening Visión Audición 9 2 20 33 29 18 80

Tabla de especificaciones Define lo que se quiere medir antes de redactar las preguntas. Refleja el consenso por parte de los profesores acerca de lo que debe ser medido. Grafica la distribución y proporción de las preguntas según los contenidos a evaluar en el examen. Proporciona una “fotografía” exacta de lo que será el examen.

Número de preguntas en el examen (confiabilidad) A mayor número de ítem, mayor posibilidad de resultados confiables Existe relación entre longitud de la prueba y confiabilidad En una prueba estructurada 80 ítem, es un número adecuado para alcanzar una confiabilidad aceptable (0.80)

Acuerdo entre expertos (objetividad) Asignación de puntajes poco influido por la subjetividad del evaluador. Acuerdo entre docentes con las claves de respuesta correcta. Los resultados de un examen son objetivos cuando varios examinadores frente a una misma prueba asignan la misma nota.

Recomendaciones generales Comprobar que las preguntas estén relacionadas a objetivos importantes. Tratar que el instrumento en su totalidad sea válido, esto es que evalúe el logro de los objetivos de aprendizaje. Explorar capacidades diferentes a la memorización Evitar el exceso de abreviaturas y siglas Plantear el examen de tal forma que las preguntas sean completamente independientes de las respuestas a otras preguntas

Sugerencias para la elaboración de preguntas estructuradas Base o enunciado Claridad, evitar la ambigüedad, orientar sobre lo que se está preguntando Se debe destacar la operación que debe hacer el estudiante en la pregunta Debe tener todos los datos necesarios para la interpretación de la situación

En relación a las opciones: los distractores y la respuesta correcta deben ser homogéneos reducir la posibilidad de respuesta correcta por azar. utilizar distractores (una opción que no es la correcta) plausibles o lógicos ubicar la clave en las distintas posiciones (a –b –c –d)