Procedimiento para Diseñar Pruebas Objetivas Curso-Taller para Profesores EST-118 Verano 2011 Curso-Taller para Profesores EST-118 Verano 2011

1º. Decisión para elaborar un examen Acordar 1.Qué materias y el orden en que pondrán en marcha un examen objetivo 2.Nombrar un Coordinador para cada examen 3.El Coordinador formará un comité académico ProfesoresDirectivos

2º. Acciones del Coordinador para elaborar un examen Coordinador Comité Académico Tabla de Especificaciones Definir: El propósito de la prueba El Perfil Referencial o conjunto de habilidades y conocimientos mínimos que debe evaluar la prueba. Los temas del área de conocimiento y los niveles (taxonómicos) en que se deberá explorar el conocimiento. Los pesos o porcentajes de reactivos por temas para establecer el adecuado muestreo del universo de contenidos por evaluar.

3º. Acciones de todos los participantes para elaborar un examen Directivos Profesores Coordinador Comité Académico Revisar, discutir, modificar y en su caso aprobar la Tabla de Especificaciones del examen

4º. Acciones del Coordinador una vez aprobada la Tabla de Especificaciones CoordinadorProfesores de la asignatura 1.El Coordinador organiza un taller para los profesores de la asignatura (internos y externos) para la elaboración de reactivos, asesorados por el coordinador y por el comité académico (si es el necesario) cubriendo los diferentes temas y niveles taxonómicos. 2.Se codifican los reactivos para su fácil control (materia, tema y nivel) e identificación del autor. 3.Se transcriben las preguntas a un banco de reactivos

5º. Acciones de todos los participantes para elaborar un examen Directivos Profesores Coordinador Comité Académico Revisar en los reactivos el contenido y la redacción (Formato). Contenido: correspondencia con la Tabla de Especificaciones. Redacción clara y adecuada a la población objetivo de la base y opciones de respuesta.

6º. Acciones del Coordinador y Profesores CoordinadorProfesores de la asignatura 1.Seleccionar a los grupos para probar todos los reactivos (piloteo) en varios exámenes Para estimar tiempos de ejecución; y Los primeros índices estadísticos para análisis de reactivos

7º. Acciones del Coordinador 1.Para cada reactivo calcular: Grado de dificultad (GD) Grado de dificultad (GD) GD=(Total de respuestas correctas/Total de sustentantes con Resp. válidas) X 100% Poder de discriminación (PD) Poder de discriminación (PD) PD=(Respuestas correctas del grupo superior- Respuestas correctas del grupo inferior)/Total de sustentantes Norma Discriminativa (ND) Norma Discriminativa (ND) ND= o.3XGD para 0≤GD≤76.92 ND= o.3XGD para 0≤GD≤76.92 ND=100-GD para 76.92≤GD≤100 Relación Discriminativa (RD) Relación Discriminativa (RD)RD=PD/ND

7º. Acciones del Coordinador (cont.) 2. Comparar los valores encontrados para cada reactivo en el piloteo con las condiciones siguientes para aceptar los reactivos: 20≤GD≤80PD≥NDRD≥1

8º. Acciones de todos los participantes para elaborar un examen Directivos Profesores Coordinador Comité Académico Acordar tamaño del examen considerando: El tiempo que se dispone para cada examen (se requiere de 3min/pregunta) Porcentaje de error del instrumento

8º. Acciones de todos los participantes para elaborar un examen (cont.) % error No. de reactivos Considerar que todo instrumento tiene un error y que el examen puede tener un error de medida de aproximadamente:

9º. Acciones del Coordinador 1.Con el acuerdo del pleno se generan los exámenes y las versiones con un GD=50%. 2.Se aplican a los alumnos 3.Se comprueban los valores de GD, PD, ND y RD de los reactivos 4.Se establece la escala de calificación donde: La media (GD)=6.0 La media +1 Desv. Std.=7.3 La media+2 Desv. Std.=8.6 La media+3 Desv. Std.=10 5.Se califica a los alumnos

10º. Acciones del Coordinador Se actualizan los valores de calibración de los reactivos en el banco de reactivos, para tener un valor más real la próxima vez. Si se requieren más reactivos volver al taller de reactivos| Si se cambian los programas, ajustar la Tabla de Especificaciones