Perspectivas actuales nacionales e internacionales en evaluación educativa. Taller práctico PISA desde el interior: matemáticas Ruth Martín Escanilla Joaquín M. Vera Moros

El marco de evaluación de PISA Capacidad de los individuos (15 AÑOS) para formular, emplear e interpretar las matemáticas en situaciones y problemas presentes en contextos del mundo real. Incluye: razonamiento matemático y la utilización de conceptos, procedimientos, datos y herramientas matemáticas para describir, explicar y predecir fenómenos. reconocimiento del papel que las matemáticas desempeñan en el mundo a la hora de realizar juicios fundados y tomar decisiones como ciudadanos constructivos, comprometidos y reflexivos.

El marco de evaluación de PISA Instituto Nacional de Evaluación Educativa

El marco de evaluación de PISA Instituto Nacional de Evaluación Educativa

El marco de evaluación de PISA Instituto Nacional de Evaluación Educativa

El marco de evaluación de PISA Instituto Nacional de Evaluación Educativa

Marco de evaluación de TIMSS 4º EP Recordar Reconocer / identificar Calcular Recuperar Medir Clasificar /ordenar Conocimiento Seleccionar Representar Modelar Poner en práctica Resolver problemas de rutina Aplicación Analizar Generalizar / especializar Integrar / sintetizar Justificar Resolver problemas no rutinarios Razonamiento Dominios cognitivos Porcentajes Conocimiento 40% Aplicación Razonamiento 20% Instituto Nacional de Evaluación Educativa

Marco de evaluación de TIMSS 4º EP Números Números naturales Fracciones y decimales Expresiones numéricas con números naturales Modelos y relaciones Formas y medidas geométricas Puntos, líneas y ángulos Formas bidimensionales y tridimensionales Presentación de datos Lectura e interpretación Organización y representación Dominios de contenido Porcentajes Números 50% Formas y mediciones geométricas 35% Representación de datos 15% Instituto Nacional de Evaluación Educativa

Proceso de construcción de pruebas MATRIZ ESPECIFICACIONES Tipo respuesta: Elección múltiple Cerrada Abierta construida Abierta Estímulo Ítem Pilotaje Aplicación principal Explotación de datos Respuesta elección múltiple: ¿Quién escribió “El ingenioso hidalgo don Quijote …”? A / B / C / D Respuesta cerrada (sí/no bien/mal): ¿Quién escribió “El ingenioso hidalgo don Quijote …”? Debe dar la respuesta correcta Respuesta abierta construida: ¿Qué obras escribió Miguel de Cervantes? Esperamos que responda al menos 2 ó 3 de las siguientes “El ingenioso hidalgo don Quijote …”, “Rinconete y Cortadillo”, “La Galatea”, “La ilustre fregona” Respuesta abierta: Cuéntame la biografía resumida de Miguel de Cervantes CODIFICACIÓN ELABORACIÓN

Unidades de evaluación en PISA ÍTEM ÍTEM ESTÍMULO ÍTEM Instituto Nacional de Evaluación Educativa

Unidades de evaluación en PISA ÍTEM ÍTEM ESTÍMULO ÍTEM Instituto Nacional de Evaluación Educativa

Recomendaciones para seleccionar estímulos Buscar estímulos en los que el alumno pueda tener interés. Seleccionar en función de las preguntas que se harán: Textos (continuos o discontinuos). Gráficos, imágenes, fotografías, dibujos, etc. Esquemas (sinópticos, eléctricos, planos, distribución, montaje). Comentarios, notas al pie, aportaciones laterales. Tiras cómicas. Mapas de metro, de autobús, de ciudad, de carreteras. Organigramas, tablas, listados, notas manuscritas, carteles… Deben ser correctos y respetuosos desde el punto de vista de la igualdad de los sexos, creencias religiosas, etc.

Preguntas de respuesta cerrada Alternativa simple “El Quijote” lo escribió Cervantes. V/F Alternativa múltiple ¿Quién escribió “El Quijote”? Góngora Quevedo Cervantes Unamuno Elección múltiple compleja Indica cuáles de las siguientes afirmaciones son ciertas: “El Quijote” lo escribió Cervantes. V/F El caballo de Don Quijote se llamaba Clavileño. V/F Cervantes escribió “El licenciado vidriera”. V/F

Preguntas abiertas de respuesta elaborada Respuesta elaborada construida ¿Quién escribió “El Quijote”? ________________________ Respuesta elaborada semiconstruida Cita dos obras escritas por Miguel de Cervantes. 1. _______________________ 2. _______________________ Respuesta elaborada larga ¿Qué supuso “El Quijote” en la época en la que fue escrito? _________________________________

Recomendaciones para elaborar preguntas (ítems) Si son de respuesta múltiple: Incluir un número par de respuestas. Se recomienda cuatro. Solo exista una respuesta inequívocamente correcta. Los distractores sean plausibles pero erróneos. Todas las opciones tengan una forma de redacción similar. Todas las opciones tengan una longitud similar. No emplear preguntas negativas o alternativas negativas.

Recomendaciones para elaborar preguntas (ítems) Si son de respuesta elaborada: No incluir expresiones del tipo “cita al menos tres …”. Ser preciso en lo que se pide ayuda a la codificación. Podríamos sustituir la expresión anterior por “Enumera tres …”. Evitar preguntar cuestionas vinculadas con el idioma de manera directa: “sustituye la palabra por un sinónimo”. Elaborada larga: plantearla para que la codificación sea posible => ejemplos de respuestas reales.

Codificación Cuando está “bien o mal”: Puntuación máxima Código 1: … (cuando es abierta se acompaña con ejemplos de lo que se considera que está correcto) Sin puntuación Código 0: otras respuestas … Código 9: sin respuesta

Codificación Cuando hay puntuación parcial: Puntuación máxima Código 2: … (ejemplos de lo que se considera que está correcto) Puntuación parcial Código 1: … (ejemplos de lo que se considera que está parcialmente correcto) Sin puntuación Código 0: otras respuestas … Código 9: sin respuesta

Modelo de ficha de codificación Instituto Nacional de Evaluación Educativa

Instituto Nacional de Evaluación Educativa ¡Muchas gracias! www.mecd.gob.es/inee @educaINEE blog.educalab.es/inee INEE MECD es.slideshare.net/INEE_MECD educalab.es/inee Instituto Nacional de Evaluación Educativa Ministerio de Educación, Cultura y Deporte Paseo del Prado, 28, 4.ª planta ‒ 28014 Madrid (España) www.mecd.gob.es/inee blog.educalab.es/inee