ELABORACIÓN DE INSTRUMENTOS (Construcción de Reactivos)

Presentación del tema: "ELABORACIÓN DE INSTRUMENTOS (Construcción de Reactivos)"— Transcripción de la presentación:

1 ELABORACIÓN DE INSTRUMENTOS (Construcción de Reactivos)
DIRECCIÓN DE EVALUACIÓN EDUCATIVA CURSO-TALLER ELABORACIÓN DE INSTRUMENTOS (Construcción de Reactivos)

2 OBJETIVOS DEL CURSO-TALLER
Dar a conocer una propuesta teórico-metodológica para la elaboración de instrumentos de evaluación. Introducir a los participantes en la elaboración de pruebas escritas válidas y confiables, que midan el aprovechamiento escolar de los alumnos. 1

3 LOGÍSTICA DEL CURSO-TALLER
Tratamiento referencial de aspectos metodológicos que se involucran en los procesos de construcción de reactivos e instrumentos Ejercitación de lo tratado en el plano teórico, con énfasis en los procesos de análisis de materiales y construcción de reactivos Realización de todas las etapas que involucra la elaboración de instrumentos, desde el análisis de materiales hasta el ensamblaje de los instrumentos definitivos, incluidos los procesos de revisión y validación Carácter teórico-práctico 2

4 en función de parámetros
EVALUACIÓN Captación de Información Observación y/o Medición Juicios de valor en función de parámetros 3

5 TIPOS DE EVALUACIÓN 4 (TEMPORALIDAD) EVALUACION DIAGNÓSTICA FORMATIVA
Se realiza para conocer el nivel de aprendizajes precurrentes que tienen los educandos para iniciar un curso, área, asignatura, tema o unidad. FORMATIVA Se realiza para conocer el nivel de aprendizajes que han alcanzado los educandos al término de cada etapa del proceso enseñanza-aprendizaje. SUMARIA Se realiza para conocer el nivel de aprendizajes adquiridos por los educandos al término del curso escolar. 4

6 EVALUACIÓN DEL APRENDIZAJE
Con referencia a NORMA CRITERIO Se compara al individuo con los resultados del grupo evaluado. Útil para establecer el orden o jerarquía de los individuos dentro de un grupo, de acuerdo con sus resultados. Se comparan los aciertos de un individuo con un criterio absoluto. Útil para determinar si se domina o no un contenido; si se cuenta con los elementos mínimos indispensables para saber y saber hacer. 5

7 VALIDEZ CONFIABILIDAD CARACTERÍSTICAS DE LOS INTRUMENTOS DE MEDICIÓN
Permite determinar si un instrumento mide lo que se quiere medir, cumple la función para la cual se construyó. 6

8 ALGUNOS TIPOS DE VALIDEZ
¿EL INSTRUMENTO EXPLORA PERTINENTEMENTE EL “CONSTRUCTO TEÓRICO” ? DE CONSTRUCTO ¿EL INSTRUMENTO REFLEJA PERTINENTEMENTE LOS “CONTENIDOS A EXPLORAR” Y LA RELEVANCIA DE ELLOS ? DE CONTENIDO PREDICTIVA ¿EL INSTRUMENTO PERMITE “SUPONER” UN COMPORTAMIENTO FUTURO DE UN SUJETO O UNA POBLACIÓN ? 7

9 PROCESO DE ELABORACIÓN DE INSTRUMENTOS
ANALIZAR MATERIALES RELACIONAR Y SELECCIONARCONTENIDOS ELABORAR TABLA DE ESPECIFICACIONES DISCUTIR REACTIVOS CONSTRUIR REACTIVOS APRUEBAR REACTIVOS NO ENSAMBLAR INTEGRAR EL INSTRUMENTO SÍ 8

10 ANÁLISIS DE LOS MATERIALES
El análisis de contenido de los materiales es un proceso ordenado, objetivo, cuantitativo y cualitativo. Los materiales son: plan y programas, libros de texto (libro de alumnos y docentes). 9

11 ANÁLISIS DEL MATERIAL FUENTE
CONTENIDOS REFERENCIAS BIBLIOGRAFICAS En estas dos columnas el docente deberá identificar como están agrupados los contenidos, de acuerdo a los planes y programas de estudio de su nivel y modalidad educativa. 10

12 OBJETIVOS O CONTENIDOS
PROCESO PARA EL ANÁLISIS DE MATERIALES OBJETIVO: ELABORAR TABLA DE ESPECIFICACIONES MATERIAL FUENTE DEFINIR LA UNIDAD DE ANÁLISIS ESTABLECER CRITERIOS DESARROLLAR EL ANÁLISIS REVISIÓN DEL ANÁLISIS REPLANTEAR O CORREGIR NO SI RELACIÓN DE OBJETIVOS O CONTENIDOS 11

13 12 MODELO DE ANÁLISIS CRITERIOS DE ANÁLISIS RELEVANTE MENSURABLE
OBSERVACIONES SI NO CONTENIDOS 12

14 TABLA DE ESPECIFICACIONES
Con base en los contenidos seleccionados producto del análisis de los materiales, se procede a construir la tabla de especificaciones, que es la estructura o esquema del instrumento. 13

15 ELABORACIÓN DE LA TABLA DE ESPECIFICACIONES
UNIDAD DE ANÁLISIS CRITERIOS DE ANÁLISIS RELACIÓN DE CONTENIDOS A MEDIR IDENTIFICACIÓN DE LOS NIVELES DE COMPLEJIDAD TABLA DE ESPECIFICACIONES 14

16 NIVELES DE COMPLEJIDAD TAXONOMIA
1. HECHOS En este nivel se alude a procesos de memorización. Se identifican y reconocen, objetos, sucesos, ideas o fenómenos en función de sus atributos o características. Supone la evocación o recuerdo de información concreta, asociada a símbolos especiales o términos sencillos directos. Palabras clave: Datos, nombrar, identificar, repetir, ¿qué, quién, cuándo, dónde?. El autor de una novela La notación aritmética Partes de una planta Recursos naturales de una región Los nombres de acontecimientos, fechas y lugares Las capitales de los estados Ejemplos: 15

17 NIVELES DE COMPLEJIDAD TAXONOMIA
2. CONCEPTOS Y PRINCIPIOS En este nivel se reconocen significados, es decir términos que designan a un conjunto de ideas, sucesos o atributos. Se definen y agrupan propiedades, alrededor de una clase. Comprensión o uso de un conocimiento e idea específica, sin la necesidad de agruparla con otras o de conocer sus implicaciones totales. En el caso de los principios, estos aluden a los fundamentos o bases en los que se apoya la formulación de un estudio o conocimiento. Palabras clave: comprensión, explicación, descripción, asociación, diferenciar, interpreta, compara, parafrasea Isomorfismo del sistema de números reales y puntos de una recta El ciclo hidrológico Fundamentos de la nomenclatura empleada en la clasificación de los climas Los principios del federalismo Conceptos Ejemplos: 16

18 NIVELES DE COMPLEJIDAD TAXONIMIA
3. APLICACIÓN DE PROCEDIMIENTOS Este nivel significa hacer uso del conocimiento. Permite identificar una secuencia de acciones en el tiempo. En procedimientos complejos se evoca la estructura conceptual del sistema. La conceptualización permite realizar relaciones de covariación, causalidad o prescripciones descriptivo –explicativo o prescritiva según las características de las relaciones en juego. Selecciona transfiere y utiliza información para completar una tarea Palabras clave: aplicación de procedimientos, ordenamiento, identificación de secuencias, organizar, clasificar, experimenta, construye. La organización de un debate El algoritmo de las operaciones aritméticas básicas Metabolismo Transformaciones energéticas Los pasos a seguir en la inscripción de un alumno irregular Ejemplos: 17

19 NIVELES DE COMPLEJIDAD TAXONOMIA
4. RESOLUCIÓN DE PROBLEMAS En este nivel se analizan, comprenden y resuelven problemas. Permite el desarrollo del pensamiento divergente. Implica la selección y empleo de una o más reglas, normas y operaciones posibles, a la par del manejo de la estructura teórica. Conlleva a un análisis de medios y fines, supone el empleo de operaciones por analogía o por transferencia. Palabras clave: análisis, síntesis, inferir, solucionar, arreglar, contrastar La resolución de problemas aritméticos. Efectos secundarios de la eliminación de un eslabón de cadenas alimenticias. La deducción de la escala de un mapa. Causas, factores y consecuencias que posibilitan la aparición de acontecimientos o fenómenos. Ejemplos: 18

20 NIVELES DE COMPLEJIDAD TAXONOMIA
5. GENERALIZACIÓN Este nivel supone elaboración de juicios acerca de materiales y métodos utilizados. Construcción de nuevos planteamientos a partir de relaciones, propiedades, procesos y/o sistemas. Lleva a valorar o criticar con base en criterios previamente definidos. Permite combinar ideas para integrar un producto, plan o propuesta nuevos. Palabras clave: generalización, emisión de juicios, evaluación, construcción de propuestas, innovación, plantea hipótesis, diseña, planea, justifica ¿qué pasa si? Fórmulas generales en ciencias. Procesos de síntesis. Planteamiento de teoremas. Mapas conceptuales. Ejemplos: 19

21 Alto nivel Bajo nivel 20 4. RESOLUCIÓN DE 5. GENERALIZACIÓN PROBLEMAS
2. CONCEPTOS Y PRINCIPIOS 1. HECHOS 3. APLICACIÓN DE PROCEDIMIENTOS 4. RESOLUCIÓN DE PROBLEMAS 5. GENERALIZACIÓN Alto nivel Bajo nivel Recordar, reconocer información Explica, parafrasea Calcula, resuelve, determina, aplica Analiza, sintetiza modela, deriva, interpreta Juzga, justifica, propone, diseña, critica 20

22 TABLA DE ESPECIFICACIONES
UNIDAD CONTENIDOS NIVELES DE COMPLEJIDAD 1 2 3 4 5 TOTA L SUBTOTAL TOTAL 21

23 PROCESO DE ELABORACIÓN DE REACTIVOS
TABLA DE ESPECIFICACIONES CONSTRUCCIÓN DE REACTIVOS REVISIÓN Y DISCUSIÓN EN COLEGIADO REALIZAR CORRECCIONES SÍ NO 22

24 ¿QUÉ ES UN REACTIVO? Unidad mínima de una prueba. Pregunta o sentencia diseñada para explorar la existencia de un conocimiento, habilidad o actitud. Preguntar lo que queremos medir. Se elabora para medir y no solamente preguntar. Tiene como fin determinar cuánto sabe el alumno y no demostrar qué no sabe. 23

25 CLASIFICACIÓN DE REACTIVOS
Según tipo de respuesta Características Abierta: Ensayo Respuesta breve o complementación Canevá sin opciones Subjetivos Difícil calificación e interpretación Cerrada: Ordenamiento o jerarquización Correspondencia Opción múltiple Canevá con opciones Objetivos Mayor facilidad de calificar exento de interpretaciones 24

26 NORMAS GENERALES PARA LA CONSTRUCCION DE REACTIVOS
Deben apegarse a la información fuente y considerar los contenidos establecidos en la tabla de especificaciones. Debe plantear un problema o situación bien definida: incluir los elementos necesarios y suficientes para su solución, escribirse con claridad. Deben ser redactarse en términos sencillos, claros y precisos, con base en el lenguaje propio de nivel, asignatura y grado educativo. Deben ser independientes entre si para evitar que unos ayuden a contestar otros. 25

27 NORMAS GENERALES PARA LA CONSTRUCCION DE REACTIVOS
Para cada tipo de reactivo es pertinente señalar el procedimiento de resolución. Debe evitarse formularlos con la misma redacción utilizada en las fuentes de información, excepto cuando se trate de leyes y definiciones, (estas deberán entrecomillarse). Debe evitarse el planteamiento de reactivos que incomoden al alumno. Debe evitar involucrar de manera irónica, nombres de funcionarios o instituciones. Evitar la mención de marcas de productos y/o situaciones que fomenten su consumo y los vicios. 26

28 NORMAS PARA LOS REACTIVOS DE RESPUESTA CERRADA
Los enunciados deberán tener una estructura y extensión similar. La disposición de los enunciados y de las opciones de respuesta debe ser azarosa o, en tal caso, ordenarse por su extensión. Entre la pregunta y las opciones debe haber coherencia gramatical; una excepción a esta norma se da cuando se explora “correspondencia gramatical”. Los distractores deben erigirse como “virtuales soluciones” al problema planteado, es decir, deben ser errores de razonamiento. Pero la construccíón de estos deben realizarse con la pretensión de que éstos sean abordados por los “que no saben”. Las opciones propuestas deben estar equilibradas en cuanto a su extensión. 27

29 NORMAS PARA ELABORAR REACTIVOS DE ORDENAMIENTO O JERARQUIZACIÓN
Los elementos que conforman un reactivo de ordenamiento o jerarquización deben presentarse en forma de lista. Los componentes del reactivo deben ser homogéneos en cuanto a campo semántico. Por cuestiones meramente de presentación se recomienda que la estructura así como la extensión de los componentes debe ser similar (si se trata de palabras). Para cada reactivo de este tipo debe especificarse claramente el criterio de ordenamiento o jerarquización. 28

30 NORMAS PARA ELABORAR REACTIVOS DE CORRESPONDENCIA (RELACIÓN DE COLUMNAS)
El bloque de reactivos de correspondencia consta de dos componentes: un conjunto de preguntas y un grupo de respuestas correctas con opciones distractoras. Tanto preguntas como opciones de respuesta pueden tener una estructura variada (ser nombres, ideas completas, dibujos o gráficos). La estructura de las preguntas debe ser la misma. De igual forma, debe ser con el conjunto de opciones (aunque su estructura respecto de las preguntas sea diferente). Se recomienda que tanto las preguntas como las opciones de respuesta sean breves en su expresión. No obstante, en las preguntas la extensión puede ser un poco mayor por ser el planteamiento base. 29

31 NORMAS PARA ELABORAR REACTIVOS (RELACIÓN DE COLUMNAS)
DE CORRESPONDENCIA (RELACIÓN DE COLUMNAS) Es recomendable que la cantidad de preguntas en un bloque sea de acuerdo con la extensión y complejidad del contenido a evaluar. En el grupo de respuestas se recomienda incluir dos distractores. Debe evitarse la repetición de términos entre el grupo de preguntas y el grupo de opciones de respuesta. Cada una de las opciones de respuesta del bloque debe ofrecer una virtual solución a cada una de las preguntas. Cada una de las preguntas debe admitir sólo una respuesta correcta. 30

32 NORMAS PARA ELABORAR REACTIVOS
DE OPCIÓN MÚLTIPLE La pregunta debe estar bien definida, que tenga sentido propio. La comprensión del problema a resolver no debe de depender de la lectura de las opciones de respuesta. Sólo una de las opciones debe responder correcta y completamente el problema planteado. Los distractores no deben ser parcialmente correctos. Sólo en el caso en que se pregunte por la opción más correcta, y se recomienda resaltar dicha expresión. 31

33 NORMAS PARA ELABORAR REACTIVOS DE OPCIÓN MÚLTIPLE
Las opciones deben guardar entre sí un equilibrio en su aspecto gramatical en: sintaxis, género, número, persona, tiempo y modo, excepto cuando se pregunte por estos aspectos en inglés y español. Debe evitarse la sinonimia o repetición de términos entre la base y las opciones de respuesta. En el caso de que la repetición sea “necesaria”, debe equilibrarse en todas las opciones. Debe evitarse el uso de declaraciones negativas en las opciones, pero si fuese “necesario” hacerlo, debe equilibrarse en las otras opciones (al menos en la mitad de ellas). 32

34 NORMAS PARA ELABORAR REACTIVOS
DE OPCIÓN MÚLTIPLE Si las opciones de respuesta están constituidas por cifras numéricas, éstas deben ordenarse en función de su valor (ascendente o descendentemente) y alinearse en referencia con el punto decimal (sea explícito o implícito). Esta norma no procede cuando se trata de expresiones algebraicas. No deben plantearse a modo de opciones expresiones del tipo: “todas las anteriores”, “ninguna de las anteriores”... Para fines de controlar en lo posible el factor azar al contestar, se recomienda que, la respuesta correcta se ubique en un porcentaje similar en cada una de las opciones (y sin guardar algún orden o sin seguir repetitivamente un tren de respuestas). 33

35 NORMAS PARA ELABORAR REACTIVOS DE CANEVÁ CON Y SIN OPCIONES
La pregunta debe expresar con claridad qué se espera como respuesta del sustentante, así como el procedimiento para emitir la respuesta. Dado que este tipo de reactivos es una variante del de opción múltiple en términos de su presentación y de la forma de emitir la respuesta, se deberá aplicar la misma normatividad. Para los reactivos de canevá sin opciones, también se aplican las normas de los reactivos de opción múltiple, con la diferencia que no se presentan las opciones de respuesta. 34

36 NORMAS PARA ELABORAR REACTIVOS
DE RESPUESTA BREVE Los reactivos de respuesta breve o complementación se redactan comúnmente como enunciados incompletos, como órdenes o como preguntas que manifiestan el problema o situación a resolver y que exigen -a manera de respuesta- una palabra o una frase breve susceptible de ser debidamente controlada. Ello implica abordar completamente la gama de posibles respuestas correctas. El reactivo de respuesta breve debe inquirir sobre un problema único y bien definido. El reactivo debe expresarse de manera tal que la repuesta se manifieste con una sola palabra (o elemento, según el caso) o una frase breve. 35

37 NORMAS PARA ELABORAR REACTIVOS
DE RESPUESTA BREVE El reactivo debe admitir una sola respuesta –que satisfaga pertinentemente el problema o situación-, aunque ésta pueda ser enunciada con sinónimos. En este sentido, los criterios de calificación deben considerar dichos sinónimos. El espacio determinado para la emisión de la respuesta debe indicarse con una línea continua. La línea no debe ser fraccionada aun cuando la respuesta implique más de una palabra o elemento. La extensión de la línea para la emisión de la respuesta no debe constituirse en un determinante específico para contestar. 36

38 ALGUNAS CONSIDERACIONES DE LOS
REACTIVOS DE ENSAYO Los reactivos de ensayo (llamados también de composición o por temas) obedecen a una clasificación de los instrumentos para indagar bajo un criterio amplio que se refiere al “diseño” del instrumento y otro más específico que tiene que ver con la “estructura”. Ante este tipo de reactivo, el sujeto sustentante debe –dado un planteamiento- desarrollar información con “libertad” (acotado únicamente por las condiciones que se establezcan en el planteamiento), demostrar su habilidad para organizar sus ideas respecto del tema que se aborda, manifestar su creatividad y su capacidad para analizar, argumentar, enjuiciar... y plantear soluciones. En este sentido, su uso para explorar habilidades es muy rico (por ejemplo, para observar procesos de desarrollo, síntesis o extrapolación de información). No obstante, quizá sólo el maestro de aula –con otros indicadores del “comportamiento cotidiano” del educando- podría controlar “mejor” la respuesta y sugerir un diagnóstico “más atinado”. 37

39 FORMATO PARA EL CONTROL DE REACTIVOS
ASIGNATURA/ BLOQUE/NUCLEO: Química (Bloque II) GRADO: Tercero EJES TEMÁTICOS: CONTENIDO: Combustibles químicos. Alcoholes No. REAC.: 18 AUTOR: DGE RC: B FECHA: /10/99 REF. BIBLIOGRÁFICA: Plan y Programas de Estudio de Educación Secundaria 1993 pp. 95 Telesecundaria, Asignaturas Académicas, Conceptos Básicos, volumen I. pp. 443 El etanol es el compuesto que se emplea en medicina y se conoce como alcohol de caña o alcohol industrial. De los alcoholes que a continuación se presentan. ¿Cuál es el etanol?. REACTIVO: 18. Lee lo siguiente: CH3 - OH CH3 –CH2 -OH CH3 –CH2 –CH2-OH CH3 –CH2 –CH2 -CH2 -OH Nivel de complejidad: 2 38

40 FORMATO PARA EL CONTROL DE REACTIVOS
ASIGNATURA: GRADO: CONTENIDO: UNIDAD: No. DE REACTIVO: AUTOR: NIVEL DE COMPLEJIDAD: FECHA: RESPUESTA CORRECTA: REF. BIBLIO.: REACTIVO: 39

41 CRITERIOS PARA EL ENSAMBLAJE DEL INTRUMENTO
ALGUNAS RECOMENDACIONES PARA CONSTRUIR BUENOS INSTRUMENTOS Que la prueba sea examinada por otra persona Se recomienda incluir entre tres y cuatro tipos de reactivos, ya que cada uno supone en su resolución una operación mental distinta Hacer comprensibles las instrucciones de resolución. SECUENCIA CRONOLOGICA HECHOS CONCEPTOS Y PRINCIPIOS APLICACIÓN DE PROCEDIMIENTOS RESOLUCIÓN DE PROBLEMAS GENERALIZACIÓBN 1 2 3 4 5 GRADO DE DIFICULTAD NIVEL DE COMPLEJIDAD 40

42 DIRECCIÓN DE EVALUACIÓN EDUCATIVA
Correo electrónico: Teléfono y fax: 01 (222) 41