Índice de Facilidad o Dificultad. Se define como la proporción de sujetos que responden un ítem con respecto al total de sujetos que contestaron la.

Presentación del tema: "Índice de Facilidad o Dificultad. Se define como la proporción de sujetos que responden un ítem con respecto al total de sujetos que contestaron la."— Transcripción de la presentación:

1

2

3 Índice de Facilidad o Dificultad. Se define como la proporción de sujetos que responden un ítem con respecto al total de sujetos que contestaron la prueba (Instrumento) ANÁLISIS DE ÍTEMS. Se refiere al estudio de las características de los reactivos en cuanto a su: * Facilidad o dificultad. * Grado de discriminación. * Eficiencia de las alternativas de respuestas.

4 Se refiere al poder de un reactivo para separar a aquellos sujetos que tienen dominio del rasgo que mide el item en comparación con aquellos que no tienen tal dominio. Discriminación de ítems Es un indicador de: * Validez * Confiabilidad -. Pruebas de rendimiento académico. -. Pruebas de habilidades cognitivas. * Inteligencia general. * Habilidades específicas. * Aptitudes. -. Actitudes Para instrumentos de medición:

5

6 Vaciar la Base de Datos en la hoja1 Calcular los totales por ítemes [TRC] Copiar la Base de Datos en la hoja2 Volver a la Base de Datos de la hoja1 Determinar el Índice de Dificultad [Id] de los ítemes Determinar el Índice de Dificultad Promedio de la Prueba [IDPP] Análisis de los resultados

7 EN LA HOJA1 Supongamos que se administra una prueba de rendimiento académico (6 itemes) a un grupo de 12 estudiantes, cuyos resultados se presentan a continuación: ABCDEFG 1Sujetos123456 2 Rondón A.111111 3 Pérez F.111111 4 Juárez J.101111 5 Suárez E.011111 6 Vélez L.101101 7 Meza F.001111 8 Rojas B.111000 9 Flores A.000111 10 Ramos N.110000 11 Sánchez A.001100 12 Ortiz M.000011 13 López R.100000 Vaciar la Base de Datos en la hoja1

8 ABCDEFG 1Sujetos123456 2 Rondón A.111111 3 Pérez F.111111 4 Juárez J.101111 5 Suárez E.011111 6 Vélez L.101101 7 Meza F.001111 8 Rojas B.111000 9 Flores A.000111 10 Ramos N.110000 11 Sánchez A.001100 12 Ortiz M.000011 13 López R.100000 14TRC758878 EN LA HOJA1 Calculamos total de respuestas correctas (TRC) para cada ítems: Calcular los totales por ítemes [TRC]

9 ABCDEFG 1Sujetos123456 2 Rondón A.111111 3 Pérez F.111111 4 Juárez J.101111 5 Suárez E.011111 6 Vélez L.101101 7 Meza F.001111 8 Rojas B.111000 9 Flores A.000111 10 Ramos N.110000 11 Sánchez A.001100 12 Ortiz M.000011 13 López R.100000 14TRC758878 15Id584267 5867 16IDPP60 EN LA HOJA1 Índice de Dificultad Promedio de la Prueba Total: Índice de Dificultad o Facilidad: Determinar el Índice de Dificultad Promedio de la Prueba [IDPP] Determinar el Índice de Dificultad [Id] de los ítemes

10 T A B L A R E S U M E N D E L O S R E S U L T A D O S: Sujetos ITEMES 123456 Id58 4267 5867 IDPP60 Índices de Dificultad o Facilidad EscalaCategorías 81 a 100 Muy Fácil 61 a 80 Fácil 41 a 60 Moderadamente Fácil 21 a 40 Difícil 01 a 20 Muy Difícil

11 Calcular los totales por sujetos Determinar los Grupos: Superior e Inferior Eliminar Grupo Intermedio Volver a la Base de Datos de la hoja2 Ordenar los totales en forma Descendente Calcular Total Repuestas Correctas Grupo Superior [TRCGS] Calcular Total Repuestas Correctas Grupo Inferior [TRCGI] Determinar el Índice de Discriminación [ID] de los ítemes Copiar y pegar los Índice de Dificultad [Id] de los ítemes en la hoja2 Determinar el Criterio de Selección adecuado Seleccionar los ítemes que Discriminan Análisis de los resultados

12 EN LA HOJA2 Calculamos los totales por sujeto, respuestas correctas y ordenamos ABCDEFGH 1Sujetos123456Totales 2 Rondón A.111111 6 3 Pérez F.111111 6 4 Juárez J.101111 5 5 Suárez E.011111 5 6 Vélez L.101101 4 7 Meza F.001111 4 8 Rojas B.111000 3 9 Flores A.000111 3 10 Ramos N.110000 2 11 Sánchez A.001100 2 12 Ortiz M.000011 2 13 López R.100000 1 Calcular los totales por sujetos Ordenar los totales en forma Descendente

13 ABCDEFGH 1Sujetos123456Totales 2 Rondón A.111111 6 3 Pérez F.111111 6 4 Juárez J.101111 5 5 Suárez E.011111 5 6 7 8 9 10 Ramos N.110000 2 11 Sánchez A.001100 2 12 Ortiz M.000011 2 13 López R.100000 1 EN LA HOJA2 Determinamos el grupo superior e inferior (35%), eliminamos el grupo intermedio del total de los sujetos. Determinar los Grupos: Superior e Inferior

14 ABCDEFGH 1Sujetos123456Totales 2 Rondón A.111111 6 3 Pérez F.111111 6 4 Juárez J.101111 5 5 Suárez E.011111 5 6TRCGS434444 7 8 9 10 Ramos N.110000 2 11 Sánchez A.001100 2 12 Ortiz M.000011 2 13 López R.100000 1 14TRCGI211111 EN LA HOJA2 Calcular Total Repuestas Correctas Grupo Superior [TRCGS] Calcular Total Repuestas Correctas Grupo Inferior [TRCGI]

15 ABCDEFGH 1Sujetos123456Totales 2 Rondón A.111111 6 3 Pérez F.111111 6 4 Juárez J.101111 5 5 Suárez E.011111 5 6TRCGS434444 7 8 9 10 Ramos N.110000 2 11 Sánchez A.001100 2 12 Ortiz M.000011 2 13 López R.100000 1 14TRCGI211111 15 16id584267 5867 EN LA HOJA2 Copiar y pegar los Índice de Dificultad [Id] de los ítemes en la hoja2

16 ABCDEFGH 1Sujetos123456Totales 2 Rondón A.111111 6 3 Pérez F.111111 6 4 Juárez J.101111 5 5 Suárez E.011111 5 6TRCGS434444 7 8 9 10 Ramos N.110000 2 11 Sánchez A.001100 2 12 Ortiz M.000011 2 13 López R.100000 1 14TRCGI211111 15 16Id584267 5867 17ID0,250,500,75 EN LA HOJA2 Determinar el Índice de Discriminación [ID] de los ítemes Fórmula: Watson y Thomas (1972)

17 ABCDEFGH 1Sujetos123456Totales 2 Rondón A.111111 6 3 Pérez F.111111 6 4 Juárez J.101111 5 5 Suárez E.011111 5 6TRCGS434444 7 8 9 10 Ramos N.110000 2 11 Sánchez A.001100 2 12 Ortiz M.000011 2 13 López R.100000 1 14TRCGI211111 15 16Id584267 5867 17ID0,250,500,75 18Selecciónxxxxx EN LA HOJA2 Seleccionar los ítemes que Discriminan

18 ¿Como se interpretan estos valores? EscalaCategorías 0,81 a 1,00Muy Alto 0,61 a 0,80Alto 0,41 a 0,60Moderado 0,21 a 0,40Bajo 0,10 a 0,20Muy Bajo El valor del ID oscila entre: +1 (discriminación perfecta) es respondido por todos los sujetos del grupo superior. -1 (discriminación negativa) es respondido por todos los sujetos del grupo inferior. ID = 0 es respondido por todos los sujetos. ITEMES 123456 Id584267 5867 ID0,250,500,75 Selecciónxxx

19 Consiste en transformar el número de respuestas correctas en ambos grupos (superior e inferior) a porcentaje y luego calcular la diferencia entre ellos. En forma porcentual: Grupo superior:Grupo inferior: ID = 100 – 25 = 75% Ejemplo: 10025 Para el item 6 EscalaCategorías 81 a 100Muy Alto 61 a 80Alto 41 a 60Moderado 21 a 40Bajo 01 a 20Muy Bajo

20 Se procede a la selección de ítemes de acuerdo con sus índices de dificultad y discriminación. Índices de dificulta y discriminación para una prueba de rendimiento académico en castellano (n=30) Ejercicio: TOMA DE DECISIÓN ÍtemesÍndice de Dificultad (Id)Índice de Discriminación (ID)Selección 11000,00 2800,45 3580,38 4450,76 5100,80 6600,45 7550,43 8570,31 9480,52 1000,00 Tabla Resumen X X X X X XX X X X X X

21 Alternativas de Respuestas Posibles Distribución de las Repuestas 1234 a (*)5555 b108520 c1012155 d10 5 Total35 Alternativas de Respuestas Posibles Distribución de las Repuestas 1234 a (*)5555 b300283 c05027 d02520 Total35 Posibles Distribuciones Aceptables de Respuestas dadas a un ítem Posibles Distribuciones No Aceptables de Respuestas dadas a un ítem

22 DATOS MULTICOTOMOS Microsoft Office Excel SPSS 11.5 para Windows Se calcula la T de Student Se conforman los grupo Se compara el valor de significación (sig) [T de Student] con un valor alfa (  ) que usualmente es 0,05 ó 0,01, si el valor de significación (asociado a la hipótesis nula) es menor al valor alfa (  ) hay diferencias significativas. Se comparan la T. Calculada con el T. Crítico o Teórico T. Calculado > T. Crítico El ítem DISCRIMINA VaciarOrdenar InferiorSuperior

23 Item VarianzaT de Student Sig Tipo (1) Sig. (bilateral) Contraste Hipótesis nula (2) Conclusión (3) Decisión sobre el ítem (4) 10.033≠0.094ACEPTANO DISCRIMINAEXCLUYE 20.016≠0.010RECHAZADISCRIMINAINCLUYE 30.065=0.189ACEPTANO DISCRIMINAEXCLUYE 40.125≠0.050RECHAZADISCRIMINAINCLUYE 50.021 60.001 70.048 80.093 90.451 10 11 12 α=0.05 (1) Tipo: Si las varianzas son Iguales (=) ó Desiguales (≠) (2) Contrate de Hipótesis: Se Acepta o Rechaza la hipótesis nula (3) Conclusión: Si el ítem Discrimina o No Discrimina (4) Decisión sobre el ítem: Se Incluye o se Excluye. Sig ≤ 0.05 : Rechaza Sig > 0.05 : Acepta Varianza Sig ≤ 0.05 : Desiguales Sig > 0.05 : Iguales T de Student

24

25