TEMA 8 PRUEBAS CRITERIALES 11 de diciembre de 2014

ESTADÍSTICAS OFICIALES - Estadística oficial = dato vs Cª (demografía, judicial, sanitaria, educativa), públicas Origen: censos Actividad administrativa normal (actos admvos) vs finalidad determinada Recogida indirecta vs muestreo ad hoc Actividad admva vs encuestas Individuo … agrupación (dato agregado) territorio vs análisis fenómeno Registro hechos … cuestionario

ESTADÍSTICAS OFICIALES - Estadística oficial = dato vs Cª (demografía, judicial, sanitaria, educativa), públicas Censo … barómetro de opinión Paro registrado – EPA Ventaja muestreo (recoge costes y permite profundizar) INE agencia pública Ley datos 1987, series datos CIS BdE MEC

ESTADÍSTICAS OFICIALES - Estadística oficial = dato vs Cª (demografía, judicial, sanitaria, educativa), públicas Ministerio Trabajo CC.AA. Eurostat Corporaciones locales www.fuentestadisticas.com INE Boletín mensual, Anuario, Cifras, Revista estadística

ESTADÍSTICAS OFICIALES - Estadística oficial = dato vs Cª (demografía, judicial, sanitaria, educativa), públicas Anuarios prensa (El País, El Mundo) CEPAL Comisión Económica NU América y Caribe

ESTADÍSTICAS OFICIALES - Metadatos: explicaciones sobre datos, características técnicas - Áreas geográficas: secciones tamaño muestral (INE) - Normas y clasificaciones (Gescla 97 INE): mismo criterio medición (déficit público) - Datos agregados y microdatos, disponibles para investigadores y usuarios - Canales distribución: instituciones, webs, archivos datos ICPSR Michigan ESRC Essex

ESTADÍSTICAS OFICIALES - Estudio estructuras sociales Análisis y descripción estructura sociedad (demografía, migración, mercado laboral, comercio) Estudio demarcación territorial Estudios comparados entre países Estudios longitudinales (series datos)

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

ESTADÍSTICAS OFICIALES

PRUEBAS CRITERIALES - Test de referencia criterial (evaluación criterio o dominio interés) Evaluación conductual Muestreo exhaustivo objetivos Potenciación evaluación fiabilidad y validez (coeficiente de Kappa) Puntos de corte que establezcan quién pasa o no pasa Centro en objetivos específicos (evaluación deficiencias Mejorar dominio evaluación docentes

PRUEBAS CRITERIALES - Clasificación en función dominio instruccional Tests certificación o admisión Tests nivel o dominio (promoción de un curso a otro) Tests de aula Tests diagnóstico Tests individualizado (información proceso y rendimiento)

PRUEBAS CRITERIALES - Elaboración pruebas criteriales … especificación dominio educativo Formatos ítems (análisis tareas) Transformación lingüística Búsqueda frases relevantes Selección frases destacadas Transformación frase (taxonomía Bloom) Reconocimiento, comprensión, aplicación, análisis Construcción distractores

PRUEBAS CRITERIALES - Elaboración pruebas criteriales … especificación dominio educativo Diseño de facetas: parte fija + variable Aproximación Markle y Tieman: ejemplos y contraejemplos Algoritmo Scandura: diagrama flujo procesos resolución problemas experto

PRUEBAS CRITERIALES - Análisis de ítems Revisión lógica (juicio expertos) Congruencia representatividad ítem – objetivo Calidad especificaciones técnicas Sesgo (neutralidad vs tendencia) en fción grupos Revisión empírica Grado dificultad y poder discriminatorio Aplicación piloto Análisis resultados (dificultad, discriminac, vdez

PRUEBAS CRITERIALES - Análisis empírico Índice dificultad: proporción personas que aciertan Índice homogeneidad Correlación ítem - test Índice discriminación o índices sensibilidad Ganancia neta respta incorrecta pretest y correcta postest – respta incorrecta pretest y postest (-1 … 1) Diferencia grupos acierto ítem con instrucción – acierto ítem sin instrucción

PRUEBAS CRITERIALES - Determinación estándares: juicio expertos (los mismos que revisión lógica): niveles de importancia o dificultad en función logro objetivos por individuos y relevancia para otras tareas Juicios ítems Juicios sujetos Juicio grupo referencia Punto corte: modelos estado, continuos TD, compromiso

PRUEBAS CRITERIALES - Características técnicas Fiabilidad Índice Kappa consistencia distribuciones Validez Contenido Constructo Criterio

EJEMPLO LIBRO Item 1 Ítem 2 Ítem 1 Ítem 2 Pre - postest Sin instr – Con inst Sj 1 0 1 0 1 Sj 2 0 0 1 1 Sj 3 1 0 1 1 Sj 4 0 0 1 1 Sj 5 1 0 1 1 GN I..C-I..I Sj 6 0 0 0 0 (2,4,7) – (6,9,10) Sj 7 0 1 1 1 (2,3,4,5,9,10) – 6,8 Sj 8 1 0 1 0 SI/CI %CI-%SI (1) Sj 9 0 0 0 1 Sj 10 0 0 0 1 Dif 0,4 0,2 0,7 0,8 GN 3/10-3/10 6/10-2/10 DISci 7/10-4/10 8/10-2/10