Aspectos éticos de la Evaluación Educativa 21 de Noviembre de 2012 Gu í a de trabajo para la Planeaci ó n y organizaci ó n de la Docencia Dr. Edgar Gómez Bonilla Profesor investigador Maestría en Educación Superior Facultad de Filosofía y Letras, BUAP x S E M I N A R I O Planeación y Evaluación de la Educación Superior
1. CONDICIÓN ÉTICA: IMPORTANCIA EN LA EVALUACIÓN Disciplina Articula conocimientos de distintos campos: psicológicos, sociales, estadísticos, administrativos, económicos, políticos. Profesión Evalúa objetos y procesos como uno de los significados del acto de educar, al incorporar procesos de evaluación deben presentarse adecuaciones. Proceso Enlaza información y juicios de valor sobre un objeto determinado.
2. ÉTICA EN LA EVALUACIÓN EDUCATIVA Necesidad: *La Ética es una cuestión importante en el ejercicio de todas las profesiones. *En el caso del sujeto que se incorpora a la práctica docente y para evaluar es necesario que comprenda que se trata de un proceso metódico y sistemático del que se obtiene INFORMACIÓN valida y confiable para JUZGAR el mérito o VALOR del aprovechamiento de un individuo en un escenario educativo determinado, el fin es orientar la TOMA DE DECISIONES para el mejoramiento de éste. Importancia: *Cuidar las aristas éticas de la Evaluación porque toda acción educativa tiene consecuencias sobre las personas. *La Evaluación es un ejercicio ético de principio a fin que aborda: objetivos, métodos, participantes, valoraciones, conclusiones, decisiones, etc. Desafíos: *El cuidado de los aspectos éticos de la Evaluación exige una formación especializada para aplicar el proceso valorador, así como, un diálogo con los participantes de la acción educativa.
3.1 Contenido AEA Principios de la evaluación JCSEE Normas de evaluación * Propiedades. * Características. * Semejanzas. * Problemática. 3. Norma y Principios: Componentes ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
Los principios y las normas no definen lo que será la evaluación que tienda a juzgar a un sujeto. Respaldo de instituciones reconocidas (ENet, ERS, AEA, APA, AERA, NCME) En los dos instrumentos han participado diversos investigadores y docentes formados en la evaluación. Muestran una variedad de indicadores para evaluar el campo de la educación, la docencia y el aprendizaje de los estudiantes. Se expresan clases y clases de información posible para respaldar la evaluación. 3.2 Referentes comunes en el desarrollo de los instrumentos ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
3.3 Los principios para la evaluación AEA: Desarrollo histórico 1982 ERS Estándares para la evaluación de programas 1986 ENet más ERS Sociedad de investigación evaluadora 1992 AEA establece un grupo de trabajo (Task force) para desarrollar los principios generales de la evaluación El grupo de trabajo presenta su informe conteniendo la propuesta de sus cinco principios generales compatibles con los códigos de conducta Revolución de principios a través de un cuestionario y comparación de los principios de evaluación de sociedades de evaluación australiana y canadiense Difusión amplia del documento como ejercicio rector y esencial Análisis de los principios AEA 2004 Afirmación de AEA ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
3.4 Las Normas de evaluación JCSEE: Desarrollo histórico. 1954APA recomendaciones técnicas para los tets psicológicos y las técnicas de diagnóstico. 1966AERA, APA, NCME establecen normas para aplicar pruebas y manuales educativos y psicológicos. 1974Revisión de normas para aplicar pruebas. 1975Se establece el comité integrado, conjunto, mixto (Join Comitte). 1976Recibe fondos de la Fundación Lilly para el proyecto de normas de evaluación centrado en la educación. 1978Pruebas de campo. 1979Ajuste de las normas (incorporando productos de la prueba, recomendaciones y crítica que deriva) 1980Se publican por primera vez las normas. 1981Revisión continua de las normas de evaluación. 2006Evolución en tres conjuntos de normas del JCSEE, evaluación de programas, del personal (profesores) y alumnos (aprendizaje). ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
Presentes en la totalidad de los códigos de conducta de los distintos campos profesionales de la educación, cada actor los ubica con sus matices Características Los principios de evaluación ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
Las normas de evaluación JCSEE, 1981 UTILIDAD (7) UTILITY U1 Identificación de audiencias U2 Credibilidad del evaluador U3 Enfoque y selección de la información U4 Identificación de valores (criterios) U5 Informes claros U6 Divulgación oportuna de resultados U7 Impacto de la evaluación PROPIEDAD (8) PROPIETY P1 Orientación de servicio (necesidades) P2 Acuerdos formales P3 Respeto a los derechos de las personas P4 Interacciones humanas P5 Valoración completa P6 Divulgación de resultados P7 Conflicto de intereses P8 Responsabilidad fiscal (rendición de cuentas) FACTIBILIDAD (3) FEASIBILITY F1 Procedimientos prácticos F2 Factibilidad política F3 Costo-beneficio SEGURIDAD/PRECISIÓN (12) ACCURACY A1 Descripción fiel del programa evaluado A2 Análisis del contexto A3 Descripción de los propósitos y procedimientos de la evaluación A4 Descripción de fuentes de información A5 Obtención de información válida A6 Obtención de información confiable A7 Empleo de métodos sistemáticos para obtener la información A8 Análisis apropiados de la información cuantitativa A9 Análisis apropiados de la información cualitativa A10 Conclusiones justificadas A11 Informe imparcial A12 Evaluación de la evaluación ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
Los principios para evaluadores AEA, 1994 Conocimiento sistemático A. (Valoración del Proceso) 1. Estándares técnicos en la conducción de procesos y en la obtención de información cuantitativa y cualitativa (precisión, credibilidad). 2. Características de las preguntas de evaluación (enfoques). 3. Declaración de métodos y enfoques de evaluación, así como de sus limitantes. Competencia profesional B. (Rendimiento, Capacidad y Habilidades) 1. Formación, habilidades, destreza y experiencia 2. Practica acotada (formación-experiencia) 3. Actualización permanente Integridad y Honestidad (Determina impacto de las acciones) 1. Atención a los acuerdos establecidos (contratos) 2. Intereses explícitos (evaluador, cliente, audiencias) 3. Atender situación que presentan conflicto de intereses 4. Negociaciones honestas con clientes y audiencias 5. Valoración equitativa y justa 6. Informar sobre errores o sesgos Respeto a los Derechos de las Personas (Comunidad participante) Consideración de riesgos y peligros, consentimiento informado 2. Maximizar beneficios de los resultados 3. Comunicación de resultados en un marco de respeto a la dignidad de las personas (audiencias) 4. Equidad de la evaluación Responsabilidad ante el Bienestar General y Público (Cubrir expectativas y necesidades) 1. Informes (intereses de todas las audiencias) 2. Visión integral 3. Acceso a la información (audiencias autorizadas) 4. Equilibrio de intereses (cliente-audiencias interesadas) ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
Los principios para evaluadores AEA, Conocimiento sistemático 2. Competencia profesional 3. Integridad y Honestidad 4. Respeto a los Derechos de las Personas 5. Responsabilidad ante el Bienestar General y Público ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
3.5.2 Las normas del JCSEE ClasificaciónCampos Normas de propiedad (8) Normas de utilidad (7) Normas de factibilidad (3) Normas de seguridad/ precisión (12) Programas Personal (30) Alumnos ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
CUADRO CONCENTRADOR DE DATOS TÉCNICOS (enero-mayo 2009) Curso Primavera 2009 Institución Número de estudiantes Repro- bados Historia de México BUAP, Preparatoria 2 de octubre 662 Práctica Docente BUAP, Lic. en Historia 250 Metodología para la enseñanza de la Historia BUAP, Lic. en Historia 191 Docencia en Educación Superior BUAP, MES. 110 Didáctica para la Educación en Salud UPAEP, Lic. En Enfermería Oficial- 1 Particular 1423 Autoevaluación del aprendizaje por normas y principios
Aplicación de los Principios en la Evaluación de Aprendizajes por cursos CursoConocimiento sistemático Competencia profesional Integridad y Honestidad Respeto a los derechos de las personas Responsabilidad ante el bienestar general y público Historia de México Práctica Docente Metodología para la enseñanza de la Historia Docencia en Educación Superior Didáctica para la Educación en Salud Dimensión ( + ) Se manejó información cualitativa habilidades, destreza y experiencia Valoración equitativa y justa Comunicación de resultados en un marco de respeto Informes Dimensión ( - ) Limitantes en enfoques de Evaluación Práctica acotada Atención a los acuerdos establecidos Consideración de riesgos y peligros. Cuidado del interés público.
Aplicación de las Normas de Evaluación por cursos Utilidad (7) Curso Historia de México Práctica Docente Metodologí a para la enseñanza Historia Docencia en educación superior Didáctica para la Educación en Salud Normas de evaluación Identificación de audiencias XXXXX Credibilidad del evaluador XXXXX Enfoque y selección de la información XXXXX Identificación de valores (criterios) XXXXX Informes claros XXX Divulgación oportuna de resultados XXX Impacto de la evaluación XX T o t a l
Aplicación de las Normas de Evaluación por cursos Propiedad (8) Curso Historia de México Práctica Docente Metodologí a para la enseñanza Docencia en educación superior Didáctica para la Educación Normas de evaluación Orientación de servicio (necesidades) XXX X X Acuerdos formales XXX X X Respeto a los derechos de las personas XXX X X Interacciones humanas XXX X X Valoración completa X X Divulgación de resultados X X X Conflicto de intereses XX X Responsabilidad (rendición de cuentas) X X X T o t a l
Aplicación de las Normas de Evaluación por cursos Factibilidad (3) Curso Historia de México Práctica Docente Metodolo gía para la enseñanz a Docencia en educación superior Didáctica para la Educació n Normas de evaluación Procedimientos prácticos X X Viabilidad política XXX X X Costo-beneficio X X X Total
Aplicación de las Normas de Evaluación por cursos Seguridad / precisión (12) Curso Historia de México Práctica Docente Metodologí a para la enseñanza Docencia en educación superior Didáctica para la Educació n Normas de evaluación Descripción fiel del programa evaluado XX XXX Análisis del contexto XX XXX Descripción de los propósitos y procedimientos de la evaluación X XXX Descripción de fuentes de información XX XXX Obtención de información válida X X Obtención de información confiable X X Empleo de métodos sistemáticos para obtener la información X X X Análisis apropiados de la información cuantitativa XX XXX Análisis apropiados de la información cualitativa X X Conclusiones justificadas XX XXX Informe imparcial XX XXX Evaluación de la evaluación XX XXX T O T A L
Escala de Integración de normas por cursos Curso Historia de México Práctica Docente Metodolo gía para la enseñanz a Docencia en educación superior Didáctica para la Educación Normas de evaluación Utilidad Propiedad Factibilidad Seguridad Total Escala BEBEB
1. Conceptualización de la docencia en el Siglo XXI ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA Escala de Evaluación por normas Rangos Numéricos para la Interpretación de Resultados Excelente30-25 Muy Bien24-21 Bien20-15 Regular14-11 Suficiente10-5 Deficiente4-0
PERFIL DE EVALUACIÓN QUE REFUERZA LOS ASPECTOS ÉTICOS NORMAS (JCSEE) P R I N C I P I O S (AEA) Conocimiento sistemático Competencia profesional Integridad- honestidad Respeto Responsabilida d Utilidad Se proporcionó la información necesaria para el alcance de los propósitos de los cursos. Se promovió el modelo de formación en habilidades, destrezas y experiencias. Se aplicaron intereses y necesidades de los estudiantes (contextualizac ión) se generó clima de confianza al respetar criterios de evaluación. Se proporcionaron los resultados de evaluación (informes) Propiedad Se presentaron a los estudiantes fortalezas y debilidades de su aprendizaje. Se respetaron los acuerdos de la evaluación. Se promovió el respeto a los derechos de los estudiantes. La evaluación del aprendizaje se sustentó en el criterio formativo y sumativo. Factibilidad Se lograron los niveles procedimental es en los estudiantes. Se respetaron los intereses explícitos. Se cuidó la maximización de beneficios para los estudiantes Seguridad- precisión Las fuentes de información de la evaluación fueron variadas. Los enfoques de evaluación fueron sistemáticos: Diagnóstico, formativo, sumativo. Se presentó a los estudiantes informe de errores y sesgos. Imperó la equidad de la evaluación. Se respetó el programa de estudios con cuidado del interés público
En la Investigación reciente sobre los aspectos éticos de la evaluación resulta que los investigadores identifican semejanzas entre los principios y las normas. 3.6 Semejanzas ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
Los principios defienden una filosofía de la evaluación, las normas evidencian los errores y propone recomendaciones para corregirlas. 3.6 Semejanzas ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
Los principios y las normas son herramientas que ayudan pero tienen límites. 3.7 Aspectos críticos: problemáticas, comprensión ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
Su aplicación está mediada por la interpretación de los que deciden utilizarlos. 3.7 Aspectos críticos: problemáticas, comprensión ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
La interpretación queda condicionada por tres factores: forma de evaluar, experiencia acumulada en evaluaciones diversas, contexto en el que ocurren las evaluaciones. 3.7 Aspectos críticos: problemáticas, comprensión ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
Los principios y normas no aseguran evaluaciones éticas, favorecen el diseño, desarrollo y término de procesos más pertinentes, seguros y precisos: mejores prácticas de evaluación. 3.7 Aspectos críticos: problemáticas, comprensión ASPECTOS ÉTICOS DE LA EVALUACIÓN EDUCATIVA
4. DESAFÍOS QUE SE AFRONTAN EN LOS PROCESOS DE EVALUACIÓN Información *Apoyarse en los requerimientos metodológicos de manejo de la información: Selección, Obtención, Análisis, Síntesis e Interpretación. Juicios *Es la caracterización de la Evaluación que depende de una serie de condiciones a cuidar como: Apreciación completa del fenómeno, preguntas de evaluación, información proporcionada, análisis realizados, relación de datos y conclusiones. Síntesis final Sugiere fortalecimiento de los alcances del proceso y rediseño de los límites, a través de valorar el objeto, las preguntas, los métodos, la información obtenida, conflictos, tiempos y expectativas.
5. ESTRATEGIAS PARA REFORZAR LA DIMENSIÓN ÉTICA EN LA EVALUACIÓN Formación en Evaluación *Bases de conocimientos de Evaluación (Teoría de la Evaluación, Métodos de Investigación, Aspectos críticos de la Evaluación, Formación ética sistemática). *Competencia para reconocer desafíos. *Competencia teórica para solucionar desafíos Reflexión sobre la experiencia *La experiencia en Evaluación representa una fuente de conocimientos. *Reflexionar sobre las experiencias permite: reconstruir procesos, identificar fallas o logros, comprender los problemas que se presentaron y reconocer los desafíos éticos. *En el proceso de Evaluación de los aprendizajes deben estar presentes los principios de Utilidad, Beneficio, Valor, Importancia, Justicia, Objetividad, Respeto, Verdad, Transferencia.