Gestión de evaluaciones PERCEPTION KONOCIMIENTO S.A.

Mapa de ruta para hoy Un vistazo general de la plataforma y su operación: Qué es y para qué sirve. Revisión de las características de QuestionMark Perception. Web Versus Cliente / Servidor. Procesos básicos de Perception: Autoría, Publicación, Entrega, Informes. Ejemplo / Actividades Resumen, conclusiones y preguntas

¿Qué es Perception y para qué sirve? Es una plataforma completa para realizar evaluaciones y encuestas “on line”: Sirve de complemento a un programa de e-learning o presencial. Sirve para llevar a cabo y analizar encuestas de opinión o de otros tipos. Sirve para evaluar conocimientos y habilidades intelectuales (Competencias), sin un programa formal de capacitación.

Herramientas integradas Creación y publicación Perception Authoring Manager Define temas, preguntas, opciones, respuestas correctas, retroalimentación. Une las preguntas formando evaluaciones (sesiones) o encuestas. Controla límites de tiempo, estilos plantillas, saltos, orden aleatorio y procedimientos finales para una evaluación. Ambas funcionalidades se pueden operar desde un navegador o en modo “Cliente” (bajo ambiente operativo Windows)

Herramientas integradas Administración y reportes Security Manager Programa las evaluaciones y las asocia a empleados individuales o Grupos. Administra los intentos fallidos y límites de tiempo para cada Sesión Enterprise Reporter Permite analizar e imprimir una amplia variedad de reportes asociados a las evaluaciones

Flujo general de operación Proceso de 4 etapas Autoría: Corresponde a la creación de bancos (piscinas) de preguntas estructuradas por temas (Versiones Web y Cliente / Servidor). Creación de evaluaciones y publicación:Las preguntas creadas se organizan en evaluaciones con diferentes parámetros y condiciones, y luego se almacenan en bases de datos (MS SQL u Oracle). Programación y Entrega: Las evaluaciones son programadas para entrega en Web (Intranet o Internet) utilizando diversos parámetros (grupos de alumnos, temporalidad, intentos, etc.) Informes: Perception incluye potentes herramientas para análisis y gestión de los resultados de evaluaciones y encuestas.

1. Autoría Se pueden construir preguntas de diversos tipos: Arrastrar y soltar, Zona sensible, Redacción / Ensayo, Explicación, Completar oraciones, Pareos, Matriz, Alternativas, Selección múltiple, Escala Likert, Verdadero falso; Sí/ No, Listas desplegables, Preguntas de clasificación, Se puede incluso efectuar Preguntas combinadas con películas Flash interactivas

Veamos como funciona Ejemplo – Actividad: Creación de una piscina de preguntas: 3 preguntas V/F, 3 preguntas Alternativas, 3 preguntas Selección múltiple. 1 solo tema.

2 Creación de evaluaciones y Publicación Una evaluación tiene: Un bloque de control: Nombre de la evaluación, Tiempo límite, Si se almacena o no en base de datos, Tipo de retro alimentación, Contraseña de seguridad, Si requiere supervisión, Si se impide o no acceso abierto a la evaluación. Pueden utilizarse y modificarse variadas plantillas de evaluaciones....

2 Creación de evaluaciones y Publicación Una evaluación tiene: Bloques de preguntas: Selección de preguntas (al azar, dentro de temas o sub temas, por marcas), Bloque de salto: ¿Qué pasa luego de un bloque de preguntas?: Utiliza condiciones para examinar los resultados del bloque y de acuerdo al resultado, dirigir a la persona que toma el examen, donde corresponde. Permite estructurar tests adaptativos (Como un CENSO por ejemplo) Resultado de la evaluación: Cómo se muestra la información de puntaje, Evalúa contra un puntaje “requerido” si corresponde, Especifica la retroalimentación de la evaluación (mensaje), A donde envía a la persona luego de completar la evaluación (Otra evaluación o una URL).

2 Creación de evaluaciones y Publicación Finalmente una evaluación debe publicarse: Es decir, queda disponible en una base de datos central (Oracle, SQL Server), Además puede publicarse para distribución en CD, en una red LAN o para PC’s locales.

Veamos como opera... Ejemplo – Actividad: Creación de una evaluación basada en la piscina de preguntas que ya creamos: Demostración de la operación con participación de todos para definir opciones de la evaluación que se creará...

3 Programación de evaluaciones Programación incluye: Creación y gestión de Grupos, Creación y gestión de participantes Creación y gestión de programas Grupos de participantes ¿Quién tomará la evaluación? Participantes individuales

3 Programación de evaluaciones Una vez que se han definido e incorporado los participantes a una evaluación determinada, debe “programarse la evaluación”: Asignarle un nombre al programa, Seleccionar la evaluación a programar, Número de intentos para la evaluación, Rango de fechas/ horas en que estará disponible, Si se requiere o no Supervisión

Veamos como opera... Ejemplo – Actividad : Programemos la evaluación: Demostración de una programación con aporte de todos. Daremos esta evaluación (sin nota ).

4. Informes y gestión de información

Veamos los informes Ejemplo – Actividad : Contestar la evaluación (3 minutos). Revisión de los diferentes informes para el caso de la evaluación que acabamos de responder.

El Browser Based Authoring consiste en tres programas: Gestor de preguntas Gestor de evaluación Gestor de recursos

Gestor de preguntas El programa del Gestor de preguntas en línea se utiliza para crear preguntas en temas jerárquicos y para ver, editar y eliminarlas. El Browser Based Authoring ofrece la posibilidad de crear y editar los siguientes tipos de pregunta (note que no incluye todos los tipos): Opción múltiple Respuesta múltiple Numérico Texto correspondiente Redacción Sí/No Verdadero o Falso Escala de Likert Veamos nuevamente la operación del gestor de preguntas... ¿Un voluntario?

Gestor de evaluación El Gestor de evaluaciones en línea sirve para crear las evaluaciones a partir de las preguntas ya creadas y agregando diversos parámetros. El Browser Based Authoring sólo permite crear y editar evaluaciones con un bloque de preguntas simple y hasta dos gamas de resultados. También puede usar el gestor de evaluación en línea para importar evaluaciones a partir de archivos en un formato especial de QuestionMark denominado Qpack. Veamos nuevamente la operación del gestor de evaluaciones...

Gestor de recursos Las preguntas y las evaluaciones pueden referirse a los recursos y plantillas de imágenes y multimedia. Los archivos de imágenes y multimedia son los archivos de recursos que pueden añadirse, cargar y eliminarse con el gestor de recursos. De esta forma, las imágenes pueden cargarse al servidor de Perception y seleccionarse en el gestor de preguntas en línea. Veamos a lo que nos estamos refiriendo...

Modalidades de uso Browser Based Authoring interactuando con la misma base de datos usada por el servidor Perception. Ventajas: Simple y fácil de integrar en el sistema. Desventajas: Ninguna separación entre material creado y material publicado. Posibilidad de modificaciones no autorizadas en la publicación de material. Bases de datos separadas: Se necesita un proceso de aprobación para todo material procesado. Protege el material producido contra los cambios no autorizados. Es indispensable la intervención de un administrador para publicar material a partir de la producción de prueba.

BBA (Browser Based Authoring”) Versus Cliente Windows BBA (Browser Based Authoring) corresponde a un perfil de usuario que puede utilizar diferentes funcionalidades para ver, editar y crear preguntas y evaluaciones en línea desde un navegador. Tanto el gestor de preguntas, como el de evaluaciones tienen una versión para Browser y otra para ambiente Windows. Las funcionalidades en versión Browser son menos poderosas que las incluidas en la versión cliente, pero son más rápidas y simples de usar (y sirve bien en muchos casos...). La Administración general (Security Manager) y el Módulo de reportes (Enterprise reporter), están sólo disponibles en ambiente “Browser based”. En este taller estaremos enfocados en la modalidad BBA. En la sesión final veremos en detalle las aplicaciones “Windows” y algunas diferencias con BBA.

Requisitos Administrador BBA Para que un usuario tenga acceso al Browser Based Authoring, se debe haber establecido utilizando las herramientas de configuración del administrador (BBA corresponde a un tipo especial de administrador). Deben existir Grupos o ser creados para el administrador al que pertenecen. Veamos un ejemplo...

Tipos de Administrador Administradores editores Administradores autores

Administradores editores Administradores con autorizaciones de acceso a todos los temas y/o Acceso a todas las evaluaciones Estos administradores puede crear, eliminar o editar lo siguiente: Temas principales Subtemas Evaluaciones Autorizaciones en el Gestor de preguntas en línea y en el Gestor de evaluaciones en línea

Administradores autores Administradores sin autorizaciones de acceso a todos los temas y/o Acceso a todas las evaluaciones. Estos administradores no pueden crear, eliminar o editar temas principales y puede trabajar sólo con evaluaciones para las que un editor ha concedido autorización para hacerlo.

Resumen y conclusiones Perception es una plataforma de software que permite desarrollar procesos completos de evaluaciones o encuestas de distinta naturaleza. El flujo general de operación tiene 4 pasos o etapas: Autoría: Creación de preguntas, Creación de evaluaciones y publicación, Programación, Informes y gestión de información.