Proyecto MENSOA Integración de los Sistemas de Información MINISTERIO DE EDUCACIÓN NACIONAL República de Colombia Proyecto MENSOA Integración de los Sistemas de Información INFORME DE CIERRE DE PROYECTO 1 1 1

PRESENTACION MENSOA PROYECTO: MENSOA PREPARADO POR: Leonardo Ortiz E-mail: leonardo.ortiz@ingenian.com Ingenian Software Ltda TEMAS TRATADOS: 1) Antecedentes MENSOA (PETI – OSIMM) 2) Roadmap proyecto MENSOA 4 Años 3) Arquitectura MENSOA basada en ESB 4) Pruebas MENSOA 5) Administración sistema de integración MENSOA 6) Reporte de calidad de Datos DUE. 2 2

AGENDA 1. PETI 2. OSIMM Aplicado al MEN 4. Roadmap Global 5. Arquitectura 6. Pruebas MENSOA 7. Administración Sistema de Integración MENSOA 8. Reporte de Calidad de Datos Fuentes: http://www.ibm.com/developerworks/webservices/library/ws-soa-simm/ https://www.opengroup.org/projects/osimm/uploads/40/17990/OSIMM_v0.3a.pdf http://www.ibm.com/ibm/servicemanagement/data-governance.html http://www.oracle.com/technology/products/integration/service-bus/index.html http://www.oracle.com/technology/products/soa/registry/index.html 3 3 3

PETI 4 4 4

PETI - Principios 5 5 5 5

MODELO DE MADUREZ OSIMM 6 6

COMO – OSIMM 7 7 7

COMO – OSIMM 8 8 8

OSIMM APLICADO AL MEN 9 9 9

MODELO OSIMM NIVEL 2 INTEGRACIÓN PUNTO A PUNTO (SITUACIÓN ACTUAL) SITUACION ACTUAL MEN ADOPCIÓN NIVEL 3 ADOPCIÓN NIVEL 5 ALCANCE ACTUAL ADOPCIÓN NIVEL 4 SIGCE SAC FILE FILE FILE RRHH SGCF FILE FILE Situación Actual: Modelo de Integración Punto a Punto. Silos de información. Integración orientada a la interacción directa de los sistemas de información. SINEB SOAP SIMAT DUE DUE 10 10 10

SISTEMA DE INTEGRACIÓN MODELO OSIMM Alcance ACTUAL INTEGRACIÓN RADIAL MENSOA SIGCE DQ SAC Data Quality SISTEMA DE INTEGRACIÓN ESB (OSB – OSR) RRHH SGCF SOAP Oracle Service Bus – Oracle Service Registry SOAP Alcance del contrato actual Pasos requeridos: Preliminar: Instalar ODI para el diagnóstico de Calidad de Datos. Introducción del bus de servicios Cambio en la arquitectura de punto a punto a radial. Comunicar SINEB y SIMAT mediante el bus de servicios. Logros: Adopción de nivel 3 OSIMM en las siguientes dimensiones: arquitectura, infraestructura, información, negocio y aplicación. SINEB SIMAT SITUACION ACTUAL MEN DUE ADOPCIÓN NIVEL 3 ADOPCIÓN NIVEL 5 DUE ALCANCE ACTUAL ADOPCIÓN NIVEL 4 11 11 11

SISTEMA DE INTEGRACIÓN ESTABLECIMIENTOS EDUCATIVOS, MODELO OSIMM NIVEL 3 INTEGRACIÓN RADIAL MENSOA SIGCE DQ SAC ID ENTIDADES COMUNES Data Quality ID ENTIDADES COMUNES SISTEMA DE INTEGRACIÓN ESB (OSB – OSR) RRHH SGCF Oracle Service Bus – Oracle Service Registry ID ENTIDADES COMUNES ID ENTIDADES COMUNES Adopción de Nivel 3 Pasos requeridos: Se realizan cambios en los sistemas de información para gestionar entidades centralizadas Estandarizar y centralizar las Entidades Comunes: DIVIPOLA, SECRETARIAS, ESTABLECIMIENTOS EDUCATIVOS, ALUMNOS, FUNCIONARIOS. .Reutilización de Infraestructura común. Comunicar los sistemas de información requeridos mediante el bus de servicios. Logros: Nivel 3 OSIMM completo: Reutilización de Componentes. Disminuye el costo y la complejidad de los sistemas de información y el tiempo de respuesta de IT al cambio del negocio de los Sistemas de Información. MDM DIVIPOLA, SECRETARIAS ESTABLECIMIENTOS EDUCATIVOS, ALUMNOS, FUNCIONARIOS Master Data Management ID ENTIDADES COMUNES ID ENTIDADES COMUNES SINEB SIMAT SITUACION ACTUAL MEN ADOPCIÓN NIVEL 3 ADOPCIÓN NIVEL 5 ALCANCE ACTUAL ADOPCIÓN NIVEL 4 12 12 12

MODELO OSIMM NIVEL 4 INTEGRACIÓN DE SERVICIOS COLOMBIA APRENDE DANE ICFES SNIES MENSOA SIGCE DQ SAC ID ENTIDADES COMUNES Data Quality ID ENTIDADES COMUNES SISTEMA DE INTEGRACIÓN ESB (OSB – OSR) RRHH SGCF Oracle Service Bus – Oracle Service Registry ID ENTIDADES COMUNES Adopción de Nivel 4 Pasos requeridos: Cambiar cada sistema de información para que utilicen las entidades comunes centralizadas Gestión de Entidades Comunes en el Repositorio Central. Exposición de servicios de información Incorporación de Sistemas Externos. Logros: Nivel 4 OSIMM completo: MEN como proveedor de servicios de Información. Reutilización de servicios de negocio a sistemas internos y externos. Incrementa la calidad de los datos gracias a la gestión del repositorio central. ID ENTIDADES COMUNES MDM DIVIPOLA, SECRETARIAS ESTABLECIMIENTOS EDUCATIVOS, ALUMNOS, FUNCIONARIOS IdM Master Data Management ID ENTIDADES COMUNES Sistema de Gestión Identidades ID ENTIDADES COMUNES SINEB SIMAT SITUACION ACTUAL MEN ADOPCIÓN NIVEL 3 ADOPCIÓN NIVEL 5 ALCANCE ACTUAL ADOPCIÓN NIVEL 4 13 13 13

MODELO OSIMM NIVEL 5 INTEGRACIÓN MEDIANTE COMPOSICIÓN DE SERVICIOS COLOMBIA APRENDE DANE ICFES SNIES MENSOA SIGCE DQ BPEL SAC Gestión de Procesos SOA Data Quality SISTEMA DE INTEGRACIÓN ESB (OSB – OSR) RRHH SGCF Oracle Service Bus – Oracle Service Registry Adopción de Nivel 5 Pasos requeridos: Gestión de Procesos de Negocio. Servicios compuestos (workflow). Diccionario de Datos en el Repositorio Central (Jerarquización, Modelo de datos corporativo). Logros: Nivel 5 OSIMM completo: Consolidación SOA Servicios compuestos de información a partir de los existentes. MDM DIVIPOLA, SECRETARIAS ESTABLECIMIENTOS EDUCATIVOS, ALUMNOS, FUNCIONARIOS IdM Master Data Management Sistema de Gestión Identidades SINEB SIMAT SITUACION ACTUAL MEN ADOPCIÓN NIVEL 3 ADOPCIÓN NIVEL 5 ALCANCE ACTUAL ADOPCIÓN NIVEL 4 14 14 14 14

EJEMPLO DEL PROCESO DE GESTIÓN DE LAS PRUEBAS DOCENTES Gestión de servicios MENSOA EJEMPLO DEL PROCESO DE GESTIÓN DE LAS PRUEBAS DOCENTES Adopción de Nivel 5 Pasos requeridos: Gestión de Procesos de Negocio. Servicios compuestos (workflow). Diccionario de Datos en el Repositorio Central (Jerarquización, Modelo de datos corporativo). Logros: Nivel 5 OSIMM completo: Consolidación SOA Servicios compuestos de información a partir de los existentes. 15 15 15 15

Gestión de servicios MENSOA CAPAS GESTIONADAS POR LOS SERVICIOS EN EL SISTEMA DE INTEGRACIÓN MENSOA Adopción de Nivel 5 Pasos requeridos: Gestión de Procesos de Negocio. Servicios compuestos (workflow). Diccionario de Datos en el Repositorio Central (Jerarquización, Modelo de datos corporativo). Logros: Nivel 5 OSIMM completo: Consolidación SOA Servicios compuestos de información a partir de los existentes. 16 16 16 16

Gestión de servicios MENSOA EJEMPLO DE CATEGORIZACIÓN DE SERVICIOS EN EL SISTEMA DE INTEGRACIÓN MENSOA Adopción de Nivel 5 Pasos requeridos: Gestión de Procesos de Negocio. Servicios compuestos (workflow). Diccionario de Datos en el Repositorio Central (Jerarquización, Modelo de datos corporativo). Logros: Nivel 5 OSIMM completo: Consolidación SOA Servicios compuestos de información a partir de los existentes. 17 17 17 17

Integrar Nuevo Sistema Requerimientos Integrar Nuevo Sistema INCORPORACIÓN DE SISTEMAS DE INFORMACIÓN NUEVOS O SERVICIOS AL SISTEMA DE INTEGRACIÓN MENSOA Para la integración del DUE: 1) (RECOMENDADO) Crear el cliente para consumir el WS en tecnologías .Net, Java, PHP, ó la que el Ministerio de Educación Nacional determine para el sistema nuevo que se está integrando. 1) (OPCIONAL) Si el sistema de información o servicio nuevo que se va a integrar no soporta el consumo de WS, se debe solicitar al proveedor la conexión con el adaptador tecnológico respectivo. 2) Consumir el end point: http://10.100.100.77:7001/MENSOA/proxies/syncDUEPS?wsdl 3) Implementar el protocolo DUE para la sincronización (Ver documento Integracion-DUE-v01.pdf). NOTA: Para la implementación de nuevos servicios, se recomienda que se implementen con comunicación asíncrona, p.e: JMS, WS asíncronos, con el fin que la transaccionabilidad del sistema de integración sea más eficiente. Adopción de Nivel 5 Pasos requeridos: Gestión de Procesos de Negocio. Servicios compuestos (workflow). Diccionario de Datos en el Repositorio Central (Jerarquización, Modelo de datos corporativo). Logros: Nivel 5 OSIMM completo: Consolidación SOA Servicios compuestos de información a partir de los existentes. 18 18 18 18

ROADMAP 19 19 19

ROADMAP Antes 2010 2010 / 2011 2012 2014 1: Bus de Servicios NIVEL 2: INTEGRACIÓN PUNTO A PUNTO NIVEL 3: INTEGRACIÓN RADIAL NIVEL 4: INTEGRACIÓN DE SERVICIOS NIVEL 5: COMPOSICIÓN DE SERVICIOS 1: Bus de Servicios 2: Diseño Radial 3: Gestión y Monitoreo de Servicios 1: Reutilización de servicios. 2: Ofrece servicios a Sistemas Externos (ICFES asociado con SNIES y SINEB). 3: SOA Governance. 4: Sistema de Manejo de Identidades (IdM). 1: Servicios Compuestos. 2: Gestión de Servicios de Negocio (Workflow). 3: Diccionario Empresarial de Datos. 4: Evaluación OSIMM paso a Niveles superiores. 1:Gestión centralizada de Entidades Comunes 2: Modelamiento orientado a Servicios. 3: Calidad de datos 4: Modelo canónico (Repositorio Unificado) 5: Reutilización Infraestructura SITUACION MEN ALCANCE ACTUAL ADOPCIÓN NIVEL 3 ADOPCIÓN NIVEL 4 ADOPCIÓN NIVEL 5 20 20

ARQUITECTURA 21 21 21

PROTOTIPO ARQUITECTURA DEL OSB: 22 22 22 22

ARQUITECTURA PROYECTO ACTUAL MENSOA EN PRODUCCION: PROTOTIPO ARQUITECTURA PROYECTO ACTUAL MENSOA EN PRODUCCION: 23 23 23 23

ARQUITECTURA PROYECTO ACTUAL MENSOA EN PRODUCCION: PROTOTIPO ARQUITECTURA PROYECTO ACTUAL MENSOA EN PRODUCCION: 24 24 24 24

PROTOTIPO Ambiente Pruebas 25 25 25 25

Ambiente Certificación PROTOTIPO Ambiente Certificación 26 26 26 26

PROTOTIPO ARQUITECTURA PARA ALTA DISPONIBILIDAD: 27 27 27 27 Convenciones: Load Balancer: Gestión de solicitudes a MENSOA Admin Server: Gestión del dominio del OSB WLS_OSB: Servidor WebLogic + OSB OSR: Oracle Service Registry CUSTDBHOST: Base de datos del OSB en RAC 27 27 27 27

PRUEBAS MENSOA 28 28 28

Pruebas de Carga Ambiente MEN CAN 29 29 29 29

Pruebas de Carga Ambiente MEN CAN 30 30 30 30

MEN Certificación/Prod. Pruebas de Carga MEN Certificación/Prod. 31 31 31 31

Pruebas de Carga Amb. MEN Producción 32 32 32 32

ADMINISTRACIÓN SISTEMA DE INTEGRACIÓN MENSOA 33 33 33

Administración OSB Monitoring Dashboard 34 34 34 34

Administración OSB Monitoring Dashboard (Server Health) 35 35 35 35

REPORTES DE CALIDAD DE DATOS 36 36 36

Reporte DQ Luego de configurar el proyecto de calidad de datos, se realiza el análisis con la información de interés: Con doble click se realiza la consulta y se exportan los datos en varios formatos 37 37 37 37

Reporte DQ Datasteward La calidad de datos para el DUE es del 98%. Los casos de duplicidad son: 1) Establecimiento Oficial, rector duplicado, misma secretaría. 2) Cédula del Rector igual que el Código DANE. 3) Establecimientos Educativos con el mismo nombre, misma dirección, mismo rector. 4) Cédula del rector con caracteres adicionales, p.e: _1, _2, A, B, ó con espacios, puntos, comas, etc. Se encontraron 12 Secretarias con duplicidad de información ó inconsistencias: Amazonas, Bogotá, Cauca, Cesar, Córdoba, Huila, Nariño, Norte de Santander, Risaralda, Sucre, Tumaco, Vichada. El total de los casos de inconsistencias son 86, los cuales se distribuyen de la siguiente manera: 38 38 38 38

Reporte DQ Datasteward 39 39 39 39

Reporte DQ Datasteward 40 40 40 40

Se entregan los documentos: INSTALACION OPERACIÓN Se entregan los documentos: MENSOA_CONFIGURACION_DEL_SISTEMA_DE_INTEGRACION.pdf MENSOA_DISENO_DEL_SISTEMA_DE_INTEGRACION.pdf MENSOA_INFORME_PRUEBAS_CARGA_002.pdf MENSOA_DATA_QUALITY_REPORT.pdf 41 41 41 41

Gracias Preguntas / Comentarios MINISTERIO DE EDUCACIÓN NACIONAL República de Colombia Proyecto MENSOA Gracias Preguntas / Comentarios 42 42 42