Microsoft SQL Server 2008 – SQL Server Integration Services Código: HOL-SQL25 Microsoft SQL Server 2008 – SQL Server Integration Services Rubén Alonso Cebrián ralonso@informatica64.com
Introducción
Agenda Introducción Herramientas ETL Implementación de sistemas de soporte de decisiones Gestión de servicios SQL Server 2008 mediante SQL Configuration Manager Gestión de servidores SQL Server 2008 mediante SQL Server Management Studio Herramientas de gestión y ejecución de paquetes Microsoft SQL Server 2008 Integration Services Business Intelligent Development Studio Arquitectura de SQL Server 2008 Integration Services Gestión de fuentes de datos Workflow de datos y workflow de tareas Escenarios de integración Arquitectura Orientada a Servicios (SOA) Plataforma de integración de desarrollo API mediante modelo de componentes Gestión y Despliegue de paquetes SSIS Novedades en Microsoft SQL Server Integration Services 2008 Demo: Gestión de información mediante XML Web services Demo: Generación de workflow en escenarios de integración
Herramientas ETL (SSIS) Herramienta utilizada para extracción, transformación y carga de información SSIS sustituye a los Servicios de Transformación de datos en SQL Server 2000 Modelo de componentes de transformación con nuevo repositorio: Ejemplo: msdb.dbo.sysdtspackages90 a msdb.dbo.sysssispackages
Herramientas ETL (SSIS)
Sistema de soporte de decisiones Datos brutos frente a información de negocio Captura de datos en bruto Derivando la información de negocio de los datos en bruto Devolución de datos en información valiosa Sistema de Soporte de Decisiones Proceso en tiempo real de transacciones del negocio Contienen estructuras de datos optimizados para edición Provee de capacidades de soporte de decisión limitado Sistemas de fuentes de datos OLTP Sistema transaccional de negocio Características Proveen de datos para el proceso de análisis del negocio Integran datos desde sistemas de fuentes de datos heterogéneos Combinan datos validados frente a las reglas de negocio Organiza información no volátil Los datos se almacenan en estructuras que son optimizadas para extracción y consulta
Gestión de servicios Gestión de servicios mediante el administrador de configuración de SQL Server
Gestión de servicios de integración
Gestión de servidores mediante SQL Server Management Studio Gestión del Servidor de Integración mediante SQL Server Management Studio
Gestión de servidores mediante SQL Server Management Studio Explorador de objetos para la gestión de servidor SSIS
Gestión de servidores mediante SQL Server Management Studio Dos métodos de almacenamiento: Sistema de ficheros Base de datos MSDB Compatibilidad con paquetes de SQL Server 2000, almacenados en la tabla del sistema sysssispackages en la base de datos MSDB,
Herramientas de gestión y ejecución de paquetes Asistente de importación y exportación Se puede ejecutar desde: 1º- SQL Server Management Studio 2º- Business Intelligent Development Studio 3º- Línea de comandos mediante dtswizard.exe
Asistente para Importación/Exportación de SQL Server
Asistente para Importación/Exportación de SQL Server
Asistente para Importación/Exportación de SQL Server
Herramientas de gestión y ejecución de paquetes Asistente de configuración de paquetes Posibilidad de asociar propiedades dinámicas a los paquetes en tiempo de ejecución
Herramientas de gestión y ejecución de paquetes Asistente de instalación Instalación de paquetes en el sistema de ficheros o en SQL Server
Herramientas de gestión y ejecución de paquetes Asistente de migración Asistente para la migración de paquetes SQL Server 2000 a SQL Server 2005
Herramientas de gestión y ejecución de paquetes Dtexecui: Herramienta gráfica para la ejecución de paquetes almacenados en el servidor SQL Server 2005
Herramientas de gestión y ejecución de paquetes
Herramientas de gestión y ejecución de paquetes Dtutil: Utilidad mediante línea de comandos que permite mover paquetes entre SQL Server y el sistema de ficheros
Microsoft SQL Server 2005 Integration Services
Business Intelligent Development Studio Entorno de desarrollo de los servicios de integración. Herramienta gráfica para la creación, ejecución y depuración de paquetes en SQL Server 2008
Business Intelligent Development Studio
Business Intelligent Development Studio
Arquitectura SSIS
Arquitectura SSIS Características principales: Motor de flujo de datos y flujo de tareas Conversión de todos los tipos de datos (estructurados, no estructurados, xml, etc. convertidos a formato tabular (filas y columnas) antes de ser cargados dentro del buffer Extracción de datos desde múltiples orígenes de datos como OLE DB, managed (ADO.NET), ODBC, flat file, Excel, y XML a través de adaptadores. Integración de poderosos componentes de transformación de datos como por ejemplo: Aggregate Realiza múltiples agregaciones en un único paso. Sort: Para ordenar datos en el flujo Lookup: Realiza operaciones de búsqueda en cache para referenciar conjuntos de datos Pivot y UnPivot: Dos transformaciones para pivotar la información Merge, Merge Join, y UnionAl: pueden realizar relaciones y operaciones de combinación. Conversión de datos: Conversión de tipos de datos (numeric, string, etc.).
Gestión de fuentes de datos
Gestión de fuentes de datos
Workflow de datos y workflow de tareas
Arquitectura orientada a servicios (SOA) Soporte para: Datos XML Servicios Web XML Manipulación de xml con Xslt, Xpath, etc. XML/A
Plataforma de integración de desarrollo
Escenarios de integración Escenario de transformación de datos entre múltiples entornos heterogéneos con Fuzzy Lookup
Escenarios de integración Escenario de gestión de dimensiones para datos históricos en proceso de carga de datos en un DW mediante SCD (Slowly Caching Dimension)
API mediante modelo de componentes Espacios de nombres de programación correspondientes para la gestión de DTS en Plataforma .Net
Gestión y Despliege de paquetes SSIS
Gestión y Despliege de paquetes SSIS
Gestión y Despliege de paquetes SSIS Programación de ejecución de paquetes
Gestión y Despliege de paquetes SSIS Gestión de seguridad integrada en paquetes.
Control de registro de eventos Gestión y Despliege de paquetes SSIS Control de registro de eventos
Novedades en SQL Server Integration Services 2008 Nueva ubicación de ejemplos de SSIS: http://www.codeplex.com/Wiki/View.aspx?ProjectName=SqlServerSamples Soporte para Servicios de Transformación de Datos de SQL Server 2000 (Sin soporte de diseño o ejecución en plataforma de 64 bits) Mejora en el rendimiento para las transformaciones de búsqueda (carga de datos en cache más rápida) Gestor de conexiones de cache, para acceso a ficheros de cache de conjunto de datos (dataset) como archivos *.caw Componentes origen y destino de ADO.Net mejorados Nueva tarea Perfil de Datos (Data Profiling) y Visualizador de Perfil de Datos (Data Profiling Viewer)
Novedades en SQL Server Integration Services 2008 Nuevo Asistente de Proyecto de Conexiones de Servicios de Integración
Novedades en SQL Server Integration Services 2008 Nuevo entorno de scripting en VSTA (Visual Studio Tools for Applications) soporte para Microsoft Visual Basic 2008 y Microsoft C# 2008 Características de conversión de datos mejoradas en el asistente para exportación e importación Nuevos tipos de datos de fecha y tiempo DT_DBTIME2 DT_DBTIMESTAMP2 DT_DBTIMESTAMPOFFSET Características de SQL Mejoradas (Instrucción Merge) Nueva funcionalidad de Captura de datos cambiantes (Change Data Capture)
Demo: Gestión de Información mediante XML Web Services
Demo: Gestión de Workflow en escenarios de integración