Integrando múltiples fuentes de datos con Microsoft Azure Adrián Miranda Cordero Cloud Solutions Architec Database Administrator

Patrocinadores del SQL Saturday Gold Sponsor Silver Sponsor Geek Sponsor

Agenda Integración de datos Conceptos Por qué integrar? Integración de datos On Premise Por qué Microsoft Azure? Demos

Speaker Administrador de base de datos, arquitecto de soluciones Microsoft Azure Profesor Universitario y de Cursos Oficiales MOC Conferencista en eventos SQL Saturday Twitter: @JMCJOSEAD Facebook : www.facebook.com/JMCJOSEAD Linkedin: https://cr.linkedin.com/in/admiranda Blog: www.sqllatam.wordpress.com

Integración de Datos Agilidad de Procesos Integración de Datos Transformación de Datos Ventajas Competitivas

Integración de Datos Cuáles son los principales retos al integrar múltiples fuentes de datos? Plataformas heterogéneas Distintos Sistemas Operativos Distintos motores de base de datos Datos almacenados en archivos (Excel, XML, JSON, TXT) Calidad de los datos Seleccionar la plataforma de integración correcta Utilizar las herramientas adecuadas Third – Party Vendors

Integración de Datos Cómo seleccionar la plataforma adecuada? WS02 Tibco Microsoft MuleSoft IBM Informatica WebMethods SnapLogic SOA Software Dell Boomi

Integración de Datos On Premise Qué utilizamos? SQL Server Integration Services Middleware solutions Web Services Windows Services

Integración de Datos – Microsoft Azure Moving Target

Logic Apps Forma simple de implementar workflows altamente escalables para la integración de datos en la nube. Provee multiples conectores para múltiples aplicaciones. Fácil interfaz de diseño. Fácil creación a partir de templates ya existentes. Permite conectar y sincronizar aplicaciones On premise con aplicaciones en la nube. Ideal para automatizar procesos de negocio. Variedad de eventos y acciones.

DEMO

Azure Data Factory Qué utilizamos? Visualización Fuentes de Datos Integración basada en la Nube Automatización Orquestación y Transformación Permite una carga masiva de datos Es escalable Fuentes de Datos Transforma y Analizar Almacenamiento Visualización 12

Set de datos (Tablas, archivos, etc) Azure Data Factory – Principios Datasets Pipelines Set de datos (Tablas, archivos, etc) Agrupamiento lógico (Administra, calendariza) Linked services Data Gateways Fuentes de datos (SQL Server, No relational databases) Permite la comunicación con fuentes de datos On Premise 13

Azure Data Factory – Movimiento de datos Data Store Data Store Azure Storage Azure Storage SAS Azure Data Lake Store Azure SQL Database Azure SQL Data Warehouse Azure DocumentDB SQL Server Cassandra MongoDB Oracle File system DB2 MySQL Teradata PostgreSQL Sybase HDFS ODBC Odata Web Salesforce AmazonRedshift Amazon web Services FtpServer Azure Search

Cómo transfiere los datos? Azure Data Factory – Movimiento de datos Cómo transfiere los datos? Caracteristicas Utiliza los servicios Copy Activity Data Movement Data Management Gateway (On Premise) Relación uno a uno (Un input un output) Conversión automática de tipos de datos 15

Azure Data Factory – Monitoreo

DEMO

Adrián Miranda Cordero PREGUNTAS Y RESPUESTAS amiranda@nemesyscr.com www.sqllatam.wordpress.com Adrián Miranda Cordero @JMCJOSEAD