BIG DATA - INTRODUCCIÓN jorge ubero. bilbao, junio de 2013

ITINERARIO © 2013 Jorge Ubero contexto definición utilidades software/arq. obama’12 análisis gobierno de datos cuándo y cómo?

SITUACIÓN © 2013 Jorge Ubero

“Every day we produce as much content as was produced by all of mankind for the 20,000 years before 2003″ [Eric Schmidt, former CEO, Google] Antecedentes © 2013 Jorge Ubero

Antecedentes © 2013 Jorge Ubero Toda la música por 600$ 5K Millones 1 mes: 30K M compartidos 40% datos 235 Tb  abril ‘11 40meses  x2

Antecedentes © 2013 Jorge Ubero 2,5 PetaBytes/hora transacciones Sólo en los 2 últimos años

Antecedentes © 2013 Jorge Ubero

Antecedentes © 2013 Jorge Ubero

Antecedentes © 2013 Jorge Ubero

Conceptos generales © 2013 Jorge Ubero (wikipedia)

Conceptos generales (sinnexus.es 2009) (Carlos Ayala, J., 1999) © 2013 Jorge Ubero

Conceptos generales Obra del artista Ryan McGuinness, fiel reflejo de una gran diversidad © 2013 Jorge Ubero

Conceptos generales © 2013 Jorge Ubero

Conceptos generales © 2013 Jorge Ubero

¿QUÉ ES BIG DATA? ? © 2013 Jorge Ubero

¿QUÉ ES BIG DATA? © 2013 Jorge Ubero

Qué es big data? © 2013 Jorge Ubero

Definiciones “Big data son datos que superan la capacidad de procesamiento de los sistemas de bases de datos convencionales” © 2013 Jorge Ubero

Características © 2013 Jorge Ubero

UTILIDADES © 2013 Jorge Ubero

Utilidades de big data Transparencia Experimentación Segmentación Toma de decisiones Innovación © 2013 Jorge Ubero

Fases de un proyecto © 2013 Jorge Ubero

Ejemplos Vivir en un mar de datos. Fundación Telefónica, 2012 © 2013 Jorge Ubero

Ejemplos Vivir en un mar de datos. Fundación Telefónica, 2012 © 2013 Jorge Ubero

Ejemplos Vivir en un mar de datos. Fundación Telefónica, 2012 © 2013 Jorge Ubero

Ejemplos Vivir en un mar de datos. Fundación Telefónica, 2012 © 2013 Jorge Ubero

Ejemplos Vivir en un mar de datos. Fundación Telefónica, 2012 © 2013 Jorge Ubero

Más aplicaciones © 2013 Jorge Ubero

Más aplicaciones © 2013 Jorge Ubero

Grandes expectativas © 2013 Jorge Ubero

Grandes expectativas © 2013 Jorge Ubero Curva de adopción tecnológica, GARTNER

ARQUITECTURA Y SOFTWARE © 2013 Jorge Ubero

ARQUITECTURA - Diferencias Vs. Arq. tradicional Arq. Big data Centralidad  mainframe, cpd BBDD relacionales Datos estructurados Alm. Convencional: -Silos de información -Datawarehouse Alta escalabilidad (Scale-Out) Procesamiento paralelo Mismo espacio almacen. y procesado  Baja latencia Datos no estructurados y est. NoSQL By-pass de datos (no silos) © 2013 Jorge Ubero

Características © 2013 Jorge Ubero

Características © 2013 Jorge Ubero

Características © 2013 Jorge Ubero

MapReduce Map Reduce © 2013 Jorge Ubero

Elementos a tener en cuenta Red. por almacenamiento Red. por movimiento Time2mkt más rápido Herramientas estándar Facilidad en la gestión y las operaciones Data governance © 2013 Jorge Ubero

Infraestructura on premises siliconweek.es Mayor control © 2013 Jorge Ubero

Infraestructura en cloud Scale-Out © 2013 Jorge Ubero

Hadoop © 2013 Jorge Ubero  Doug Cutting

Aplicaciones adicionales Hadoop © 2013 Jorge Ubero

Programas © 2013 Jorge Ubero

Programas © 2013 Jorge Ubero

Programas © 2013 Jorge Ubero

Aplicaciones de visualización © 2013 Jorge Ubero

ecosistema big data © 2013 Jorge Ubero ANÁLISIS VISUALIZACIÓN

ecosistema big data © 2013 Jorge Ubero almacenamiento conectores

ecosistema big data © 2013 Jorge Ubero

ecosistema big data © 2013 Jorge Ubero procesamiento almacenamiento conectores

ecosistema big data © 2013 Jorge Ubero

ecosistema big data © 2013 Jorge Ubero programas analíticos procesamiento almacenamiento conectores

ecosistema big data © 2013 Jorge Ubero

ecosistema big data © 2013 Jorge Ubero representación procesamiento almacenamiento conectores programas analíticos

ecosistema big data © 2013 Jorge Ubero

ITINERARIO © 2013 Jorge Ubero contexto definición utilidades software/arq. obama’12 análisis gobierno de datos cuándo y cómo?

CASO APLICACIÓN © 2013 Jorge Ubero

Obama 2012

© 2013 Jorge Ubero Obama 2012

© 2013 Jorge Ubero Análisis Big Data

© 2013 Jorge Ubero Análisis Big Data

© 2013 Jorge Ubero Cuándo y cómo implantarlo?

Elementos a tener en cuenta Realidad operativa? Mejores prácticas? Cambio en valoración IT? Qué hace la competencia? Errores a evitar? © 2013 Jorge Ubero

Elementos a tener en cuenta Alineamiento con objs. Facilitar adopción habilidades Gobierno de datos Alinear datos estr. y no estr. CoE © 2013 Jorge Ubero

Cuándo y cómo implantarlo? data scientist business analyst program director

© 2013 Jorge Ubero Gobierno de datos

© 2013 Jorge Ubero CONCLUSIONES

© 2013 Jorge Ubero MÁS INFO Planning for Big Data. Edd Dumbill Hadoop: The Definitive Guide. Tom White

eskerrik asko! jorge ubero bilbao, junio de 2013