Y A XB. Tiempo Recursos de desarrollo e infraestructura Infraestructura – Instalación y configuración Desarrollo de la solución (código)

Presentación del tema: "Y A XB. Tiempo Recursos de desarrollo e infraestructura Infraestructura – Instalación y configuración Desarrollo de la solución (código)"— Transcripción de la presentación:

1 Y A XB

2

3

4

5

6

7

8

9 Tiempo Recursos de desarrollo e infraestructura Infraestructura – Instalación y configuración Desarrollo de la solución (código) para la ingesta, procesado de datos y archivado Desarrolla soluciones que integren otras soluciones como Machine Learning, Business Intelligence, etc Desarrolla soluciones que tengan resiliencia a fallos en infraestructura y almacenado Desarrolla soluciones e infraestructura que crezcan con tus necesidades de negocio Monitoriza y analiza los errores de la solución

10

11 Análisis de Twitts en tiempo real

12

13

14 Relay Queue Topic Notification Hub Event Hub

15 Productores de eventos

16

17

18

19

20 Procesa millones de eventos por segundo Procesa datos desde dispositivos/apps conectada Integración con el sistema de publicador consumidor altamente escalable Procesa flujos de datos de manera muy sencilla Transforma, argumenta, realiza operaciones basadas en tiempo Detecta patrones y anomalías en los flujos de datos Correlaciona datos dentro del flujo

21 No es necesario adquirir hardware y mantenerlo Bypasses deployment expertise Up and running in a few clicks (and within minutes) No software provisioning and maintaining Performance tuning Easily expand your business globally

22

23 Garantías en las entregas de eventos Garantía de no perder ningún evento o de una salida incorrecta Preserva el orden de los evento por dispositivo Garantizado la continuidad de tu negocio Alta disponibilidad (tres nueves de disponibilidad) Se recupera automáticamente de los fallos Gestión automática del estado que permite una rápida recuperación

24 La elasticidad de la nube para escalar hacia arriaba o hacia abajo Desde pocos recursos hasta mucho cuando sea requerido Distribuido, con una arquitectura de escalado horizontal Se puede escalar recursos directamente desde el portal sin necesidad de escribir código. Precio de entrada muy bajo Provisiona y ejecuta soluciones de Stream Analytics desde $25/mes Paga sólo por los recursos que usas Habilidad para añadir recursos de manera incremental

25

26

27

28

29

30 Arquitectura Origen de datosIngestaProcesadoConsumoSalida Entradas -Event Hub Dos consultas #megusta #nomegust a Outputs -Event Hub Azure Storage Worker Role Twitter Streaming API Worker Role Persistenci a SQL Azure Storage Tables Azure Web Site WebSocket s SignalR

31 Ingestor (broker) CollectionPresentation and action Event producers Transformatio n Long-term storage Event hubs Storage adapters Stream processing Cloud gateways (web APIs) Field gateways Applications Legacy IOT (custom protocols) Devices IP-capable devices (Windows/Linux) Low-power devices (RTOS) Search and query Data analytics (Excel) Web/thick client dashboards Service bus Azure DBs Azure storage HDInsight Stream Analytics Devices to take action

32

33 Dime el número de twitts por zona cada 10 segundos SELECT TimeZone, COUNT(*) AS Count FROM TwitterStream TIMESTAMP BY CreatedAt GROUP BY TimeZone, TumblingWindow(second,10) 1542686 5 Time (secs) 15426 86 A 10-second Tumbling Window 361 5361

34 Dame cada 5 segundos el número de twitts y la media de sentimiento de los últimos 10 segundos SELECT Topic, COUNT(*) AS TotalTweets, AVG(SentimentScore) FROM TwitterStream TIMESTAMP BY CreatedAt GROUP BY Topic, HoppingWindow(second, 10, 5) 1542687 A 10-second Hopping Window with a 5-second “Hop” 426 86 5361 15 426 8653 61 53

35 Give me the count of tweets for all topics which are tweeted more than 10 times in the last 10 seconds SELECT Topic, COUNT(*) FROM TwitterStream TIMESTAMP BY CreatedAt GROUP BY Topic, SlidingWindow(second, 10) HAVING COUNT(*) > 10 15 A 10-second Sliding Window 8 8 51 9 5 1 9 1

36 List all users and the topics on which they switched their sentiment within a minute SELECT TS1.UserName, TS1.Topic FROM TwitterStream TS1 TIMESTAMP BY CreatedAt JOIN TwitterStream TS2 TIMESTAMP BY CreatedAt ON TS1.UserName = TS2.UserName AND TS1.Topic = TS2.Topic AND DATEDIFF(second, TS1, TS2) BETWEEN 1 AND 60 WHERE TS1.SentimentScore != TS2.SentimentScore {“XO”, 4, “Hawks”}{“Jo”, 0, “ALS”} {“Foo”,4, “ALS”} {“Dip”, 2, “XBox”} {“XO”, 0, “Hawks”} {“Dip”, 0, “Xbox”} {“Jo”, 4, “ALS”} {“Foo”, 0, “ALS”} Twitter Stream:

37 ¡¡¡Si te ha gustado no olvides rellenar la encuesta!!! Thanks Y A XB