Introducción al concepto Big Data en español, con ejemplos de aplicaciones y caso de estudio. El seminario tiene una duración aproximada de 3 horas a lo largo de las cuales se repasan los siguientes puntos: Contexto Definición Utilidades (Casos de aplicación) Arquitectura y software -->Ejemplo de aplicación: Metamail -->Cuadrante mágico de aplicaciones Caso de estudio: Obama 2012 Análisis con Big Data Cuándo y cómo empezar? Gobierno de datos Espero que os guste!

1. BIG DATA - INTRODUCCIÓN
jorge ubero, vitoria/gasteiz mayo 2013
@ubero1

2. ITINERARIO
© 2013 Jorge Ubero
contexto
definición
utilidades
software/arq.
obama’12
análisis
gobierno de datos
cuándo y cómo?

3. SITUACIÓN
© 2013 Jorge Ubero

4. • “Every day we produce as much content as was produced
by all of mankind for the 20,000 years before 2003″ [Eric
Schmidt, former CEO, Google]
Antecedentes
© 2013 Jorge Ubero

5. Antecedentes
© 2013 Jorge Ubero
Toda la música
por 600$
5K Millones 1 mes: 30K M
compartidos
40% datos 235 Tb abril ‘11 40meses x2

6. Antecedentes
© 2013 Jorge Ubero
2,5 PetaBytes/hora
transacciones
Sólo en los 2
últimos años

7. Antecedentes
© 2013 Jorge Ubero

8. Antecedentes
© 2013 Jorge Ubero

9. Antecedentes
© 2013 Jorge Ubero© 2013 Jorge Ubero

10. Conceptos generales
© 2013 Jorge Ubero
(wikipedia)

11. Conceptos generales
(sinnexus.es 2009)
(Carlos Ayala, J., 1999)
© 2013 Jorge Ubero

12. Conceptos generales
Obra del artista Ryan McGuinness, fiel reflejo de una gran diversidad
© 2013 Jorge Ubero

13. Conceptos generales
© 2013 Jorge Ubero

14. Conceptos generales
© 2013 Jorge Ubero

15. ¿QUÉ ES BIG DATA?
?
© 2013 Jorge Ubero

16. ¿QUÉ ES BIG DATA?
© 2013 Jorge Ubero

17. Qué es big data?
© 2013 Jorge Ubero

18. Definiciones
“Big data son datos que
superan la capacidad de
procesamiento de los
sistemas de bases de datos
convencionales”
© 2013 Jorge Ubero

19. Características
© 2013 Jorge Ubero

20. UTILIDADES
© 2013 Jorge Ubero

21. Utilidades de big data
• Transparencia
• Experimentación
• Segmentación
• Toma de decisiones
• Innovación
© 2013 Jorge Ubero

22. Fases de un proyecto
© 2013 Jorge Ubero

23. Ejemplos
Vivir en un mar de datos. Fundación Telefónica, 2012
© 2013 Jorge Ubero

24. Ejemplos
Vivir en un mar de datos. Fundación Telefónica, 2012
© 2013 Jorge Ubero

25. Ejemplos
Vivir en un mar de datos. Fundación Telefónica, 2012
© 2013 Jorge Ubero

26. Ejemplos
Vivir en un mar de datos. Fundación Telefónica, 2012
© 2013 Jorge Ubero

27. Ejemplos
Vivir en un mar de datos. Fundación Telefónica, 2012
© 2013 Jorge Ubero

28. Más aplicaciones
© 2013 Jorge Ubero

29. Más aplicaciones
© 2013 Jorge Ubero

30. © 2013 Jorge Ubero

31. Grandes expectativas
© 2013 Jorge Ubero

32. Grandes expectativas
© 2013 Jorge Ubero
Curva de adopción tecnológica, GARTNER

33. ARQUITECTURA Y SOFTWARE
© 2013 Jorge Ubero

34. ARQUITECTURA - Diferencias
Vs.
Arq. tradicional Arq. Big data
• Centralidad  mainframe, cpd
• BBDD relacionales
• Datos estructurados
• Alm. Convencional:
-Silos de información
-Datawarehouse
• Alta escalabilidad (Scale-Out)
• Procesamiento paralelo
• Mismo espacio almacen. y
procesadoBaja latencia
• Datos no estructurados y est.
• NoSQL
• By-pass de datos (no silos)
© 2013 Jorge Ubero

35. Características
© 2013 Jorge Ubero

36. Características
© 2013 Jorge Ubero

37. Características
© 2013 Jorge Ubero

38. MapReduce
Map Reduce
© 2013 Jorge Ubero

39. Elementos a tener en cuenta
• Red. por almacenamiento
• Red. por movimiento
• Time2mkt más rápido
• Herramientas estándar
• Facilidad en la gestión y las
operaciones
• Data governance
© 2013 Jorge Ubero

40. Infraestructura on premises
siliconweek.es
• Mayor control
© 2013 Jorge Ubero

41. Infraestructura en cloud
• Scale-Out
© 2013 Jorge Ubero

42. © 2013 Jorge Ubero

43. Hadoop
© 2013 Jorge Ubero
 Doug Cutting

44. Aplicaciones adicionales Hadoop
© 2013 Jorge Ubero

45. Programas
© 2013 Jorge Ubero

46. Programas
© 2013 Jorge Ubero

47. Programas
© 2013 Jorge Ubero

48. Aplicaciones de visualización
© 2013 Jorge Ubero

49. ecosistema big data
© 2013 Jorge Ubero
ANÁLISISVISUALIZACIÓN

50. ecosistema big data
© 2013 Jorge Ubero
almacenamiento
conectores

51. ecosistema big data
© 2013 Jorge Ubero

52. ecosistema big data
© 2013 Jorge Ubero
procesamiento
almacenamiento
conectores

53. ecosistema big data
© 2013 Jorge Ubero

54. ecosistema big data
© 2013 Jorge Ubero
programas
analíticos
procesamiento
almacenamiento
conectores

55. ecosistema big data
© 2013 Jorge Ubero

56. ecosistema big data
© 2013 Jorge Ubero
representación
procesamiento
almacenamiento
conectores
programas
analíticos

57. ecosistema big data
© 2013 Jorge Ubero

58. ITINERARIO
© 2013 Jorge Ubero
contexto
definición
utilidades
software/arq.
obama’12
análisis
gobierno de datos
cuándo y cómo?

59. CASO APLICACIÓN
© 2013 Jorge Ubero

60. © 2013 Jorge Ubero
Obama 2012

61. © 2013 Jorge Ubero
Obama 2012

62. © 2013 Jorge Ubero
Análisis Big Data

63. © 2013 Jorge Ubero
Análisis Big Data

64. © 2013 Jorge Ubero
Cuándo y cómo implantarlo?

65. Elementos a tener en cuenta
• Realidad operativa?
• Mejores prácticas?
• Cambio en valoración IT?
• Qué hace la competencia?
• Errores a evitar?
© 2013 Jorge Ubero

66. Elementos a tener en cuenta
• Alineamiento con objs.
• Facilitar adopción habilidades
• Gobierno de datos
• Alinear datos estr. y no estr.
• CoE
© 2013 Jorge Ubero

67. © 2013 Jorge Ubero
Cuándo y cómo implantarlo?
data scientist
business analyst
program director

68. © 2013 Jorge Ubero
Gobierno de datos

69. © 2013 Jorge Ubero
CONCLUSIONES

70. © 2013 Jorge Ubero
MÁS INFO
Planning for Big Data. Edd Dumbill
Hadoop: The Definitive Guide. Tom White
www.datainformed.com
www.macrodatos.com
www.bigdata4success.com

71. GRACIAS!
jorge ubero
vitoria/gasteiz mayo 2013
@ubero1