Este documento presenta información sobre Big Data, incluyendo las 5 V's de Big Data, MapReduce y Hadoop. También discute Open Data y proporciona ejemplos de aplicaciones como Recycla.me y Recycla.te que utilizan datos abiertos. Finalmente, propone la creación de un mapa de recursos para gestionar datos relacionados con electricidad, agua y residuos.

1. Victoria López, PhD.
Universidad Complutense de Madrid

2. • Open Government – Smart City

3. From Data Warehouse to Big Data

4. Alex ' Sandy' Pentland,
director del programa de
emprendedores del 'Media
Lab' del Massachusetts
Institute of Technology (MIT)
Considerado por 'Forbes'
como uno de los siete
científicos de datos más
poderosos del mundo

5. ¿Quién genera Big Data?
Datos no
estructurados
5

6. Las 5 V’s de Big Data

7. MapReduce
MapReduce
–
–
–
–
•
–
–
–
Modelo de programación de datos paralela
Concepto simple, elegante, extensible para múltiples aplicaciones
Grandes datasets  nodos de multiprocesadores
Conjuntos de nodos: Clústeres o Grids (programación distribuida)
Creado por Google (2004)
Procesa 20 PB de datos por día
Basado en los métodos Map y Reduce de programación funcional
Orígenes en cálculo numérico (multiplicación de matrices grandes).
– Exploración 100 TB en 1 nodo @ 50 MB/sec = 23 días
– Exploración en un clúster de 1000 nodos = 33 minutos
7

8. Map Reduce

9. Hadoop
– Usado por Yahoo!, Facebook, Twitter
Amazon, eBay…
– Implementa MapReduce en diferentes
arquitecturas tanto clúster como grid
(Cloudcomputing)
http://hadoop.apache.org/

11. “Open data is data that can be freely used,
reused and redistributed by anyone – subject
only, at most, to the requirement to attribute
and share alike.” OpenDefinition.org
Open Data es una iniciativa mundial que
pretende que los datos de las
Administraciones Públicas se expongan y
sean accesibles de forma que estén
disponibles para su
redistribución, reutilización y
aprovechamiento por parte de los
ciudadanos y las empresas.

14. Un ejemplo con Open Data Euskadi

15. Un ejemplo con Open Data Euskadi
PRINCIPALMENTE APPS PARA DISPOSITIVOS MÓVILES

16. Una ejemplo con Recycla.me y Recycla.te!
Patrón Cliente/Servidor
PÚBLICOS
PÚBLICOS O
PRIVADOS

17. Una ejemplo con Recycla.me y Recycla.te!
GENERA NUEVOS
DATOS Y PRODUCE
UN SERVICIO

18. Traducir en valor los datos recabados de diversas fuentes

22. Qué vamos a hacer ahora :
MAPA DE RECURSOS
Belén Abellanas
Jaime Ramos
Ignacio P. de Ziriza
Héctor Martos
Recycla.me
Mariam Saucedo
Pilar Torralbo
Daniel Sanz
Mar Octavio de
Toledo
Antonio Sanmartín
Carlos Fernández
Álvaro Bustillo
Arturo Callejo
Ana Alfaro
Sergio Ballesteros
Lidia Sesma
Victor Torres
Alberto Segovia
Miguel Bueno
RECYCLA.TE

23. – Electricidad (Head: España, Universidad Complutense)
– Agua (Head: México, Universidad de Sonora)
– Residuos: Reciclaje y Reducción (Head: China, Southwest
Jiaotong University))