Extracción información

1. Sistemas de Big Data
Ricardo García Ródenas
Ricardo.Garcia@uclm.es
Proceso extracción
información

2. Proceso
extracción
información
Información
datos

3. Proceso
extracción
información
Visualización
Iden4ficación datos
Almacenamiento
Analy&cs
Machine Learning
Etapas

4. 1.- Identificación datos
The Guardian, and Netflix in US and Europe
via smart home devices (Woolf, 2016). In
expected to emerge in 2021 as hackers find
devices and protocols (Jones, 2016).
(2017) the expenditures towards worldwide
each an amount of $96B by the end of 2018.
will become extra conscious of the security
and inadequate protection against attacks by
s. The U.S. Federal Cybersecurity Market
within the next five years (Security, 2017). It has also been highlig
that in new generation applications, data stream processing
emerged as one of the potential research areas, in which, data
tinuously flows into the processing site. In data stream, real-time
constantly arrives from the external source with certain time inter
Input data can change between a few bytes per seconds to gigabytes
second (Di Mauro & Di Sarno, 2014).
The above discussion, followed by the use case scenarios prese
below have motivated this present paper to focus on real-time anom
Fig. 1. The sequence of real-time big data generation, processing and anomaly detection.
eddit, The Guardian, and Netflix in US a
smart home devices (Woolf,
emerge in 2021 as h
(Jones, 2
Fig. 1. The sequence of real-time
Datos internos
Datos externos
Proceso
extracción
información

5. Tipología datos ▪ Datos estructurados
▪ Datos NO estructurados
▪ Datos SEMI estrucuturados
Proceso
extracción
información

6. Tipología datos
▪ Datos estructurados
Proceso
extracción
información

7. ▪ Datos NO estructurados
Proceso
extracción
información
Tipología datos

8. ▪ Datos semi-estructurados
Proceso
extracción
información
Tipología datos

9. 2.-Almacenamiento
Preparación de datos
Modelo de de datos
Almacenamiento
Proceso
extracción
información
Ingeniero de datos

10. Preparación de datos
▪ Depuración
▪ Criba
▪ Valores faltantes
Proceso
extracción
información
2.-Almacenamiento

11. Modelo de de datos
▪ Notación
▪ Restricciones de integridad
▪ Operaciones I/O
Proceso
extracción
información
2.-Almacenamiento

12. Modelo de de datos
▪ Conceptual
▪ Lógico
▪ Físico
Proceso
extracción
información
2.-Almacenamiento

13. Almacenamiento
Proceso
extracción
información
2.-Almacenamiento

14. Sistemas de Big Data
Ricardo García Ródenas
Ricardo.Garcia@uclm.es
Proceso extracción
información
• Proceso
• Etapas identificación y almacenamiento