SlideShare una empresa de Scribd logo
1 de 30
Retos y Desafíos del Big Data
¿Es posible hacer Big Data cuando
tus fuentes de datos son textos?
Mike Beattie
CEO, Mediamano
?
Big Data : Macro vs Micro
Macro Micro
El Corte Inglés /
Carrefour
✓ ✓
Censo EEUU ✓ ✓
Google Maps ✓
“Piensa en Java” -
Bruce Eckel
✓ ✓
Wikipedia “Madrid” ✓
Micro
¿Se identifica como Afro-Americano ? Sí No
Indíquenos su condado y estado Condado _______________ Estado _ _
Macro
Google Maps
¿Qué puedes contar?
Conclusiones Interim :
Big Data : Macro (para analizar) y Micro (para encontrar) + otros
No todo lo que tiene Micro se puede analizar con Macro …
… ni todo lo que es Macro se puede enfocar hasta Micro
Es importante distinguir entre Google/Bing/Ask e información privada
Cuando la fuente no tiene
estructura …
"No seas siempre riguroso ni siempre blando y escoge entre
estos dos extremos; que en ello está el punto de la discreción”
- M. de Cervantes, DQ, 2ª parte
o
“Ahora se puede demostrar la verdadera potencia del Iterador:
la habilidad de recorrer una secuencia de la estructura
subyacente de esa secuencia” - Eckel, Piensa en Java
o
Hay un ejemplo no digital …
Índice de contenidos : Macro (19 pp)
Índice : Micro (24 pp)
1.000.000 de artículos
¿Cuántos hablan de deportes?
¿Cuántos hablan de Natación en Madrid?
Macro
Macro
Micro
¿Dónde está el artículo sobre la
carencia de infraestructura en Madrid
para la natación competitiva?
… pero en digital ¿Cómo podemos
realizar Macro y Micro?
Con métodos tradicionales …
Término(s) Resultados
“Deportes” 400.000
“Natación” 2.580
“Natación Madrid” 655
“Natación en Madrid” 168
“Madrid la natación” 46
“Madrid” “Natación” 157.804
Macro ?
Macro ?
La lógica de Boole es perfecta para
millones de aplicaciones
pero no para el análisis de bases de texto
Entonces, ¿qué alternativas
hay?
Tagging Manual
Ontología
(estructura de significados)
Inteligencia
Artificial
¿Puede una máquina aprender
significados sin gramática/ Ontología ?
¡Sí! Con una red neuronal
(sin más detalles)
Input
Output
Hidden
“Ahorasepuededemostrarlaverdaderapotenciadel
Iterador:lahabilidadderecorrerunasecuenciadela
estructurasubyacentedeesasecuencia”-Eckel,Piensa
enJava
Palabra
+
Ubicación
x100.000
Palabras en una dimensión
Rojo
Naranja
Amarillo
colegio
Palabras en 2 dimensiones
Naranja
Rojo Amarillo
colegio
Pera Plátano
Palabras en 3 dimensiones
¿Cuántas se necesitan para
simular el cerebro?
El mapa semántico y sus usos
Cada palabra, y cada texto, tiene una ubicación
Así se puede calcular la distancia entre textos y palabras
Que permite hacer muuuuuuchas cosas….
Búsqueda semántica
Semantic Neighbors
Occurrences
- score > 0,5
- Fuente : Web nacional de noticias
Contexto de Big Data : Temporal
Batería de
consultas
Data
-17.5
0
17.5
35
52.5
70
87.5
-4 0 4 8 12 16 20
Masterchef Junior Natación Problema
Batería de
consultas
Data
Contexto de Big Data : No Temporal
0
25
50
75
100
Mahou Heineken Damm Estrella
Fuente 1 Fuente 2
Conclusiones
¡YES WE CAN Hacer Big Data con Texto!
Al tener un score en cada resultado, podemos medir y cuantificar
Podemos descubrir cosas que no sabíamos que estábamos buscando
Podemos generar tags automáticamente
Mike Beattie
mike@mediamano.com
www.happening.technology

Más contenido relacionado

Destacado

Emérito Martínez, Chief Digital Officer de MSMK – Madrid School of Marketing.
Emérito Martínez, Chief Digital Officer de MSMK – Madrid School of Marketing.Emérito Martínez, Chief Digital Officer de MSMK – Madrid School of Marketing.
Emérito Martínez, Chief Digital Officer de MSMK – Madrid School of Marketing.MSMK - Madrid School of Marketing
 
Francisco Soler, Solution Manager Big Data & Analytics, Business Development ...
Francisco Soler, Solution Manager Big Data & Analytics, Business Development ...Francisco Soler, Solution Manager Big Data & Analytics, Business Development ...
Francisco Soler, Solution Manager Big Data & Analytics, Business Development ...MSMK - Madrid School of Marketing
 
Social Selling: el nuevo método para la venta del siglo XXI - Esmeralda Díaz-...
Social Selling: el nuevo método para la venta del siglo XXI - Esmeralda Díaz-...Social Selling: el nuevo método para la venta del siglo XXI - Esmeralda Díaz-...
Social Selling: el nuevo método para la venta del siglo XXI - Esmeralda Díaz-...MSMK - Madrid School of Marketing
 
Claves para la venta de servicios tecnológicos - Juan Manuel Robles
Claves para la venta de servicios tecnológicos - Juan Manuel RoblesClaves para la venta de servicios tecnológicos - Juan Manuel Robles
Claves para la venta de servicios tecnológicos - Juan Manuel RoblesMSMK - Madrid School of Marketing
 
Los desafíos de las ventas en el mundo start up - Jaime Guitart
Los desafíos de las ventas en el mundo start up - Jaime GuitartLos desafíos de las ventas en el mundo start up - Jaime Guitart
Los desafíos de las ventas en el mundo start up - Jaime GuitartMSMK - Madrid School of Marketing
 
Think Sales: Las claves de la transformación digital en las áreas de ventas -...
Think Sales: Las claves de la transformación digital en las áreas de ventas -...Think Sales: Las claves de la transformación digital en las áreas de ventas -...
Think Sales: Las claves de la transformación digital en las áreas de ventas -...MSMK - Madrid School of Marketing
 
Crecer en tiempos difíciles - Presentación de Juan López de Sagredo
Crecer en tiempos difíciles - Presentación de Juan López de SagredoCrecer en tiempos difíciles - Presentación de Juan López de Sagredo
Crecer en tiempos difíciles - Presentación de Juan López de SagredoMSMK - Madrid School of Marketing
 
High Performance Forecasting aplicado al mundo de las ventas - Daniel Vélez
High Performance Forecasting aplicado al mundo de las ventas - Daniel VélezHigh Performance Forecasting aplicado al mundo de las ventas - Daniel Vélez
High Performance Forecasting aplicado al mundo de las ventas - Daniel VélezMSMK - Madrid School of Marketing
 

Destacado (13)

Emérito Martínez, Chief Digital Officer de MSMK – Madrid School of Marketing.
Emérito Martínez, Chief Digital Officer de MSMK – Madrid School of Marketing.Emérito Martínez, Chief Digital Officer de MSMK – Madrid School of Marketing.
Emérito Martínez, Chief Digital Officer de MSMK – Madrid School of Marketing.
 
Autoservicio de Big Data
Autoservicio de Big Data  Autoservicio de Big Data
Autoservicio de Big Data
 
Francisco Soler, Solution Manager Big Data & Analytics, Business Development ...
Francisco Soler, Solution Manager Big Data & Analytics, Business Development ...Francisco Soler, Solution Manager Big Data & Analytics, Business Development ...
Francisco Soler, Solution Manager Big Data & Analytics, Business Development ...
 
Social Selling: el nuevo método para la venta del siglo XXI - Esmeralda Díaz-...
Social Selling: el nuevo método para la venta del siglo XXI - Esmeralda Díaz-...Social Selling: el nuevo método para la venta del siglo XXI - Esmeralda Díaz-...
Social Selling: el nuevo método para la venta del siglo XXI - Esmeralda Díaz-...
 
Oracle Marketing Cloud - Modern Thinking MSMK 8/9/16
Oracle Marketing Cloud - Modern Thinking MSMK 8/9/16Oracle Marketing Cloud - Modern Thinking MSMK 8/9/16
Oracle Marketing Cloud - Modern Thinking MSMK 8/9/16
 
Fernando Meco, Director de Marketing de SAS.
Fernando Meco, Director de Marketing de SAS.Fernando Meco, Director de Marketing de SAS.
Fernando Meco, Director de Marketing de SAS.
 
Stephane Levesque, CEO de Ticjob.
Stephane Levesque, CEO de Ticjob.Stephane Levesque, CEO de Ticjob.
Stephane Levesque, CEO de Ticjob.
 
Claves para la venta de servicios tecnológicos - Juan Manuel Robles
Claves para la venta de servicios tecnológicos - Juan Manuel RoblesClaves para la venta de servicios tecnológicos - Juan Manuel Robles
Claves para la venta de servicios tecnológicos - Juan Manuel Robles
 
Los desafíos de las ventas en el mundo start up - Jaime Guitart
Los desafíos de las ventas en el mundo start up - Jaime GuitartLos desafíos de las ventas en el mundo start up - Jaime Guitart
Los desafíos de las ventas en el mundo start up - Jaime Guitart
 
Think Sales: Las claves de la transformación digital en las áreas de ventas -...
Think Sales: Las claves de la transformación digital en las áreas de ventas -...Think Sales: Las claves de la transformación digital en las áreas de ventas -...
Think Sales: Las claves de la transformación digital en las áreas de ventas -...
 
Crecer en tiempos difíciles - Presentación de Juan López de Sagredo
Crecer en tiempos difíciles - Presentación de Juan López de SagredoCrecer en tiempos difíciles - Presentación de Juan López de Sagredo
Crecer en tiempos difíciles - Presentación de Juan López de Sagredo
 
High Performance Forecasting aplicado al mundo de las ventas - Daniel Vélez
High Performance Forecasting aplicado al mundo de las ventas - Daniel VélezHigh Performance Forecasting aplicado al mundo de las ventas - Daniel Vélez
High Performance Forecasting aplicado al mundo de las ventas - Daniel Vélez
 
MSMK Sales Academy - Presentación por Rafael García
MSMK Sales Academy - Presentación por Rafael García MSMK Sales Academy - Presentación por Rafael García
MSMK Sales Academy - Presentación por Rafael García
 

Similar a Retos y desafíos del Big Data

WTF with Big Data?
WTF with Big Data?WTF with Big Data?
WTF with Big Data?Jesus Ramos
 
Manual de análisis y diseño de algoritmos
Manual de análisis y diseño de algoritmosManual de análisis y diseño de algoritmos
Manual de análisis y diseño de algoritmosSpacetoshare
 
Tópicos de Big Data - Introducción
Tópicos de Big Data - IntroducciónTópicos de Big Data - Introducción
Tópicos de Big Data - IntroducciónErnesto Mislej
 
Retos en los fundamentos de Data Science
Retos en los fundamentos de Data ScienceRetos en los fundamentos de Data Science
Retos en los fundamentos de Data ScienceJoaquín Borrego-Díaz
 
Manual análisis de algoritmos
Manual análisis de algoritmosManual análisis de algoritmos
Manual análisis de algoritmosBeat Winehouse
 
Manual de análisis y diseño de algoritmos
Manual de análisis y diseño de algoritmosManual de análisis y diseño de algoritmos
Manual de análisis y diseño de algoritmosJaro
 
Introducción a Ciencia de datos con Microsoft
Introducción a Ciencia de datos con MicrosoftIntroducción a Ciencia de datos con Microsoft
Introducción a Ciencia de datos con MicrosoftJOSE AHIAS LOPEZ PORTILLO
 
"Educación y datos masivos (Big Data)" - Fernando Santamaria
"Educación y datos masivos (Big Data)" - Fernando Santamaria"Educación y datos masivos (Big Data)" - Fernando Santamaria
"Educación y datos masivos (Big Data)" - Fernando SantamariaNivel 7
 
"Educación y datos masivos (Big Data)" - Fernando Santamaria
"Educación y datos masivos (Big Data)" - Fernando Santamaria"Educación y datos masivos (Big Data)" - Fernando Santamaria
"Educación y datos masivos (Big Data)" - Fernando SantamariaNivel 7
 
Educación y datos masivos (Big Data)
Educación y datos masivos (Big Data)Educación y datos masivos (Big Data)
Educación y datos masivos (Big Data)Fernando Santamaría
 
slides-espanol-curso-introduccion-machine-learning-por-mindsdb_8c5ff985-0581-...
slides-espanol-curso-introduccion-machine-learning-por-mindsdb_8c5ff985-0581-...slides-espanol-curso-introduccion-machine-learning-por-mindsdb_8c5ff985-0581-...
slides-espanol-curso-introduccion-machine-learning-por-mindsdb_8c5ff985-0581-...elianatorales
 
Análisis de Sentimientos y otros retos del aprovechamiento inteligente de los...
Análisis de Sentimientos y otros retos del aprovechamiento inteligente de los...Análisis de Sentimientos y otros retos del aprovechamiento inteligente de los...
Análisis de Sentimientos y otros retos del aprovechamiento inteligente de los...Facultad de Informática UCM
 
Presentación Inteligencia Artificial.pptx
Presentación Inteligencia Artificial.pptxPresentación Inteligencia Artificial.pptx
Presentación Inteligencia Artificial.pptxWillianVinicio1
 
Innovación en el tratamiento de la información desde la Ingeniería del Conoc...
Innovación en el tratamiento de la información desde la  Ingeniería del Conoc...Innovación en el tratamiento de la información desde la  Ingeniería del Conoc...
Innovación en el tratamiento de la información desde la Ingeniería del Conoc...Joaquín Borrego-Díaz
 
Historias de Ciencia de Datos desde la Trinchera
Historias de Ciencia de Datos desde la TrincheraHistorias de Ciencia de Datos desde la Trinchera
Historias de Ciencia de Datos desde la TrincheraJesus Ramos
 

Similar a Retos y desafíos del Big Data (20)

Qué es la ciencia de datos.pdf
Qué es la ciencia de datos.pdfQué es la ciencia de datos.pdf
Qué es la ciencia de datos.pdf
 
WTF with Big Data?
WTF with Big Data?WTF with Big Data?
WTF with Big Data?
 
Manual de análisis y diseño de algoritmos
Manual de análisis y diseño de algoritmosManual de análisis y diseño de algoritmos
Manual de análisis y diseño de algoritmos
 
Tópicos de Big Data - Introducción
Tópicos de Big Data - IntroducciónTópicos de Big Data - Introducción
Tópicos de Big Data - Introducción
 
Retos en los fundamentos de Data Science
Retos en los fundamentos de Data ScienceRetos en los fundamentos de Data Science
Retos en los fundamentos de Data Science
 
Manual analisis-de-algoritmos
Manual analisis-de-algoritmosManual analisis-de-algoritmos
Manual analisis-de-algoritmos
 
Manual análisis de algoritmos
Manual análisis de algoritmosManual análisis de algoritmos
Manual análisis de algoritmos
 
Manual de análisis y diseño de algoritmos
Manual de análisis y diseño de algoritmosManual de análisis y diseño de algoritmos
Manual de análisis y diseño de algoritmos
 
Introducción a Ciencia de datos con Microsoft
Introducción a Ciencia de datos con MicrosoftIntroducción a Ciencia de datos con Microsoft
Introducción a Ciencia de datos con Microsoft
 
"Educación y datos masivos (Big Data)" - Fernando Santamaria
"Educación y datos masivos (Big Data)" - Fernando Santamaria"Educación y datos masivos (Big Data)" - Fernando Santamaria
"Educación y datos masivos (Big Data)" - Fernando Santamaria
 
"Educación y datos masivos (Big Data)" - Fernando Santamaria
"Educación y datos masivos (Big Data)" - Fernando Santamaria"Educación y datos masivos (Big Data)" - Fernando Santamaria
"Educación y datos masivos (Big Data)" - Fernando Santamaria
 
Educación y datos masivos (Big Data)
Educación y datos masivos (Big Data)Educación y datos masivos (Big Data)
Educación y datos masivos (Big Data)
 
slides-espanol-curso-introduccion-machine-learning-por-mindsdb_8c5ff985-0581-...
slides-espanol-curso-introduccion-machine-learning-por-mindsdb_8c5ff985-0581-...slides-espanol-curso-introduccion-machine-learning-por-mindsdb_8c5ff985-0581-...
slides-espanol-curso-introduccion-machine-learning-por-mindsdb_8c5ff985-0581-...
 
Análisis de Sentimientos y otros retos del aprovechamiento inteligente de los...
Análisis de Sentimientos y otros retos del aprovechamiento inteligente de los...Análisis de Sentimientos y otros retos del aprovechamiento inteligente de los...
Análisis de Sentimientos y otros retos del aprovechamiento inteligente de los...
 
Presentación Inteligencia Artificial.pptx
Presentación Inteligencia Artificial.pptxPresentación Inteligencia Artificial.pptx
Presentación Inteligencia Artificial.pptx
 
Taller de Big Data y Ciencia de Datos en COLMEX dia 1
Taller de Big Data y Ciencia de Datos en COLMEX dia 1 Taller de Big Data y Ciencia de Datos en COLMEX dia 1
Taller de Big Data y Ciencia de Datos en COLMEX dia 1
 
Innovación en el tratamiento de la información desde la Ingeniería del Conoc...
Innovación en el tratamiento de la información desde la  Ingeniería del Conoc...Innovación en el tratamiento de la información desde la  Ingeniería del Conoc...
Innovación en el tratamiento de la información desde la Ingeniería del Conoc...
 
Historias de Ciencia de Datos desde la Trinchera
Historias de Ciencia de Datos desde la TrincheraHistorias de Ciencia de Datos desde la Trinchera
Historias de Ciencia de Datos desde la Trinchera
 
presentacion ia informatica.pptx
presentacion ia informatica.pptxpresentacion ia informatica.pptx
presentacion ia informatica.pptx
 
presentacion IA
presentacion IApresentacion IA
presentacion IA
 

Último

How to use Redis with MuleSoft. A quick start presentation.
How to use Redis with MuleSoft. A quick start presentation.How to use Redis with MuleSoft. A quick start presentation.
How to use Redis with MuleSoft. A quick start presentation.FlorenciaCattelani
 
PROYECTO FINAL. Tutorial para publicar en SlideShare.pptx
PROYECTO FINAL. Tutorial para publicar en SlideShare.pptxPROYECTO FINAL. Tutorial para publicar en SlideShare.pptx
PROYECTO FINAL. Tutorial para publicar en SlideShare.pptxAlan779941
 
Refrigerador_Inverter_Samsung_Curso_y_Manual_de_Servicio_Español.pdf
Refrigerador_Inverter_Samsung_Curso_y_Manual_de_Servicio_Español.pdfRefrigerador_Inverter_Samsung_Curso_y_Manual_de_Servicio_Español.pdf
Refrigerador_Inverter_Samsung_Curso_y_Manual_de_Servicio_Español.pdfvladimiroflores1
 
Avances tecnológicos del siglo XXI 10-07 eyvana
Avances tecnológicos del siglo XXI 10-07 eyvanaAvances tecnológicos del siglo XXI 10-07 eyvana
Avances tecnológicos del siglo XXI 10-07 eyvanamcerpam
 
Resistencia extrema al cobre por un consorcio bacteriano conformado por Sulfo...
Resistencia extrema al cobre por un consorcio bacteriano conformado por Sulfo...Resistencia extrema al cobre por un consorcio bacteriano conformado por Sulfo...
Resistencia extrema al cobre por un consorcio bacteriano conformado por Sulfo...JohnRamos830530
 
Modulo-Mini Cargador.................pdf
Modulo-Mini Cargador.................pdfModulo-Mini Cargador.................pdf
Modulo-Mini Cargador.................pdfAnnimoUno1
 
pruebas unitarias unitarias en java con JUNIT
pruebas unitarias unitarias en java con JUNITpruebas unitarias unitarias en java con JUNIT
pruebas unitarias unitarias en java con JUNITMaricarmen Sánchez Ruiz
 
EL CICLO PRÁCTICO DE UN MOTOR DE CUATRO TIEMPOS.pptx
EL CICLO PRÁCTICO DE UN MOTOR DE CUATRO TIEMPOS.pptxEL CICLO PRÁCTICO DE UN MOTOR DE CUATRO TIEMPOS.pptx
EL CICLO PRÁCTICO DE UN MOTOR DE CUATRO TIEMPOS.pptxMiguelAtencio10
 
EVOLUCION DE LA TECNOLOGIA Y SUS ASPECTOSpptx
EVOLUCION DE LA TECNOLOGIA Y SUS ASPECTOSpptxEVOLUCION DE LA TECNOLOGIA Y SUS ASPECTOSpptx
EVOLUCION DE LA TECNOLOGIA Y SUS ASPECTOSpptxJorgeParada26
 
Innovaciones tecnologicas en el siglo 21
Innovaciones tecnologicas en el siglo 21Innovaciones tecnologicas en el siglo 21
Innovaciones tecnologicas en el siglo 21mariacbr99
 
Avances tecnológicos del siglo XXI y ejemplos de estos
Avances tecnológicos del siglo XXI y ejemplos de estosAvances tecnológicos del siglo XXI y ejemplos de estos
Avances tecnológicos del siglo XXI y ejemplos de estossgonzalezp1
 

Último (11)

How to use Redis with MuleSoft. A quick start presentation.
How to use Redis with MuleSoft. A quick start presentation.How to use Redis with MuleSoft. A quick start presentation.
How to use Redis with MuleSoft. A quick start presentation.
 
PROYECTO FINAL. Tutorial para publicar en SlideShare.pptx
PROYECTO FINAL. Tutorial para publicar en SlideShare.pptxPROYECTO FINAL. Tutorial para publicar en SlideShare.pptx
PROYECTO FINAL. Tutorial para publicar en SlideShare.pptx
 
Refrigerador_Inverter_Samsung_Curso_y_Manual_de_Servicio_Español.pdf
Refrigerador_Inverter_Samsung_Curso_y_Manual_de_Servicio_Español.pdfRefrigerador_Inverter_Samsung_Curso_y_Manual_de_Servicio_Español.pdf
Refrigerador_Inverter_Samsung_Curso_y_Manual_de_Servicio_Español.pdf
 
Avances tecnológicos del siglo XXI 10-07 eyvana
Avances tecnológicos del siglo XXI 10-07 eyvanaAvances tecnológicos del siglo XXI 10-07 eyvana
Avances tecnológicos del siglo XXI 10-07 eyvana
 
Resistencia extrema al cobre por un consorcio bacteriano conformado por Sulfo...
Resistencia extrema al cobre por un consorcio bacteriano conformado por Sulfo...Resistencia extrema al cobre por un consorcio bacteriano conformado por Sulfo...
Resistencia extrema al cobre por un consorcio bacteriano conformado por Sulfo...
 
Modulo-Mini Cargador.................pdf
Modulo-Mini Cargador.................pdfModulo-Mini Cargador.................pdf
Modulo-Mini Cargador.................pdf
 
pruebas unitarias unitarias en java con JUNIT
pruebas unitarias unitarias en java con JUNITpruebas unitarias unitarias en java con JUNIT
pruebas unitarias unitarias en java con JUNIT
 
EL CICLO PRÁCTICO DE UN MOTOR DE CUATRO TIEMPOS.pptx
EL CICLO PRÁCTICO DE UN MOTOR DE CUATRO TIEMPOS.pptxEL CICLO PRÁCTICO DE UN MOTOR DE CUATRO TIEMPOS.pptx
EL CICLO PRÁCTICO DE UN MOTOR DE CUATRO TIEMPOS.pptx
 
EVOLUCION DE LA TECNOLOGIA Y SUS ASPECTOSpptx
EVOLUCION DE LA TECNOLOGIA Y SUS ASPECTOSpptxEVOLUCION DE LA TECNOLOGIA Y SUS ASPECTOSpptx
EVOLUCION DE LA TECNOLOGIA Y SUS ASPECTOSpptx
 
Innovaciones tecnologicas en el siglo 21
Innovaciones tecnologicas en el siglo 21Innovaciones tecnologicas en el siglo 21
Innovaciones tecnologicas en el siglo 21
 
Avances tecnológicos del siglo XXI y ejemplos de estos
Avances tecnológicos del siglo XXI y ejemplos de estosAvances tecnológicos del siglo XXI y ejemplos de estos
Avances tecnológicos del siglo XXI y ejemplos de estos
 

Retos y desafíos del Big Data

  • 1. Retos y Desafíos del Big Data ¿Es posible hacer Big Data cuando tus fuentes de datos son textos? Mike Beattie CEO, Mediamano
  • 2. ?
  • 3. Big Data : Macro vs Micro Macro Micro El Corte Inglés / Carrefour ✓ ✓ Censo EEUU ✓ ✓ Google Maps ✓ “Piensa en Java” - Bruce Eckel ✓ ✓ Wikipedia “Madrid” ✓
  • 4. Micro ¿Se identifica como Afro-Americano ? Sí No Indíquenos su condado y estado Condado _______________ Estado _ _
  • 8. Conclusiones Interim : Big Data : Macro (para analizar) y Micro (para encontrar) + otros No todo lo que tiene Micro se puede analizar con Macro … … ni todo lo que es Macro se puede enfocar hasta Micro Es importante distinguir entre Google/Bing/Ask e información privada
  • 9. Cuando la fuente no tiene estructura … "No seas siempre riguroso ni siempre blando y escoge entre estos dos extremos; que en ello está el punto de la discreción” - M. de Cervantes, DQ, 2ª parte o “Ahora se puede demostrar la verdadera potencia del Iterador: la habilidad de recorrer una secuencia de la estructura subyacente de esa secuencia” - Eckel, Piensa en Java o
  • 10. Hay un ejemplo no digital … Índice de contenidos : Macro (19 pp) Índice : Micro (24 pp)
  • 11. 1.000.000 de artículos ¿Cuántos hablan de deportes? ¿Cuántos hablan de Natación en Madrid? Macro Macro Micro ¿Dónde está el artículo sobre la carencia de infraestructura en Madrid para la natación competitiva? … pero en digital ¿Cómo podemos realizar Macro y Micro?
  • 12. Con métodos tradicionales … Término(s) Resultados “Deportes” 400.000 “Natación” 2.580 “Natación Madrid” 655 “Natación en Madrid” 168 “Madrid la natación” 46 “Madrid” “Natación” 157.804
  • 15. La lógica de Boole es perfecta para millones de aplicaciones pero no para el análisis de bases de texto
  • 16. Entonces, ¿qué alternativas hay? Tagging Manual Ontología (estructura de significados) Inteligencia Artificial
  • 17. ¿Puede una máquina aprender significados sin gramática/ Ontología ?
  • 18. ¡Sí! Con una red neuronal (sin más detalles) Input Output Hidden “Ahorasepuededemostrarlaverdaderapotenciadel Iterador:lahabilidadderecorrerunasecuenciadela estructurasubyacentedeesasecuencia”-Eckel,Piensa enJava Palabra + Ubicación x100.000
  • 19. Palabras en una dimensión Rojo Naranja Amarillo colegio
  • 20. Palabras en 2 dimensiones Naranja Rojo Amarillo colegio Pera Plátano
  • 21. Palabras en 3 dimensiones
  • 22. ¿Cuántas se necesitan para simular el cerebro?
  • 23. El mapa semántico y sus usos Cada palabra, y cada texto, tiene una ubicación Así se puede calcular la distancia entre textos y palabras Que permite hacer muuuuuuchas cosas….
  • 26. Occurrences - score > 0,5 - Fuente : Web nacional de noticias
  • 27. Contexto de Big Data : Temporal Batería de consultas Data -17.5 0 17.5 35 52.5 70 87.5 -4 0 4 8 12 16 20 Masterchef Junior Natación Problema
  • 28. Batería de consultas Data Contexto de Big Data : No Temporal 0 25 50 75 100 Mahou Heineken Damm Estrella Fuente 1 Fuente 2
  • 29. Conclusiones ¡YES WE CAN Hacer Big Data con Texto! Al tener un score en cada resultado, podemos medir y cuantificar Podemos descubrir cosas que no sabíamos que estábamos buscando Podemos generar tags automáticamente

Notas del editor

  1. Cervantes : La comunicación a través de palabras.