Scratch con kinect Realidad Aumentada aumentamericas 2016 Cartagena

1. Licenciado en Diseño Tecnológico
@javiertecteos
javiergixmatic@gmail.com
Jegcgarcas.wordpress.com
Javier Garzón

9. ¿Crees que estamos lejos de esto?
http://www.youtube.com/watch?v=31kxnLLnJ58
Iron man (2010)

10. Star Wars

11. Dragon Ball

12. ¿Has jugado esto?
Pokémon GO (2016)
https://youtu.be/2sj2iQyBTQs

13. Historia

14. Sensorama
1946
Experiencia inmersiva de Realidad
Virtual (RV)

15. Tom Caudell
acuñó el término en 1990

16. el primer congreso internacional sobre RA
IWAR 98
“International Workshop on Augmented
Reality ’98” se desarrolló en San Francisco.
Hoy llamado ISMAR
“International Symposium on Mixed and
Augmented Reality” en Munich, Alemania
En 2016 se realizo el primer ISMAR en
Latinoamérica, en México
http://augmented-reality.inn.leedsmet.ac.uk/iwar/98/
http://www.ismar.net/
http://ismar.vgtc.org/

17. Pokémon GO (2016)
https://youtu.be/2sj2iQyBTQs

19. Azuma, 1997
• Combina elementos reales y
virtuales
• Es interactivo en tiempo real
• Se registra en 3D
http://www.ronaldazuma.com/
Características de la RA

20. Taxonomía de la RA
Taxonomía de la Realidad Mixta (Milgram,
Takemura, Utsumi, & Kishino, 1994)

21. RA RV
Aumenta la realidad
Complementa los
sentidos
Usa pantalla
Es inmersiva
Estimula (engaña) los
sentidos
Usa lentes

22. Componentes de la realidad
aumentada:
• Pantalla
• Cámara
• Procesador
• Software de RA
• Activadores (Marcadores).

23. DISPOSITIVOS
PC o Laptop
Móviles
Lentes o gafas
Placas de desarrollo (Raspberry Pi)

24. NIVELES DE LA RA
0
1
2
3
De Raúl Reinoso
Juan Miguel Muñoz @mudejarico

25. Nivel 0
hiperenlaces
Código QR

26. Nivel 1
Con marcas
http://blogs.salleurl.edu/dtm-media-technology/%E2%80%9C-los-declaro-marketing-y-realidad-aumentada%E2%80%9D/
http://www.computerworld.es/sociedad-de-la-informacion/la-realidad-aumentada-movil-ingresara-1000-millones-de-dolares-en-2015
Patrones o
activadores

27. Nivel 2
Sin marcas
http://www.sonitron.net/noticia/sony-desarrolla-tecnologia-smartar-realidad-aumentada-integrada/61945
http://www.baquia.com/tecnologia-y-negocios/entry/emprendedores/2014-02-06-realidad-aumentada-geolocalizacion-un-nuevo-coctel-de-exito-para-empresas-del-sector-turistico
Markerless RA
imágenes y objetosVisual search
imágenes
Geolocalización AR
coordenadas GPS
GPS – ubicación
brújula – orientación
acelerómetro – elevación y
ángulo
Reconocimiento gestual y de movimiento
cuerpo humano

28. Nivel 3
Visión aumentada
Wearable technology
Eye wear
http://ben-grossman.com/google-glass-brands-wearable-technology-landscape-pt-13

29. Important Developments in Technology for K-12 Education
Avances Importantes en Tecnología para K-12 Educación
The NMC Horizon Report: 2014 K-12 Edition

30. 2014 NMC Master List of Tracked Technologies

31. Las 12 tecnologías finales en tres proyectos de
investigación de NMC Horizon 2013
Perspectivas Tecnológicas. Educación Superior en América Latina 2013-2018. Un Análisis
Regional del Informe Horizon NMC

32. Tipos de Tracking
Markerless
Tracking
Instant/SLAM
Fiducial
SensorBased
3D (3DMap) .
2D/Extended
2D
2D Gravity
2D Gravity + SLAM
3D SLAM
QR-/Barcode
ID Marker
Picture Marker
GPS
Orientation
LLA Marker
Dummy
3D (Edge based)
Face
Fernando F. Gallego de Metaio http://www.slideshare.net/fernandofgallego/droidcon2014-r-amasalladeglass

33. Reinoso, R (2013). Introducción a la realidad Aumentada.EOE 2013. Recuperado el 12 de octubre de 2013 de, http://www.slideshare.net/tecnotic/introduccin-a-la-realidad-
aumentada-eoe-2013
AR Spot
Scratch 2.0
kinect2Scratch

35. Emily Langer, Revista the Washingtong post
https://www.washingtonpost.com/national/seymour-papert-mit-professor-who-connected-children-
with-computers-dies-at-88/2016/08/03/59009d08-582a-11e6-9aee-8075993d73a2_story.html
Adam Rogers, Revista wired http://www.wired.com/2016/01/we-asked-a-robot-to-write-an-obit-for-ai-pioneer-
marvin-minsky/

36. Emily Langer, Revista the Washingtong post
https://www.washingtonpost.com/national/seymour-papert-mit-professor-who-connected-children-
with-computers-dies-at-88/2016/08/03/59009d08-582a-11e6-9aee-8075993d73a2_story.html
Adam Rogers, Revista wired http://www.wired.com/2016/01/we-asked-a-robot-to-write-an-obit-for-ai-pioneer-
marvin-minsky/
Marvin Minsky Seymour Papert

39. Mitchel Resnick
2006

40. Red Colombiana de
Robótica educativa

42. Existen dos versiones:
Scratch 1.4 Scratch 2.0

46. AR Spot
Scratch 2.0
kinect2Scratch
Scratch
Realidad
Aumentada

47. Augmented Environments Lab (AEL) http://ael.gatech.edu/lab/research/authoring/arspot/
ARSPOT
2012

48. 2012

49. kinect2Scratch
Scratch Kinect

50. Kinect 2 Scratch
Versión 1 – 2012
Versión 2 – 2015
Stephen Howell shows the Kinect to the audience at
Scratch@MIT Conference 2012. Dr. Sugiura &
Prof. Kishi are also pictured. @saorog

51. Kinect2Scratch was developed by Stephen Howell. It is available at http://scratch.saorog.com

52. Cámaras que combinan dos tipos de sensores:
• Cámara de profundidad: información de la forma del objeto y/o
entorno
• Cámara RGB: información de la apariencia del objeto y/o entorno
Nos permite:
• Oclusión real del objeto.
• Mejora la robustez de los algoritmos de detección y tracking bajo
condiciones lumínicas adversas.
• Iluminación realista del objeto.
• Permite determinar la deformación del objeto en tiempo real.
• Interacción mas realista con los objetos físicos.

53. https://developer.microsoft.com/en-us/windows/kinect

54. Esqueleto de Kinect. Fuente: http://goodnameblog.blogspot.com.es/2012/07/skeletons-el-desarrollo-de-una-interfaz.html
Esqueleto de Kinect

56. ????

57. Semillero DAC

58. https://www.youtube.com/watch?v=1pJhCMwPjcU

59. https://www.youtube.com/watch?v=3AxRT7USQFM

60. Fases
exploración
creación
Exploración de
programación
física
Observación y
análisis
Creación
Retroalimentación

61. Videojuego de laberinto en el curso de videojuegos. Fundación Ixmatic

62. Makey makey y frutas para interactuar con el videojuego

63. Probando juegos de
Scratch con kinect

64. Scratch + Arduino

65. S4A

67. Robots con arduino

69. micro brazo con arduino scratch y kinect https://youtu.be/kI8BYval8YI

70. ????

71. Kinect + Scratch + LEGO
https://www.youtube.com/watch?v=77sH8O7ikJg&list=PLW10M-w59z-endBN-We2Pv-ExlkVjmCDM&index=3

73. Licenciado en Diseño Tecnológico
@javiertecteos
javiergixmatic@gmail.com
Jegcgarcas.wordpress.com
Gracias