1. BIME HackDay
EXTRAYENDO LOS DATOS EN LAS ADMINISTRACIONES PÚBLICAS
Jose M Subero
@JoseMSubero
Bilbao, 31 de octubre de 2014

2. OPEN DATA
INTRO
SERVICIOS GENÉRICOS
APIs
EXPERIENCIA
DESARROLLADORES
FIN

3. OPEN DATA
INTRO

4. el nuevo inicio
fuente: whitehouse.gov

5. gobierno abierto

6. OPEN DATA

7. OPEN

8. OPEN DATA

9. OPEN DATA
BUDGET KNOWLEDGE
SOURCE GOV CODE

10. datos, ¿qué datos?
fuente: Gartner, marzo 2013

11. USUARIOS
CIUDADANOS
Vs
REUTILIZADORES

12. OPEN DATA
SERVICIOS GENÉRICOS

13. la web!

14. limpio, claro, amable… usable

15. explicando desde 0 lo que hacemos
https://www.youtube.com/watch?v=ltmOoFaN-7Y

16. el ejemplo de las búsquedas

17. los servicios de Aragón Open Data

18. ¿dónde van mis impuestos?

19. el lado oscuro de la fuerza…

20. …y se hizo la luz

21. flujos de dinero: presupuestados y ejecutados

22. lo que tú aportas

23. glosario

24. en qué se gasta

25. cómo se gasta

26. de dónde se ingresa

27. gráfico y texto

28. evolución por años

29. quién gasta

30. Presupuesto 2.0: nivel local

31. todos los ayuntamientos de aragón

32. en qué gastan los ayuntamientos

33. comparamos presupuestos totales

34. y presupuestos per cápita

35. comparación individual de partidas

36. datos a nivel local

37. la web

38. cuanto más cercano más importa

39. todos los munic ipios con su página de datos abiertos

40. aragoDBpedia

41. mundo linked data

42. escuchamos las opiniones en aragón

43. ¿a q ué nos dedicamos?, ¿somos diferentes?

44. el análisis de la conversación

45. el análisis de la conversación
http://analyzer1.bifi.unizar.es:8080/

46. http://analyzer1.bifi.unizar.es:8080/
el análisis de la conversación

47. datos en tiempo real

48. la visualización de la conversación

49. OPEN DATA
APIs
http://opendata.aragon.es/portal/desarrolladores/

50. API CKAN, para encontrar conjuntos de datos

51. URI base: http://opendata.aragon.es
Sección URI
Catálogo de datos /catalogo
Taxonomía sectores primarios /catalogo/turismo (...)
Dataset /catalogo/indice-de-precios-hoteleros
Ontología /def
Taxonomías, diccionarios... (SKOS) /kos (no hay)
Instancias de conceptos modelados /recurso
Portal /portal
AragoPedia /aragopedia
Catálogo por tipo de dato /catalogo/fotos (...)
Catálogo por tema y tipo /catalogo/medio-ambiente/fotos (...)
NTI
Extensión
Sección URI del API
Catálogo de datos /catalogo/api
AragoPedia /aragopedia/api.php
AragoDBPedia /recurso
Aragón Social Data /socialdata

52. Metadato NTI Propiedad RDF
REQUERIDOS Meta.
Nombre dct:title
Descripción dct:description
Órgano publicador dct:publisher
Fecha de creación dct:issued
Fecha de actualización dct:modified
Idioma(s) dc:language
dct:language
Temáticas dcat:themeTaxonomy
Página Web foaf:homepage
Términos de uso dct:license
Documento(s) y recurso(s) dcat:dataset
OPCIONALES
Tamaño del catálogo dct:extent
Identificador dct:identifier
Cobertura geográfica dct:spatial
Derechos dct:rights
Registro dcat:record
metadatos RDF del catálogo

53. Metadato NTI Propiedad RDF
REQUERIDOS Meta.
Nombre dct:title
Descripción dct:description
Temática(s) dcat:theme
Organismo publicador dct:publisher
Distribución(es) dcat:distribution
RECOMENDADOS – DCAT-AP
Etiqueta(s) dcat:keyword
Contacto dcat:contactPoint / adms:contactPoint
OPCIONALES
Identificador dct:identifier
Fecha de creación dct:issued
Fecha de actualización dct:modified
Frecuencia de actualización dct:accrualPeriodicity
Idioma dc:language / dct:language
Condiciones de uso dct:publisher
Cobertura geográfica dct:spatial
Cobertura temporal dct:temporal
Vigencia dct:valid
Recursos relacionado dct:references
Normativa dct:conformsTo
Página de acceso dcat:landingPage
Identificador secundario adms:identifier
Versión adms:version
Notas de la versión adms:versionNotes
me tadatos RDF de los conjuntos de datos

54. Metadato NTI Propiedad
REQUERIDOS
URL de acceso dcat:accessURL
Formato dcat:mediaType
RECOMENDADOS – DCAT-AP
Descripción dct:description
Condiciones de uso dct:license
Formato dct:format
OPCIONAL
Identificador dct:identifier
Nombre dct:title
Tamaño dcat:byteSize
Información adicional dct:relation
Fecha de creación dct:issued
Fecha de actualización dct:modified
Derechos dct:rights
URL de descarga dcat:downloadURL
Estado adms:status
metadatos RDF de las distribuciones

55. Descripción completa del API
•http://docs.ckan.org/en/latest/api/index.htmllogo-ckan.png
Listado de conjunto de datos:
•http://opendata.aragon.es/catalogo/api/3/action/package_list
•http://opendata.aragon.es/catalogo/catalogo.rdf
Listado de categorías:
•http://opendata.aragon.es/catalogo/api/3/action/group_list
Listado de etiquetas:
•http://opendata.aragon.es/catalogo/api/3/action/tag_list
•http://opendata.aragon.es/catalogo/api/2/tag_counts (no incluida en
API v3)
API CKAN

56. Detalles de conjunto de datos
•http://opendata.aragon.es/catalogo/api/3/action/package_show?
id=cartografia-1-5000_carto5000 (con name)
•http://opendata.aragon.es/catalogo/api/3/action/package_show?
id=7652354a-8d99-481b-ba09-79d03e736d2f (con id)
•http://opendata.aragon.es/catalogo/cartografia-1-5000_carto5000.rdf
(Alternativa RDF, sin API)
Detalles de categorías
•http://opendata.aragon.es/catalogo/api/3/action/group_show?id=turismo
Detalles de etiquetas
•http://opendata.aragon.es/catalogo/api/3/action/tag_show?id=Hogares
API CKAN

57. Queries a conjuntos de datos utilizando sintaxis Solr:
•http://opendata.aragon.es/catalogo/api/3/action/package_search
?=licencias
Queries a recursos utilizando sintaxis Solr:
•http://opendata.aragon.es/catalogo/api/3/action/resource_search?query=
name:mapa
Queries a etiquetas utilizando sintaxis Solr:
•http://opendata.aragon.es/catalogo/api/3/action/tag_search?q=lica
API CKAN
Más info sobre Solr:
•http://wiki.apache.org/solr/CommonQueryParameters
•http://www.solrtutorial.com/solr-query-syntax.html

58. Paginación start/rows, por defecto 0/10 respectivamente
•http://opendata.aragon.es/catalogo/api/3/action/package_search?q=
javalambre&rows=5&start=1
Criterios de ordenación, sort:
•http://opendata.aragon.es/catalogo/api/3/action/package_search?q=javalambre&•http://opendata.aragon.es/catalogo/api/3/action/package_search?q=javalambre&Filtros sobre muchos campos:
- Comodín es * (no válido al comienzo) y negación es –
- Rangos: [10 TO *] [10 TO 20]
- Operadores lógicos: AND, OR...
http://opendata.aragon.es/catalogo/api/3/action/package_search?q=-
author:
%22Instituto%20Aragon%C3%A9s%20de%20Estad%C3%ADstica%20%28IAEST%29%22%20AND%:m*%20AND%20num_tags:[3%20TO%207]
API CKAN

59. API AragoPedia

60. API AragoPedia
{{Ficha de datos turisticos
| EST_HOTEL_MUNICIPIOS_2011 = 18
| PLAZAS_HOTEL_MUNICIPIOS_2011 = 871
| EST_CAMPINGS_MUNICIPIOS_2011 = 2
| PLAZAS_CAMPINGS_MUNICIPIOS_2011 = 1263
| EST_TURISMO_RURAL_MUNICIPIOS_2011 = 9
| PLAZAS_TURISMO_RURAL_MUNICIPIOS_2011 = 59
| EST_APARTAMENTOS_MUNICIPIOS_2011 = 4
| PLAZAS_APARTAMENTOS_MUNICIPIOS_2011 = 57
}}
DATOS
PLANTILLA
…
{{#pPie: exploded|3d|legend|size=400x200|title=Plazas alojamiento turístico (2011)|data=
Hoteles,{{{PLAZAS_HOTEL_MUNICIPIOS_2011|{{{PLAZAS_HOTEL_COMARCAS_2011|
{{{PLAZAS_HOTEL_PROVINCIA_2011|{{{PLAZAS_HOTEL_ARAGON_2011|-}}}}}}}}}}}}
Turismo rural,{{{PLAZAS_TURISMO_RURAL_MUNICIPIOS_2011|
{{{PLAZAS_TURISMO_RURAL_COMARCAS_2011|{{{PLAZAS_TURISMO_RURAL_PROVINCIA_2011|
{{{PLAZAS_TURISMO_RURAL_ARAGON_2011|-}}}}}}}}}}}}
Campings,{{{PLAZAS_CAMPINGS_MUNICIPIOS_2011|{{{PLAZAS_CAMPINGS_COMARCAS_2011|
{{{PLAZAS_CAMPINGS_PROVINCIA_2011|{{{PLAZAS_CAMPINGS_ARAGON_2011|-}}}}}}}}}}}}
}}

61. API AragoPedia
Descripción completa del API
•http://opendata.aragon.es/aragopedia/api.php
Lista de artículos publicados HTML (500 primeros)
•http://opendata.aragon.es/aragopedia/api.php?action=query&list=
allpages&aplimit=500(500 primeros)
•http://opendata.aragon.es/aragopedia/api.php?action=query&list=
allpages&aplimit=500&apfrom=Orera(desde 501)
Lista de artículos publicados en JSON
•http://opendata.aragon.es/aragopedia/api.php?action=query&list=allpages&aplimit=Lista de artículos publicados en XML
•http://opendata.aragon.es/aragopedia/api.php?action=query&list=
allpages&aplimit=500&format=xml

62. Contenido del artículo formato wiki-text (VER FUENTE)
•http://opendata.aragon.es/aragopedia/index.php?action=raw&title=Jaca
Contenido de página “Jaca” en formato XML
•http://opendata.aragon.es/aragopedia/api.php?action=query&prop=revisions&(a partir de infoboxes)
•http://opendata.aragon.es/aragopedia/api.php?action=parse&page=
Jaca&format=xml (contenido “parseado”)
Obtener secciones de la página “Jaca”
•http://opendata.aragon.es/aragopedia/api.php?action=parse&page=
Jaca&format=xml&prop=sections (listado)
•http://opendata.aragon.es/aragopedia/api.php?action=query&titles=
Jaca&prop=revisions&rvprop=content&rvsection=2 (contenido sección 2)
Varias páginas en formato JSON, XML o TXT:
•http://opendata.aragon.es/aragopedia/api.php?action=query&prop=
revisions&rvprop=content&format=xml&titles=Jaca|Benasque&format=xml
API AragoPedia

63. Buscar la palabra “Rodriguez” en todas las páginas
•http
://opendata.aragon.es/aragopedia/api.php?action=query&list=search&srwhat=text&(max 20 results)
•http://opendata.aragon.es/aragopedia/api.php?action=query&list=search&srwhat=(a partir de resultado 25)
Exportar contenidos en XML (carga en otro Mediawiki)
•http://opendata.aragon.es/api.php?action=
query&export&exportnowrap&titles=Panticosa|Benasque
Dump completo
http://opendata.aragon.es/aragopedia/dumps/
Utilidades para uso del API en distintos entornos:
http://www.mediawiki.org/wiki/API:Client_code
API AragoPedia

64. Fuente http://www.oeg-upm.net
Proceso transformación Proceso publicación
API AragoDBPedia

65. API AragoDBPedia
AragoPedia Ontology
•http://opendata.aragon.es/def/Aragopedia.html
Portal API AragoDBPedia
•http://opendataaragon.3scale.net

66. API AragoDBPedia

67. Vía HTML
http://opendata.aragon.es/recurso/territorio/Comarca?api_key={tu_API_key}
API AragoDBPedia

68. XML
http://opendata.aragon.es/recurso/territorio/Municipio.xml?api_key={tu_API_key}
JSON
http://opendata.aragon.es/recurso/territorio/Municipio.json?api_key={tu_API_key}
RDF
http://opendata.aragon.es/recurso/territorio/Municipio.rdf?api_key={tu_API_key}
Turtle
http://opendata.aragon.es/recurso/territorio/Municipio.ttl?api_key={tu_API_key}
CSV
http://opendata.aragon.es/recurso/territorio/Municipio.csv?api_key={tu_API_key}
API AragoDBPedia

69. Acceso vía consulta SPARQL
http://opendata.aragon.es/portal/cliente-sparql
http://opendata.aragon.es/portal/desarrolladores/punto-sparql (instrucciones)
Punto SPARQL

70. OPEN DATA
EXPERIENCIA
DESARROLLADORES

71. Información
http://opendata.aragon.es/portal/jacathon
Código
https://github.com/aragonopendata/

74. •EQUIPO JODOCODERS
•Rafael Ramos (@rrasmo).
Fontanero del backend.
•Javier Rubio (@jrubr). Ideas,
sistemas y a partir de ahora
hater del ecosistema python.
•Jesús Barón (@jesusbaron).
Sufridor analista de datos.
•Dani Latorre (@dani_latorre).
Desarrollo frontend, por puro
descarte.
Ganadores “Idea más novedosa”
en Jacathon Aragón Open Data
http://crasaragon.com/