AGRIS es un sistema cooperativo internacional que ofrece acceso libre a recursos bibliográficos y datos abiertos sobre agricultura. El documento describe cómo AGRIS está migrando a OpenAGRIS, una aplicación basada en estándares de la Web Semántica que interconecta los registros AGRIS con fuentes externas de información usando AGROVOC. También explica cómo AGRIS centraliza referencias bibliográficas, las interconecta con otros datos, y maximiza el acceso a través de Google.

1. Taller Seminario de Capacitación RIDAC, Bogotá (Colombia)
21 noviembre 2013
De AGRIS a OpenAGRIS
Stefano.Anibaldi@fao.org
Imma.Subirats@fao.org
http://agris.fao.org
http://aims.fao.org

2. Sumario
¿Qué es AGRIS?
El camino a los datos vinculados
El flujo de datos y la interoperabilidad
El consumo de datos AGRIS
Centralización
Interconexión
Procedencia
Algunos números
Indexación de AGRIS en Google

3. AGRIS
Recursos en Ciencias Agrícolas y Tecnología de la Información

4. Qué es AGRIS
• Sistema cooperativo internacional
• Da acceso libre a recursos bibliográficos y datos
abiertos
• Abarca casi cuarenta años de investigación
agrícola
• Sus metadatos se estructuran e indexan usando
el tesauro AGROVOC
• Mantenido por la FAO

5. Flujo de datos

6. Interoperabilidad

7. OpenAGRIS
• Aplicación web enteramente basada en
estándares de la Web Semántica
• Utiliza la colección AGRIS para crear páginas de
mashup y interconectar los registros a fuentes
externas de información
• OpenAgris utiliza AGROVOC como columna
vertebral para la interconexión con otros
conjuntos de datos existentes (DBPedia,
worldbank, Ontología geopolítica ...)

8. Flujo de datos

10. El consumo de datos en AGRIS
• Centralización: referencias bibliográficas en el
dominio AGRIS (la agricultura, la silvicultura, la
ganadería, ciencias acuáticas y la pesca, y la
alimentación humana)
• Interconexión: otro tipo de información
relacionada con el dominio AGRIS (estadísticas,
mapas, perfiles de países, etc)

11. Centralización: Centro de proceso de datos
•
•
•
•
Los nuevos metadatos se verifican manualmente y
aleatoriamente en busca de inconsistencias o errores
semánticos recurrentes
El formato de entrada se asigna a AGRIS RDF
Los metadatos se convierten en AGRIS RDF, usando
AgroTagger cuando las palabras clave de AGROVOC no
están disponibles
Antes de añadir metadatos al triplestore e indexar en el
índice Solr, se detectan y gestionan los duplicados, ya
que el mismo registro puede ser indexado en varias
colecciones o ser duplicado en el mismo repositorio

12. Agrotagger
Maui es el nombre
del héroe mitológico
y semidiós
polinesio, que se
transform en
diferentes tipos de
ave para realizar
hazañas
Todavía no se ha
implementado
12

13. “RDF-ization”
bibo:Article
bibo:abstract
bibo:doi
bibo:isbn
bibo:language
bibo:presentedAt ->
bibo:Conference ->
dct:title
bibo:uri
dct:alternative
dct:creator ->
foaf:organization ->
foaf:name
dct:creator ->
foaf:Person ->
foaf:name
dct:dateSubmitted
dct:description
Elección de
dct:extent
vocabularios y
dct:identifier
equivalencias!
dct:isPartOf
dct:issued
dct:publisher ->
foaf:Organization ->
foaf:name
dct:source
dct:subject
dct:title
dct:type
dct:rights

14. Procedencia
•
•
•
Cada registro tiene un identificador AGRIS (ARN), que
tiene una estructura predefinida y contiene información
sobre la fuente de datos junto con el año de registro
bibliográfico de creación
"IT 2008 0 00091" se refiere a un registro creado en
2008 a partir de un proveedor específico de datos
AGRIS en Italia, cuyo número progresivo es 91
Datos de proveedores de información se almacenan en
CIARD RING y son “triplificados” en el centros de datos
AGRIS (cada proveedor de datos tiene su propio URI
único)

15. Enlaces: ¿cómo funcionan?
• AGROVOC es la columna vertebral
• AGROVOC está enlazado con otros tesauros
mediante un procedimiento semi-automático
(skos: exactMatch, skos: closeMatch)
• SPARQL endpoints publicados en la Web
• Webservices y APIs

16. El Caso IFPRI
Un usuario
consulta el
sistema
Registro AGRIS
con palabras
clave Agrovoc
Por lo menos una palabra
clave Agrovoc es un nombre
de país
El sistema de consultas SPARQL endpoint
IFPRI (http://data.ifpri.org/sparql/)
recupera el Índice Global del Hambre (GHI)
y la tasa de mortalidad infantil relacionada
con el País
16

17. Enlazando:
Implementación
AGRIS RDF RECORD
AGROVOC
17

18. Algunos números
•
•
•
•
7.632.842 registros bibliográficos generados por 248
proveedores de contenido ubicados en 153 países, en
52 idiomas en más de 20.000 revistas científicas.
134.544.101 triples en el conjunto de datos AGRIS
http://202.45.142.113:10035/repositories/agris
358.617 triples en la series de datos AGRIS
http://202.45.142.113:10035/repositories/jad
13.996 triples en los centros de datos AGRIS
http://202.45.142.113:10035/repositories/centers

19. Indexación de AGRIS en Google
Maximizando el acceso

20. Google Scholar
•
•
Desde cuando, en 2008, el equipo de AGRIS presentó
las primeras XML sitemaps de Google, la base de datos
(o sistema) aumentó la efectividad de rastreo e
indexación de toda la colección AGRIS (3 millones de
visitantes al año).
Esto creó el efecto positivo secundario de aumento de
la visibilidad y por lo tanto la accesibilidad de los datos
proporcionados por las colecciones de los proveedores
de datos que participan en la Red AGRIS.

21. Búsqueda customizada de Google (1)
•
•
Uno de los aspectos más interesantes - de gran utilidad
para los científicos que realmente quieren tener acceso
al documento - que AGRIS ha implementado en los
últimos años, es la recuperación del texto completo de
un recurso (referencia bibliográfica) cuya información
de URL no está presente en los propio metadatos.
Esto se logra a través de un gadget muy útil, buscar en
la web para el título específico, que toma la información
de las referencias bibliográficas. También para autores y
conferencias.

22. Búsqueda customizada de Google (2)
•
•
•
•
Esto se logra a través de la API de Google
La idea es buscar documentos de texto completo
disponibles en Internet, si la información acerca del
documento no se encuentra en los metadatos
Google permite una cantidad predeterminada de consultas
La cuota de consulta actual permitida es de 14.000 por
día. Esto significa que, 14.000 veces cada día, AGRIS es
capaz de buscar y recuperar (se calcula aproximadamente
un 60% de las veces) un documento específico, si está
disponible en Internet

23. AGRIS “Recolector Abierto” (1)
•
•
El objetivo era establecer un mecanismo para la
recolección automática y programada de metadatos y
depositarlos en AGRIS para su posterior indexación
El Recolector Abierto es una aplicación Java basada en
Harvester2 software de código abierto de Jeff Young
(OSS) y adaptado para el flujo AGRIS existente

24. AGRIS “Recolector Abierto” (2)
•
•
•
•
Fácil de instalar (Tomcat, Java, MySQL)
Sus funcionalidades incluyen un planificador, una única
página para los proveedor de datos que puede ser editada
y una página de estadísticas que enumera todos los
proveedores de datos AGRIS que usa OAI-PMH
Permite a cosechar cualquier formato de metadatos, tal
como define el repositorio abierto originario
Su utilidad está relacionada con el éxito de OAI-PMH

25. Gracias
Turno de Preguntas
Stefano.Anibaldi@fao.org
Imma.Subirats@fao.org
http://agris.fao.org
http://aims.fao.org