Este documento presenta una discusión sobre las métricas 2.0, bibliotecas y bibliotecarios. Propone que los productos y servicios métricos deben ser públicos y abiertos, y que los bibliotecarios deben abandonar enfoques individualistas en favor de sistemas integrados y exhaustivos como los CRIS. También argumenta que se deben incluir nuevas fuentes e indicadores más allá de monopolios, así como reconocer formas ampliadas de autoría e impacto.

1. 16 Noviembre 2016
Métricas 2.0, Bibliotecas y
Bibliotecarios
Isidro F. Aguillo
Cybermetrics Lab. IPP-CSIC
isidro.aguillo@csic.es
@isidro.aguillo
Webinar patrocinado
por Luthiers de Webs

2. 16 Noviembre 2016
Métricas 2.0, Bibliotecas y
Bibliotecarios
Isidro F. Aguillo
Cybermetrics Lab. IPP-CSIC
isidro.aguillo@csic.es
@isidro.aguillo

3. PROGRAMA
Ciencia 2.0 Ciencia abierta: Qué es y por qué es importante
Más y mejor evaluación es necesaria
Métricas 2.0 Más fuentes, nuevas fuentes, indicadores y datos abiertos
Los nuevos bibliómetras: DORA, Manifiesto de Leiden
Bibliotecas
Bibliotecarios
Una advertencia: abandonar el voluntarismo y la improvisación
Servicios y productos: Propuestas prácticas

4. CIENCIA 2.0
Evaluación
Métricas 2.0
Nuevos actores
Ciencia ciudadana
Nativos digitales
Difuminando
las fronteras entre la
comunicación formal e
Informal
Integrando
todo el ciclo de la
investigación y sus actores
Interconectando
datos, técnicas,
resultados en abierto
Big Data
Linked Data
Open Data
Reproducibilidad
Acceso Abierto
Transparencia

5. MÉTRICAS 2.0
• Licencias flexibles
• Integradas: CRIS o similar
Abiertas
• Bibliométricas
• No bibliométricas
Nuevas fuentes
• De las JLM a las ALM
• Perfiles
Cambio de
paradigma
• “Size independent”
• La nueva autoría
Más indicadores

6. CAMBIO DE PARADIGMA
• Factor de
Impacto
• SJR/SNIP
JLM
MÉTRICAS DE
REVISTAS
• Citas
• Alt-metrias
• Uso
ALM
MÉTRICAS DE
ARTÍCULOS
• Autores
• Instituciones
PERFILES

7. CAMBIO DE PANORAMA: NUEVAS FUENTES, OTRAS FUENTES
Visitantes Ranking Web of Universities

8. NUEVOS INDICADORES (I)
http://www.biblioteconomia-documentacion-española.infoec3.es/layout.php?id=autores

9. NUEVOS INDICADORES (II)
http://www.scholar-mirrors.infoec3.es/layout.php?id=authors

10. SUPERANDO EL “PUBLICA O PERECE”
Excelencia Más calidad, menos cantidad
Incrementar la visibilidad para aumentar el impacto
Publicar en
abierto
Discriminación positiva
También datos, herramientas, “peer review”, información adicional
Supremacía
de la cita
entre pares
Incluso órdenes de magnitud respecto a otros indicadores
Por que hay que cuestionar algunas Altmétricas (no todas)

11. RECONOCIENDO NUEVOS TIPOS DE AUTORÍA
Autor Líder y liderazgo
Otros roles: co-autoría, recolector y/o analista de datos, técnico, …
Contribuciones “informales”: Divulgador, desarrollador de software, …
Otros
Autores
Evaluador (sensu lato, no solo revisor de trabajos)
Editor de productos y servicios métricos (bibliómetra, …)
Gestor (proyectos, redes, editor, repositorios, tutor, …)
Otras
Actividades Fuera de la academia (impacto social, cultural, político, económico,
medioambiental,…)

12. UN AUTOR ES UN AUTOR, UNA CITA ES UNA CITA
INFORME
LIBRO
PRE-PRINT
INFORME
CITAS

13. EL BIBLIOTECARIO Y LAS MÉTRICAS

14. DORA y MANIFIESTO DE LEIDEN
http://www.ascb.org/dora/
http://www.leidenmanifesto.org/

15. PRODUCTO COMO SERVICIO
Abandonar
improvisación
Conocer demandas específicas de usuarios (“bottom-up”). Ejemplos:
- Edad académica (solicitada por investigadores junior)
- Género (necesario para estimar y paliar brechas)
Necesidades de evaluación (“top-down”). Ejemplos:
- Normalización (identificadores “forzados”)
- Impacto, visibilidad, excelencia (más y mejores indicadores)
Diseñar un
proceso Esfuerzo colectivo (incluyendo cooperación exterior: redes)
Abierto al exterior
Abierto a distintos niveles de edición
- Super-usuarios y usuarios finales

16. ADVERTENCIAS CONTRA …
Voluntarismo Servicios individualizados, muy exigentes en recursos
Criterios cambiantes, errores sistémicos
Indicadores
compuestos
Conocimiento experto para designar componentes y pesos
Terceras partes sesgadas y opacas
Soluciones
“in-house”
Estabilidad dificulta evolución
Software propio (lento desarrollo) vs externo (inflexible, caro)

17. INTEGRACIÓN
Servicios
propios
Control de fuentes, variables y productos/servicios finales
Control de calendarios
Fuentes
propias
Acceso a información privilegiada
Control de calidad por usuario final
Proveedores
externos
Negociar licencias personalizadas
Disponibilidad de APIs

18. MENDELEY (& SCOPUS) API

19. BUENAS PRACTICAS
CRIS Servicio en abierto permanentemente actualizado,
..que recoja toda la actividad
..y su impacto
Perfiles Autores: Portafolio 2.0 abierto al interesado
Grupos
Métricas Varias fuentes, múltiples indicadores
Indicadores relativos (niveles local, disciplinar, geográfico)

20. EL FUTURO ES CRIS …

21. UN MODELO BÁSICO
Aspectos
personales
Identificador
Edad académica
Disciplina
Género
Perfil de
actividad
Liderazgo
Índice de co-
autoría
% cooperación
internacional
Resultados
Excelencia
(top 10, 5 o 1%)
Primer Cuartil
Índice h
(y/o familia)
Otros
patentes, …
Impacto
Total de citas
% Autocitas
Altmétricas

22. VISUALIZACIONES
Datos Histogramas, Diagramas de lineas
Radar
Mapas
Perfiles Redes de coautorías
Redes de citaciones, menciones, enlaces
Temas Mapas conceptuales
Nubes de tags

23. CRIS VISUAL
http://repo.bg.pw.edu.pl/index.php/en/

24. VISUALIZACIONES RADAR
https://www.elsevier.com/__data/assets/pdf_file/0016/53026/Elsevier_BIS_2013_web_Dec2013-2.pdf

25. INDICADORES RELATIVOS
Isidro F. Aguillo 56 432 7.71 2 (h>=38)
Autor/Disciplina-País 2.2% 3.8% 105% 5.3%

26. PERFILES: IMPACTSTORY

27. ALTMETRIC≠ALTMETRÍA

28. MÁS INDICADORES: PLUM

29. DECISIONES CUESTIONABLES (O NO)

30. SUGERENCIAS
Controversia Mantener CRIS y Repositorios conectados, pero independientes
Promover anonimización de perfiles en informes de evaluación
Estándares Aceptables: Identificadores (ORCID)
Necesarios: DOI
Innecesarios: Handle
Privacidad
Compromiso institucional e individual

31. RESUMIENDO
Productos y Servicios
Métricos deben ser
PÚBLICOS y ABIERTOS
El bibliotecario debe
abandonar labores
oportunistas,
individualistas y
voluntaristas
en favor de
sistemas integrados,
exhaustivos, actualizados,
rigurosos, interactivos,
como los CRIS
FUENTES e
INDICADORES
Abandonar monopolios
de fuentes incompletas
y/o sesgadas
Construir perfiles con
descripciones tanto
cualitativas como
cuantitativas
Redefinir y ampliar
autoría e impacto
Introducir indicadores
relativos
CIENCIA 2.0
necesita
MÉTRICAS 2.0
Bibliotecarios
académicos
son ya la comunidad
(biblio)métrica más
numerosa e importante
Deben asumir roles más
importantes en los
procesos de evaluación

32. http://socialbiblio.com
info@socialbiblio.com
SaCSbeoAAAAJ 124106
isidro-f-aguillo
A-7280-2008
0000-0001-8927-4873
IsidroAguillo
3481717
@isidroaguillo
6507380175
¡MUCHAS GRACIAS!