Gabriel Vélez Cuartas, Docente Departamento de Sociología, Universidad de Antioquia, Coordinador de CoLav, Líder del equipo de métricas de Ameli CA, Colombia. Conferencia 4.° Encuentro Regional de Editores de Revistas Académicas 2019. Journals & Authors, Medellín - Colombia

1. Desarrollo e implementación
de métricas responsables
para la articulación de la ciencia y la sociedad

2. 2
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia y la sociedad
Gabriel Vélez Cuartas
Diego Restrepo Quintero
Alejandro Uribe Tirado
Jaider Ochoa Gutiérrez
César Pallares Delgado
Huber Fernando Gómez Molina
Marcela Suárez Tamayo
Julián Calle
María Coral Correa
Eduardo Aguado
Arianna Becerril

3. Métricas responsables
El problema de la responsabilidad de las métricas no está asociado al grado de objetividad que se considere como valor moral del resultado
métrico en sí mismo. El problema está en el procedimiento para determinar jerarquías y prestigios. Algunos de estos problemas son los
siguientes:
• Las métricas actuales no tienen memoria, personajes ya fallecidos en la sociología que son referentes de campo no logran sobresalir en los
índices citacionales, simplemente porque no han publicado en los años recientes y no entran dentro del conteo de un factor de impacto. Si bien la
investigación experimental acude a la inmediatez de los últimos descubrimientos, ni la filosofía, ni la filología o el psicoanálisis funcionan así.
• Las métricas actuales tampoco consideran realmente el valor de la prioridad en el descubrimiento, principio fundamental de la ciencia. Las
métricas consideran la visibilidad y el impacto, pero no hay inferencia alguna en el valor de la innovación.
• La ciencia es un trabajo colectivo; existen líderes, pero esos líderes no son nada sin sus equipos. Se individualiza la competencia y los
procedimientos métricos entran en conflicto cuando se intenta contrastar el valor de una publicación escrita entre más de 5000 autores 2 con una
que no tiene colaboraciones.
• La expansión o retracción de la ciencia se observa desde el punto de vista del crecimiento de la producción, pero no el estado de las
comunidades y sus dinámicas particulares de interacción, vigencia de los procesos de formación de nuevos investigadores, relación con
entorno no académico, etc., que permitan indicar su consolidación o no en las formas de producir conocimiento.

4. Métricas responsables
Proponer modelos de métricas responsables implica:
• Un ejercicio cooperativo de evaluación de lo que permite mejorar la observación del desempeño de los mismos científicos. En este sentido la
ciencia abierta tiene un papel muy importante: los algoritmos de medición (abiertos en GitHub), los datos (la circulación abierta no comercial de los
metadatos) y el diálogo entre los miembros de la comunidad (Blog AmeliCA 3 ) que se observa en los modelos de medición deben ser abiertos.
• El rescate de data histórica que permita observar la evolución del conocimiento, no sólo desde el punto de vista de las citas más antiguas, sino
desde la observación de los procesos de institucionalización de la ciencia en el Sur Global. La historia siempre ha sido contada desde Europa.
Habría que ver qué polaridades cambian con otros datos y otros relatos.
• Métricas orientadas a la búsqueda de criterios para medir diferentes formas de desempeño y no para encontrar sólo a los más visibles. La
utilización de la visibilidad a través del impacto o las descargas o las menciones es insuficiente para observar el cuadro completo de dinámicas.
• Contrastar el desempeño de las prácticas de las revistas universitarias y las revistas comerciales en términos de alcances en la
construcción de comunidades. Es importante hacer seguimiento a estas prácticas como posibilidad de generar estrategias para un balance
pertinente al desarrollo de la academia sin tener que incurrir en altos costos para poder generar circulación del conocimiento. Esto constituye una
dinámica especialmente importante para los países del sur global.

5. Frentes de trabajo: AmeliCA Métricas
Montaje de infraestructura computacional. Backend. Frontend.
Pilotos direccionados a autores, instituciones y revistas.
Conformación y consolidación de Colaboratorio de programación.

6. Infraestructura de analítica CoLaV (Backend)

7. 7
Tipos de indicadores (Frontend)
Construcción de comunidades CC Comunicabilidad C
Visibilidad V Formación de nuevos científicos FNC

8. 8
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad
Indicadores de construcción de comunidad
Configuración de colegios invisibles.
Capacidad de enlace de la comunidad en la que se
participa (Grado promedio).
Colaboración en producción científica y tecnológica con
actores académicos y no académicos.
Alcance geográfico de los colegios invisibles.
Construcción de comunidades CC

9. 9
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad
CC
==============================================================
Colegio Invisible de Andrés Amell (750)
==============================================================
Número de artículos (n): 750
----------------------------------------------------------
Arcs Edges
----------------------------------------------------------
Total de relaciones 0 837
----------------------------------------------------------
Grado promedio = 2.23200000
Jenny García Valencia
Facultad de Medicina
Universidad de Antioquia
Andrés Amell Arrieta
Facultad de Ingeniería
Universidad de Antioquia
==============================================================
Colegio Invisible de Jenny García (895)
==============================================================
Número de artículos (n): 895
----------------------------------------------------------
Arcs Edges
----------------------------------------------------------
Total de relaciones 0 1003
----------------------------------------------------------
Grado promedio = 2.24134078

10. 10
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad
Redes
organizacionales
Jenny García Valencia
Facultad de Medicina
Universidad de Antioquia
Andrés Amell Arrieta
Facultad de Ingeniería
Universidad de Antioquia
Colaboración Académica
(Fuente WoS)
Colaboración Técnica o Tecnológica
(Fuente LENS)
=======================================
Organizaciones (6)
=======================================
Número de artículos (n): 45 WoS
---------------------------------------
Arcs Edges
---------------------------------------
Total de relaciones 0 8
---------------------------------------
Univ Antioquia 1
Universidades 5
==========================================
Organizaciones (6)
==========================================
Número de artículos (n): 45 WoS
------------------------------------------
Arcs Edges
------------------------------------------
Total de relaciones 0 8
------------------------------------------
Univ Antioquia 1
Organizaciones productivas 3
===========================================
Organizaciones (6)
===========================================
Número de artículos (n): 45 WoS
-------------------------------------------
Arcs Edges
-------------------------------------------
Total de relaciones 0 8
-------------------------------------------
Univ Antioquia 1
Universidades 18
Osal 26
Colaboración Académica
(Fuente WoS-Redalyc)

11. 11
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad
CI
Jenny García Valencia
Facultad de Medicina
Universidad de Antioquia
Andrés Amell Arrieta
Facultad de Ingeniería
Universidad de Antioquia
Alcance geográfico del colegio invisible Alcance geográfico del colegio invisible
Nacional
32%
Regional
17%
Global
51%
Nacional Regional Global
Investigadora Global 50,4%
(superior al 33% de citas)
Nacional
19%
Regional
5%
Global
76%
Nacional Regional Global
Investigador Global 76%
(superior al 33% de citas)

12. 12
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad
Indicadores de visibilidad
Número de artículos por bases de datos
Número de citas por bases de datos
Número de productos tecnológicos por bases de datos
Descargas de información.
Visibilidad V

13. 13
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad V
Jenny García Valencia
Facultad de Medicina
Universidad de Antioquia
Andrés Amell Arrieta
Facultad de Ingeniería
Universidad de Antioquia
Artículos identificados: 71
Citas GS: 788 Error 49
Citas WoS: 379
Citas Scopus: 383
Citas RG: 425
Artículos identificados: 67
Citas GS: 889 Error 114
Citas WoS: 385
Citas Scopus: 104
Citas RG: 701
Cantidad de artículos y citas
por bases de datos

14. 14
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad V
Jenny García Valencia
Facultad de Medicina
Universidad de Antioquia
Andrés Amell Arrieta
Facultad de Ingeniería
Universidad de Antioquia
Producción técnica o tecnológica
Fuente LENS
Producción técnica o tecnológica
Patente; 5
Software; 2
Patente Software
CIP WIPO (Listado)
Pendiente
N.D.

15. 15
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad V
Jenny García Valencia
Facultad de Medicina
Universidad de Antioquia
Andrés Amell Arrieta
Facultad de Ingeniería
Universidad de Antioquia
Andrés Adolfo Amell Arrieta
Plataforma No. De perfiles
RG
Score Percentile H index Publicaciones Full text Lecturas Citaciones Following Follower Link Coautor Views
Research Gate 1 26,85 82,5 11 39 12 1611 438 34 26 https://www.researchgate.net/profile/Andres_Amell N.D. N.D.
Mendeley 1 N.D. N.D. N.D. 0 N.D. 741 N.D. 0 51 https://www.mendeley.com/profiles/andrs-amell/ 53 35312
Google Scholar 1 N.D. N.D. 16 N.D. N.D. N.D. 788* N.D. N.D. https://scholar.google.es/citations?user=V48mCMgAAAAJ&hl=es N.D. N.D.
Jenny García Valencia
Research Gate 1 28,31 85 12 91 42 4187 710 25 74 https://www.researchgate.net/profile/Jenny_Garcia3
Mendeley 0 N.D. N.D. N.D. N.D. N.D. N.D. N.D. N.D. N.D. N.D. N.D. N.D.
Google Scholar 0 N.D. N.D. N.D. N.D. N.D. N.D. N.D. N.D. N.D. N.D. N.D. N.D.
*De acuerdo a la depuración y artículos observados en esta investigación
Presencia en plataformas sociales

16. 16
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad V
Jenny García Valencia
Facultad de Medicina
Universidad de Antioquia
Andrés Amell Arrieta
Facultad de Ingeniería
Universidad de Antioquia
Mención en medios de
comunicación
Fuente Google News
Mención en medios de
comunicación
N.D.

17. 17
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad
Indicador de comunicabilidad
Idiomas en los que se comunica.
Comunicabilidad C

18. 18
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad
C
Jenny García Valencia
Facultad de Medicina
Universidad de Antioquia
(Fuentes: WoS, Redalyc, Scopus)
Andrés Amell Arrieta
Facultad de Ingeniería
Universidad de Antioquia
(Fuentes: WoS, Scopus Scielo, Redalyc)
English
34%
Español
66%
English
Español
English
65%
Español
35%
English
Español

19. 19
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad
Indicadores de formación
Trabajos dirigidos
Citas en tesis
Formación de nuevos científicos FNC

20. 20
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad
FNC
Jenny García Valencia
Facultad de Medicina
Universidad de Antioquia
Andrés Amell Arrieta
Facultad de Ingeniería
Universidad de Antioquia
Áreas de formación
Ciencias Médicas y de la Salud -- Medicina Clínica -- Psiquiatría,
Medicina General e Interna, Epidemiología, Pediatría, Genética Humana,
Medicina Clínica -- Cardiovascular, Neurología Clínica, Medicina Clínica --
Urología y Nefrología.
Fuente CvLac
Áreas de formación
Ingeniería y Tecnología -- Ingeniería Mecánica -- Termodinámica,
Producción y distribución de electricidad y gas - Producción y distribución de
energía eléctrica, Producción y distribución de gás a través de tuberías,
Industria Metal-Mecánica, Termodinámica, Ingeniería y Tecnología --
Ingeniería Ambiental -- Ingeniería del Petróleo (Combustibles, Aceites),
Energía y Combustibles,
Fuente CvLac

21. 21
Desarrollo e implementación de métricas responsables
para la articulación de la ciencia con la sociedad
FNC
Jenny García Valencia
Facultad de Medicina
Universidad de Antioquia
(Fuente CvLac)
Andrés Amell Arrieta
Facultad de Ingeniería
Universidad de Antioquia
(Fuente CvLac)
15
5
1
36
33
2
0 5 10 15 20 25 30 35 40
Trabajos dirigidos/Tutorías - Iniciación
Científica
Trabajos dirigidos/Tutorías - Monografía de
conclusión de curso de…
Trabajos dirigidos/Tutorías - Tesis de
doctorado
Trabajos dirigidos/Tutorías - Trabajo de grado
de maestría o especialidad clínica
Trabajos dirigidos/Tutorías - Trabajos de grado
de pregrado
Trabajos dirigidos/Tutorías - Trabajos
dirigidos/Tutorías de otro tipo
Total
1
9
3
49
1
1
0 10 20 30 40 50 60
Trabajos dirigidos/Tutorías - Iniciación
Científica
Trabajos dirigidos/Tutorías - Monografía de
conclusión de curso de…
Trabajos dirigidos/Tutorías - Tesis de
doctorado
Trabajos dirigidos/Tutorías - Trabajo de grado
de maestría o especialidad clínica
Trabajos dirigidos/Tutorías - Trabajos de grado
de pregrado
Trabajos dirigidos/Tutorías - Trabajos
dirigidos/Tutorías de otro tipo
Total
1
68
14
22
32
0 20 40 60 80
Disertación
Tesis Doctoral
Tesis Especializacion
Tesis Maestria
Tesis Pregrado
Total
6
31
1
37
14
0 10 20 30 40
Disertación
Tesis doctoral
Tesis Especialización
Tesis Maestría
Tesis Pregrado
Total
Tutorías
Citas en tesis
Internacional
Local
Regional
Internacional
Nacional
Regional