2. • Tres axiomas que obligan a escribir:
• “Publicar es consustancial a investigar”
• “Lo que no se publica y se difunde no es
• ciencia” (todo tiene que poder ser
contrastado)
• “Lo que no se documenta acaba no
existiendo”
Baiget, Tomás. “Cómo publicar con impacto en revistas científicas”, seminario impartido el 24 octubre 2011, DGB‐
UNAM
17. Indicadores bibliométricos
• Son datos estadísticos deducidos de las publicaciones científicas
• Su uso se apoya en el importante papel que desempeñan las
publicaciones en la difusión de los nuevos conocimientos
• Estos indicadores son válidos en aquellos contextos en que los
resultados de investigación dan lugar a publicaciones científicas
• Habitual en las ciencias básicas
• Para valorar las investigación de las áreas aplicadas es importante
recurrir también a las patentes
• La aplicación de los resultados de la investigación a la innovación
industrial y su posible comercialización requiere el análisis de
patentes y la utilización de otros indicadores relacionados con el
mercado
18. Indicadores bibliométricos
• Indicador bibliométrico: es una medida que se refiere al impacto científico o a la
cantidad de publicaciones científicas [Vinkler 1988]
• Los indicadores bibliométricos pueden dividirse en 2 grandes bloques
– Indicadores relacionados con la publicación
– Indicadores relacionados con las citas
• Indicadores relacionados con la publicación: número de artículos, libros,
comunicaciones a congresos, informes, patentes, etc.
• Indicadores relacionados con las citas: utilizan como base el número de citas
recibidas por las publicaciones que se evalúan
• El más simple de estos indicadores es el número de citas recibidas por una
publicación, un autor, un departamento, etc.
• Uno de los indicadores más utilizados es el factor de impacto
Vinkler, P. 1988. An attempt of surveying and classifying bibliometric indicators for scientometric purposes. Scientometrics, 13, 239‐259
19.
20.
21.
22. Revista
citada
Revista
citada
Revista
citada
Revista
citada
Revista Revista
citante citada
Revista
citada
Revista
citada
23. Revista
citada
Revista
citada
Revista
citada
Revista
citada
Revista Revista
citada citada
Revista
citada
Revista
citada
24.
25. 2 y 3 años
1 año
Vida media: años en los
que se acumulan el 50%
de las citas que recibe
una revista
27. Factor de impacto
• Indicador inventado en los años 60’s por Eugene Garfield,
presidente del Institute for Scientific Information
• Variables que influyen en los valores numéricos de los
factores de impacto:
• Número de citas que contienen los artículos que se publican
en un área determinada
– Los artículos de revisión tienden a ser más citados que los artículos
usuales
• No es raro que algunas de las revistas que publican
revisiones figuren entre las de más alto impacto
28. Secuencia temporal en la distribución de las citas
• La distribución de las citas que los artículos reciben con el tiempo parece seguir una pauta
común
• Diversos autores han propuesto ecuaciones matemáticas que modelan la variación del
número de citas anuales que reciben los artículos
• Según estos modelos, el número de citas que recibe un artículo comienza siendo pequeño y
crece progresivamente con el tiempo hasta que alcanza un máximo a partir del cual el
número de citas anuales que consigue decrece progresivamente con un ritmo de descenso
generalmente distinto del ritmo de crecimiento
• Existen diferencias entre disciplinas en la edad a la que los artículos alcanzan el máximo de
citas
• Los artículos de Ciencias Naturales suelen alcanzar su máximo de citas antes que los
artículos de Ciencias Sociales y Humanidades
• En Ciencias Naturales los artículos suelen contener referencias a artículos recientes
• En Ciencias Sociales las referencias se suelen hacer a publicaciones de más edad
• Journal Citation Report (ISI) incluye el parámetro de vida media
• Vida media = refleja la obsolescencia de los artículos que se publican en las revistas
científicas
• Una vida media = 5 significa que la mitad de las citas que recibe una revista en un año
fueron para artículos publicados en los 5 años anteriores
29. Factor de impacto [ FI ]
• El factor de impacto es utilizado por las bibliotecas científicas para seleccionar o
cancelar las suscripciones ‐‐‐‐ precios de subscripción / presupuesto
• Las editoriales pueden utilizar los factores de impacto para conocer la posición de
sus revistas científicas con respecto a la competencia
• También para decidir el lanzamiento de una nueva revista en áreas no
suficientemente cubiertas bibliográficamente
• Los científicos orientan su decisión para publicar teniendo en cuenta los FI
ficos
– Tanto para conseguir una mayor difusión de sus trabajos
– Como para incrementar su prestigio y visibilidad en la comunidad científica
prestigio
• FI para la EVALUACIÓN ACADÉMICA: la idea que subyace tras este enfoque es que
MICA
el FI refleja el prestigio y la influencia de una revista científica entre la comunidad
científica
• Se considera que se puede diferenciar el mérito de los artículos científicos
atendiendo a la revista en la que se publicaron
30. Críticas vs Factor de impacto [ FI ]
• Críticas vs consistencia o validez del FI
• Garfield: aconseja utilizar el FI con las debidas precauciones en situaciones de
Garfield
evaluación académica o para la promoción profesional
• Asimetría en la distribución de las citas que reciben los artículos
a
• La mayoría de los artículos publicados en una revista científica no alcanzan el
impacto medio de dicha revista
• Unos cuantos artículos tienden a superar ampliamente dicho factor de impacto
• El FI tiende a eliminar las diferencias entre el número de citas que reciben los
artículos
• Seglen:
– los artículos más citados suelen ser publicados en revistas con un FI elevado
– Pero no todos los artículos publicados en revistas con un alto FI son altamente citados
• Aunque los artículos más citados son únicamente una pequeña fracción de los que
se publican en una revistas, contribuyen abrumadoramente al FI
31. ¿Citas = Calidad?
• Debate: muchos artículos no son citados
• Gran parte del trabajo científico realizado no tiene
relevancia
• La presión por publicar convierte la literatura
científica en un “océano de artículos no leído e
ilegibles” [Broad y Wade 1982]
• Eugene Garfield: el hecho de que un artículo sea
poco citado no es necesariamente negativo
• Los científicos leen muchos más artículos que los
que citan
• No puede afirmarse que los artículos no citados
resulten inútiles
• Otros trabajos son utilizados en la enseñanza
Broad, W.; Wade, N. 1982. Betrayers of the Truth: Fraud and Deceit in the Halls of Science, Simon and Schuster: Nueva York
32. Diferencias en la citación
• La citas recibidas reflejan la utilidad de un artículo para la
comunidad científica
• [Una citación negativa mayoritaria no es frecuente]
• Existen otros factores:
• Tamaño del área del conocimiento:
– En un área limitada como Matemáticas es menos probable que un artículo
sea citado que en el caso de la Bioquímica
• Número medio de referencias varía por disciplinas: los artículos de
Bioquímica contienen más referencias por término medio que los
artículos de Matemáticas
• El período de latencia varía de una disciplina a otra: en ciertas áreas
de la Física hay un cierto lapso entre la aparición de un artículo y el
comienzo de las citas al mismo, debido a que se necesita cierto
tiempo para realizar los experimentos necesarios para comprobar
resultados
33. Diferencias en la citación
• Los documentos citados varían por disciplina: existen
diferencias en el uso de libros y de los artículos en
revistas como medio de comunicación científica
• Las referencias a libros es mayor en áreas de
Humanidades y en Ciencias Sociales que en Ciencias
Naturales
• La disponibilidad y difusión de las revistas científicas es
otro factor que influye en el número de citas que reciben
los artículos
• Sesgo del idioma: las revistas que se publican en inglés
están más representadas en los índices de citas y sus
artículos son, en general, más citados que los publicados
en otros idiomas
34. Descubrimiento prematuro / reconocimiento tardío
• Hay casos excepcionales en relación al patrón de citación en el
tiempo
• Casos de descubrimiento prematuro que conducen a un
reconocimiento tardío
• Descubrimientos rechazados o no debidamente apreciados en su
momento, sino posteriormente
• Stephen Cole llamó a este fenómeno Reconocimiento tardío
• Ej.: Teoría de Polanyi de la adsorción de gases por sólidos propuesta
en 1914 encontró un rechazo unánime
• Fue olvidada y redescubierta en la década de los 50’s [Stent 1972]
Stent, G.S. 1972. Prematurity and uniqueness in scientific discovery. Scientific American, 227, 84‐93
35. Detección del reconocimiento tardío
• Una herramienta poderosa utilizada para detectar
casos de reconocimiento tardío son los índices de
citas
• Un artículo típico que sufre reconocimiento tardío
recibe muy pocas citas o incluso permanece sin ser
citado durante los años inmediatamente siguientes
a su publicación
• Un posterior incremento rápido y notable de las
citas que recibe es señal de que ha sido
“descubierto” por la comunidad científica
Stent, G.S. 1972. Prematurity and uniqueness in scientific discovery. Scientific American, 227, 84‐93
72. El índice H
Medida de posición en la cual el volumen de citas es menor o igual al número
de orden que ocupa el artículo en una distribución descendente de citas
Artículo No. Citas
1 6
2 5
3 4
4 4
5 2
6 1
7 1
8 1
9 0
10 0
El índice h de Hirsch: aportaciones a un debate. Grupo Scimago
http://www.scimago.es/publications/epi1542006b.pdf
73. El índice H
Artículo No. Autor 1 Autor 2
1 21 133
2 17 15
3 15 9
4 15 4
5
6
15
13
4
3
“El índice h tiende a valorar un
7
8
11
10
3
3
esfuerzo científico prolongado a
9
10
9
8
2
1
lo largo de toda la vida
11
12
7
5
1
1 académica, frente a verdaderos
13 5 1
14 4 1 ‘pelotazos’ puntuales que pueden
15 4 1
16 4 1 tener un impacto muy alto pero
17 3 1
18 3 1 acotado”
19 3 1
20 2 1
21 2 1
22 2 1
23 2 0
24 1 0
25 1 0
26 1 0
27 1 0
28 1 0
29 1 0
30 1 0
31 1 0
32 1 0
33 0 0
34 0 0
35 0 0
36 0 0
37 0 0
38 0 0
39 0 0
40 0 0
Total 189 189
Media 4.73 4.73 El índice h de Hirish: aportaciones a un debate. Grupo Scimago
http://www.scimago.es/publications/epi1542006b.pdf
84. Scimago Journal Rank (SJR)
elaborado por el grupo a partir del algoritmo PageRank
• PageRank es una familia de algoritmo creada por Google (1999) utilizada para
asignar de forma numérica la relevancia de los documentos
• PageRank se basa en la vasta estructura de enlaces como indicador del valor de una
página en concreto.
• Google interpreta un enlace de una página A a una página B como un voto, de la
página A, para la página B.
• Además Google va más allá del volumen de votos, o enlaces que una página recibe:
también analiza la página que emite el voto. Los votos emitidos por las páginas
consideradas "importantes", es decir con un PageRank elevado, valen más, y ayudan
a hacer a otras páginas "importantes”
• Por lo tanto, el PageRank de una página refleja la importancia de la misma en
Internet
91. CHINA: nuevo integrante de la
élite de países más
productivos científicamente
Mapa de la Ciencia Mundial:
• Aumento de la participación de instituciones de
países en desarrollo
• Pero las instituciones con producción cientítfca de
“excelencia”, esto es, que representa un avance
verdadero y significativo para la ciencia, no ha
cambiado mucho:
‐ Hay una gran concentración en instituciones de
Norteamérica, Europa, India, China y Japón
‐ En menor medida, en el hemisferio sur: en Chile,
Argentina y más pronunciadamente en Brasil, Sudáfrica
y Australia
http://www.scimagolab.com/blog/wp-content/uploads/2011/05/wo1.png
92. http://www.scimagolab.com
Impacto Normalizado
• SIR World Report 2010 utiliza 4 indicadores para evaluar el desempeño de las instituciones de
investigación
• Están basados en la producción científica y las citas que recibe esta producción
Output [producción] International Normalized Impact IN
• Número de artículos Collaboration IC (%) • Mide impacto científico que tiene una
(papers) publicados • Indicador que institución en la comunidad científica
en revistas muestra la capacidad • Con objeto de tener una medición justa, el cálculo
académicas de las instituciones de este indicador elimina la influencia del tamaño
• Revela la capacidad para crear vínculos de institución y el perfil de investigación
de una institución internacionales de • IN muestra la proporción entre el impacto
investigación científico promedio de una institución y el impacto
para producir
High Quality Publications Q1 (%)
promedio mundial de las publicaciones del mismo
conocimiento mediante una tipo de documento y área temática
Proporción de las publicaciones de institución
científico proporción de las • Los valores son expresados en %
publicadas en las revistas académicas más
• Producción en co‐ producción generada • % que muestran la posición de la institución en
influyentes a nivel mundial
autoría es atribuida a en colaboración con relación al promedio mundial = 1
cada una de las instituciones • NI = 0.8, la institución es citada 20% < del
Las revistas consideradas por este indicadore
promedio mundial
institución de extranjeras
son aquellas incluidas en el primer cuartil
• NI = 1.3, la institución es citada 30% > promedio
acuerdo con la
(25%) en sus respectivas áreas temáticas,
mundial
afiliación institucional
según el indicador SCImago Journal Rank (SJR)
del autor
93. http://www.scimagolab.com/blog/2011/scientific-excellence-georeferenced-the-neighborhood-matters
Dependencia científica de países en desarrollo
AL: algunos países de bajo
• ¿Cuándo la colaboración con investigadores de desarrollo científico, reflejan
regiones altamente productivas representa una altas tasas de IC +
situación de dependencia científica?
fica relativamente alto NI
• Algunas instituciones de investigación muestran
tasas extremadamente altas de Colaboración
Internacional (IC), lo cual puede estar asociado
a situación de dependencia científica
• Dependencia científica: cuando la colaboración
internacional de una institución alcanza o excede
el 80% de su producción total, lo que quiere
decir que su producción exclusiva es marginal
• Además, cuando una institución muestra altas
tasas de IC junto con un impacto (IN)
sobresaliente dentro de su propio país o región,
el cual se debe con más probabilidad a la
colaboración = se puede concluir que existe una
dependencia científica externa
94. • El SIR World Report 2011 incluye 3,042 instituciones de investigación (vs 2,833 del
Reporte 2010) de 104 países (20 instituciones más que la edición anterior)
• Se consideran las instituciones que publican más de 100 documentos por año
(indizados en Scopus)
• Ha mejorado el proceso de identificación y desambigüación
• El Ranking aún es dominado por EUA, con 498 instituciones (13 más que en 2010)
EUA
• Sin embargo, los incrementos más grandes han sido de parte de países emergentes
• China, que tiene el segundo lugar en el ranking, acortó la distancia gracias a la
China
inclusión de 285 instituciones (38 más que en 2010)
285 instituciones
• Brasil se colocó en el lugar 10 con 92 instituciones en el ranking (19 más que en 2010)
Brasil 92 instituciones
95. GO Government HE Higher Education HL Health PR Private OT Others SI: Specialization
Index
Indica la extensión
WR World
de la
Ranking concentración /
dispersión
RR Regional temática de la
Ranking producción
científica de una
CR Country institución
Ranking Valores de 0 a 1
indica generalidad
AF Africa vs especialidad
respectivamente
AS Asia
EE Eastern ER: Excellence
Europe Rate
Indica el
LA Latin porcentaje de la
America producción
ME Middle científica de una
East NA institución
Northern incluido en el
America grupo formado
OC Oceania por el 10% de
artículos más
WE Western citados en sus
Europe respectivas áreas
temáticas
96.
97. Latin
American
Supplement
http://www.scimagoir.com/pdf/sir_2011_world_report_latin_america.pdf
100. CLASE y PERIÓDICA: Indicadores bibliométricos
RICYT - RED DE INDICADORES
DE CIENCIA Y TECNOLOGÍA -
IBEROAMERICANA E
INTERAMERICANA
http://www.ricyt.org
ECUM - Estudio Comparativo de
las Universidades Mexicanas
EXECUM – Explorador de ECUM
http://www.ecum.unam.mx
http://biblat.unam.mx
104. eigenFACTOR
http://www.eigenfactor.org
• Eigenfactor es una fuente de datos
métricos sobre las revistas científicas
internacionales basada en información de
citas de Journal Citation Reports y en la
aplicación de algoritmos de relevancia tipo
PageRank de Google
• Además ofrece análisis de calidad/precio
de las revistas y un módulo de
representación gráfica de las relaciones
entre las ciencias (mapping…)
• SJR, utilizado en SCImago Journal &
SJR
Country Rank, es otro indicador del tipo
PageRank, también sobre revistas, pero
basado en los datos de Scopus en lugar de
en los de Journal Citation Reports y Web of
Science.
111. • Un Frente de Investigación es un grupo de artículos
n
altamente citados, referidos como “artículos núcleo” /
“core papers” en un área definida por un análisis cluster
• Los clusters están formados por mediante la selección de
todos los artículos que pueden estar vinculados por la
co‐citación
• El ISI identifica unos 8,000 frentes de
investigación cada año
112.
113.
114. Revistas Revistas Revistas Revistas JCR
Pais
JCR 2007 JCR 2008 JCR 2009 2010
Argentina 9 10 13 16
Brasil 30 31 71 103
Chile 10 11 23 31
Colombia 2 2 9 19
Costa Rica 1 1 1 1
Cuba 1 1 1 0
España 43 53 91 121
México 17 18 33 41
Portugal 3 3 4 7
South Africa 25 29 45 53
Venezuela 3 3 9 10
Uruguay 1 1 1 1
Total 145 163 301 403
Thomson Reuters, 2010, Revistas indexadas en el JCR
Packer, Abel L. Presentación “SciELO en perspectiva”,
Reunión virtual de la red SciELO, 23 agosto 2011
115. http://www.scimagojr.com/journalrank.php
En Scopus hay más revistas
mexicanas que en Web of
Science de ISI
(ver portal SCImago, el cual
extrae su información de
Scopus)
70 revistas revistas
mexicanas en Scopus,
cuyos indicadores son
accesibles a través de
SCImago
116.
117. ● Iniciativa open access pionera en América Latina y
el Mundo
● Open Archive Iniciative (OAI)
Fonte: Folder of International Seminar on Open Acces for Developing Countries, by BIREME