El documento aborda la evaluación de la actividad científica mediante la búsqueda de información y el uso de bases de datos, destacando el proceso de selección y análisis de documentos primarios. Se discuten conceptos clave como cienciometría y bibliometría, así como la importancia de indicadores directos e indirectos de calidad, incluyendo el factor de impacto y el índice h. La evaluación se centra en el análisis de publicaciones y su repercusión dentro de la comunidad científica.

1. Acceso y evaluación a
la actividad científica
Master Universitario de
investigación en tecnologías
industriales y de
telecomunicación
Enrique Perdiguero
Profesor Titular de Hª de la Ciencia

2. Guión de las sesiones
• El proceso de búsqueda de información
• La evaluación de la actividad científica
• Fuentes de información: bases de datos e
Internet
• Bases de datos de interés
– ICYT (Índice Español de Ciencia y Tecnología)
– Web of Knowledge (productos del antiguo Instititute
for Scientific Information)
– Google Académico
– Scopus (Elsevier)
– SCImago
– IEEE Xplore

3. El proceso de búsqueda de información
Definir la cuestión
Seleccionar la fuente de información
Elegir la fuente
de información
Formular los perfiles de búsqueda
Llevar a cabo la búsqueda
Evaluar los resultados
Obtener los documentos primarios Evaluación de la
calidad de la
actividad
científica

4. ¿Qué nos interesa saber de una
base de datos?
• Cobertura: ¿Qué tipos de
documentos forman parte de su
universo documental?
• Si tiene un vocabulario
controlado
• ¿Cómo es el entorno de
usuario?

5. ¿Qué es un vocabulario
controlado?
• Es una potente herramienta documental que
evita que aparezcan en una base de datos los
problemas del lenguaje natural
• A cada concepto se le asigna un solo
término (de un glosario de términos permitidos,
evitando sinonimias, polisemias, etc.
• Ninguna de las bases de datos que vamos a
utilizar tiene vocabulario controlado. Resulta
muy caro. Hay que analizar documento
primario a documento primario y adjuntarle
varios de los términos permitidos, de tal
modo que el documentos quede bien descrito

6. Evaluación de la Actividad Científica
• Hay elementos de política científica que
precisan la evaluación de la actividad
científica (los vamos a dejar de lado?
• Puesto que hay muchísima información nos
interesa saber cual es la que tiene más
calidad
• Para ello debemos acercarnos a los métodos
que se han utilizado para estudiar y medir el
funcionamiento de la propia ciencia:
CIENCIOMETRÍA

7. Cienciometría
Su finalidad es identificar las
leyes y las regularidades
que rigen la actividad
científica considerada en su
globalidad, aplicando a la
ciencia los métodos de la
ciencia

8. Cienciometría
• Análisis cuantitativo de la actividad de
investigación científica y técnica.
• Debería estudiar tanto los recursos y los
resultados como las formas de
organización en la producción de los
conocimientos y técnicas
• Se ha ocupado sobre todo del análisis de
los documentos redactados por los
investigadores y los tecnólogos

9. Bibliometría
Es la aplicación de métodos
estadísticos y matemáticos al estudio
de la ciencia con el fin de definir los
procesos de la comunicación escrita y
la naturaleza y desarrollo de las
disciplinas científicas, mediante el
recuento y análisis de las distintas
facetas de dicha comunicación

10. Análisis bibliométrico
• Estudio de las dimensiones, el
crecimiento y de la distribución de
los documentos científicos
• Indagación de la estructura y de
la dinámica de los grupos que
producen y consumen estos
documentos y de la información
que contienen

11. Análisis del crecimiento y del
envejecimiento de la literatura científica
• La forma normal del crecimiento de
la información científica es la
exponencial
• La contemporaneidad es la
característica fundamental de la
ciencia (La ciencia actual supone el
96% del conjunto de la ciencia en
todas las épocas)
• Obsolescencia

12. Concepto de semiperiodo
• Permite medir el envejecimiento, la
obsolescencia de la información científica
• Semiperiodo: tiempo durante el que se
publicó le mitad de la literatura activa
circulante
• Tipo de literatura según el grado de
envejecimiento:
– con un fuerte componente de literatura clásica
(matemáticas, geología, botánica)
– literatura efímera (física o ingeniería)
– de carácter intermedio (fisiología y química)

13. Ley de Lotka
sobre la distribución de los autores
según el número de sus trabajos
publicados
Con independencia de la disciplina científica el número de
autores que publican n trabajos es inversamente proporcional
a n2
A(n)= A(1)/n2
• Donde:
• An es el número de autores con n trabajos
• A1 es el número de autores con 1 trabajo
• n2 Es el número de trabajos al cuadrado

14. Según la publicación de trabajos
sobre un tema dado
• Autores transeuntes: con uno o muy
pocos trabajos sobre un tema
• Productores medios : Autores con
algunos trabajos sobre un tema
• Grandes productores: Autores con
muchos trabajos sobre un tema, en el
que son verdaderamente
especialistas

15. Indicadores directos de la calidad
de la actividad científica
• El único es la revisión por pares
– Así se deciden que artículos se publican
en las revistas
– También mediante este método se decide
la concesión de proyectos de
investigación
– Es el criterio utilizado en algunas áreas de
la Comisión de Evaluación de la Actividad
Investigadora
– También lo es, en cierta medida, en las
acreditaciones que lleva a cabo la ANECA

16. Indicadores indirectos de la actividad
científica
• Se dispone de indicadores indirectos de la
calidad científica que no pueden suplir las
opiniones de los expertos que es el único
medio de contrastar realmente la calidad
• La productividad, por ejemplo,-que se calcula
dividiendo el número de trabajos por unidad de
tiempo-, no supone necesariamente un
indicador de calidad. No siempre el autor más
productivo tiene que ser el mejor

17. Son indicadores indirectos de la actividad
científica:
• número y distribución de las
publicaciones (temas, grupos,
países, instituciones)
• productividad de los autores
• colaboración en las
publicaciones (índice de firmas
por trabajo)

18. Son indicadores indirectos de la actividad
científica:
• Impacto de las fuentes
–Factor de impacto de las
revistas
– Índice de inmediatez de las revistas
– Influencia de la revistas
• Asociaciones temáticas

19. Factor de impacto
• Medida de la repercusión o impacto de
una revista científica en el resto de la
comunidad científica
• Para un año se calcula mediante el
cociente entre el numero de citas que han
recibido en ese año los artículos de una
revista dada publicados en los dos años
anteriores y el número de artículos
publicados por la revista en ese mismo
periodo de tiempo

20. Factor de impacto de una revista
para el año 2009
nº de citas recibidas por la revista en 2008 y 2009
FI2009 = ------------------------------------------------
nº de artículos publicados por las revista en 2008 y 2009

21. El factor de impacto es un número
sin sentido si no se tienen en
cuenta:
• Es un indicador relativo, que no debe
aplicarse para comparar revistas, grupos o
autores de disciplinas distintas
• Ignora el debate en torno a las funciones
de las citas en la comunicación científico-
técnica
• Desconoce las limitaciones de los
Citation Index: extremado sesgo, lagunas y
errores

22. Uso y abuso del factor de impacto
• http://www.ceers.org/ijest/issues/full/v1/n1/
101001.pdf
• Los mismos creadores del factor de
impacto recomendaron desde el principio
que no se utilizara para decidir las
contratación de científicos y tecnólogos
• Sin embargo, en los últimos años, y
especialmente en nuestro país se ha
caido en la IMPACTOLATRÍA

23. El “factor de impacto acumulado”

24. El “factor de impacto acumulado”
• No existe como el sumatorio de
todos los artículos publicados por
un autor o una institución
• Existe el factor de impacto
acumulado como la suma del factor
de impacto de una misma revista a lo
largo de un determinado número de
años partido por el número de años
considerados

25. El índice de Hirsch
• Un científico tiene índice h si el h de sus Np trabajos
recibe al menos h citas cada uno, y los otros (Np -
h) trabajos tienen como máximo h citas cada uno.
• En otras palabras, un científico tiene índice h si ha
publicado h trabajos con al menos h citas cada uno.
Así, el índice h es el balance entre el número de
publicaciones y las citas a éstas. El índice fue
diseñado para medir eficazmente la calidad del
investigador, a diferencia de sistemas de medición
más sencillos que cuentan citas o publicaciones,
diferenciando a aquéllos investigadores con gran
influencia en el mundo científico de aquéllos que
simplemente publican muchos trabajos. El índice
funciona eficazmente sólo entre científicos del
mismo campo, pues las convenciones de citación
difieren entre cada uno de éstos.

26. El índice de Hirsch
• En otras palabras, un científico tiene índice h
si ha publicado h trabajos con al menos h
citas cada uno. Así, el índice h es el balance
entre el número de publicaciones y las citas a
éstas. El índice fue diseñado para medir
eficazmente la calidad del investigador, a
diferencia de sistemas de medición más sencillos
que cuentan citas o publicaciones, diferenciando
a aquéllos investigadores con gran influencia en
el mundo científico de aquéllos que simplemente
publican muchos trabajos. El índice funciona
eficazmente sólo entre científicos del mismo
campo, pues las convenciones de citación
difieren entre cada uno de éstos.