sssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssssss

1. IN-RECS: Indice de impacto
de las Revistas Españolas
de Ciencias Sociales.
Dr. Evaristo Jiménez Contreras; Dr.Emilio Delgado López-Cózar; Dr.Rafael
Ruiz Pérez; Dra. Rosario Ruiz Baños; Dr. Rafael Bailón Moreno; Antonio
Gabriel López Herrera; María José Gacto Colorado; Daniel Torres Salinas;
Mercedes de la Moneda Corrochano; Juan Manuel Pérez Ortega;
Encarnación Poyatos Huertas; María José Rodríguez Gálvez
GI “Evaluación de la Ciencia y de la Comunicación Científica”
Dpto. Biblioteconomía y Documentación
Universidad de Granada
I Jornadas Españolas de Indicadores para la Evaluación
de la Ciencia y la Tecnología 15 abril 2005

2. Índice
• La evaluación cuantitativa de la Ciencia
– Las herramientas metodológicas: Bibliometría
– Las herramientas instrumentales: Bases de datos
como las de ISI
• La evaluación de la Ciencia en España
– Institucionalización
• ANEP, CNEAI, ANECA, Agencias autonómicas
• Índices de Impacto

3. Distribución revistas-citas en SCI

4. • 22 revistas (2%) reciben el 50% de las citas
• 72 revistas (7%) reciben el 75% de las citas
Distribución Bradford
0
5
10
15
20
25
30
35
1
37
73
109
145
181
217
253
289
325
361
397
433
469
505
541
577
613
649
685
721
757
793
829
865
901
937
973
1009
Revistas
citas
x
mil
Revistas
La Ley de Bradford en IN-RECS
(2003)

5. Institucionalización de la evaluación
del profesorado en España
• Evaluación Ex-Post
• Funcionarios: CNEAI y agencias
autonómicas.
• No funcionarios: ANECA
• EL modelo de evaluación se gesta en la
CNEAI y será exportado a posteriori, con
más o menos modificaciones, a las demás
agencias evaluadoras

6. • Profesor contratado Dr.
• 1 Experiencia investigadora
• 3 años de investigación postdoctoral: intensa, regular,
coherente
• Publicaciones científicas internacionales (léase
publicaciones ISI), aunque se incluyen otras de reconocida
relevancia para un área.
• Ha de tratarse de revistas con proceso de revisión anónimo
por pares
• También se consideran monografías publicadas por
editoriales relevantes
• Excepcionalmente congresos
• Se considera de forma diferenciada la situación de las
Ciencias Sociales Jurídicas y Humanidades.
• La publicaciones 1/2, no tienen que ser extranjeras
• 3/5 otras revistas, libros o capítulos
Los criterios de la ANECA

7. • Profesor ayudante Dr.
• 2 Publicaciones y tesis doctoral
• La publicaciones se valoran con idénticos criterios a los
de los PCD
• Similares especificaciones para los campos de Ciencias
Sociales, Jurídicas y Humanidades
• 4 Participación en proyectos de investigación
• Se considera como mérito complementario o para suplir
alguna insuficiencia no relevante en los aprtados
anteriores
• Profesor colaborador
• 4 Publicaciones
• Se considera mérito complementario, puede suplir
carencias no relevantes en los apartados anteriores
Los criterios de la ANECA II

8. Evaluación curricular del profesorado
universitario: Comisión Nacional de
Evaluación de la actividad
investigadora (CNEAI)
• Creación de la Comisión Nacional de Evaluación
de la Actividad Investigadora
– Orden de 28 de diciembre de 1989
– Reformas sustanciales en 1994 y 1996
• Tipo de evaluación que desarrolla:
– Tiempo: Ex post
– Nivel: individual
– Tipo de investigación: todos
– Metodología: mixta (cuantitativa-cualitativa), con claro
predominio de los indicadores cuantitativos
bibliométricos

9. Principios generales
• La contribución al progreso del conocimiento, la
innovación y creatividad
• Se primarán los trabajos formalmente científicos
o innovadores, frente a los meramente
descriptivos, a los que sean simple aplicación de
los conocimientos establecidos o a los de
carácter divulgativo
• No se valorarán los trabajos meramente
descriptivos o las reiteraciones de trabajos
previos, salvo en los casos en que contribuyan
claramente a la consolidación del conocimiento

10. Indicios de calidad
• Relevancia científica del medio de difusión
en el que se haya publicado cada aportación
• Citas recibidas de otros autores
• Apreciación del propio investigador sobre la
contribución de su obra
• Datos sobre la explotación de patentes
• Reseñas en revistas especializadas

11. Indicios calidad revistas científicas
• Las que ocupan posiciones relevantes en los listados del JCR del
SCI y SSCI
(Matemáticas y Física, Química, Biología Celular y Molecular,
Ciencias Biomédicas, Ciencias de la Naturaleza, Ingenierías y
Arquitecturas, Ciencias Sociales, Económicas)
• Aquellas que cuenten con
– Comité editorial formado por especialistas de reconocido
prestigio en su materia
– Un riguroso proceso de evaluación de manuscritos
(Ciencias Sociales, Económicas, Historia, Arte, Filosofía,
Filología y Lingüística)
• Revistas incluidas en bases de datos o repertorios bibliográficos
de prestigio (Philosopher’s Index)
(Filosofía, Filología y Lingüística)
• CNEAI elabora listados de revistas de calidad

12. Evolución general en la otorgación de
tramos por la CNEAI

13. Desagregación por campos

14. Las áreas problemáticas

15. Posible origen del problema:
Las limitaciones del ISI-SSCI
• Sesgo a favor de las ciencias básicas y experimentales:
• 61% ciencia y tecnología
• 21% ciencias sociales
• 18% humanidades
• Presencia de revistas españolas en el ISI
– 40 (0,5%) de la base de datos
– 1 de Ciencias Sociales, sobre 600:
• Psicothema
– Otros sesgos; lengua, factor local...
• Artículos autores españoles SSCI (2002): 1.434
• Artículos autores españoles ISOC (2002): 9.500

16. Objetivos de un índice de
impacto nacional
• Base de datos complementaria al ISI
• Cuantificar el impacto científico de la
investigación nacional
• Hacer más atractivas la revistas nacionales
• Producir información (indicadores) para la
política científica nacional, incluida la de las
agencias evaluadoras

17. Objetivos específicos
• Conocer las citas que reciben las revistas
científicas españolas de CCSS.
• Conocer las citas que reciben los trabajos,
autores, instituciones que publican en estas
revistas
• Generar indicadores bibliométricos que
cuantifiquen las características de la
investigación española en Ciencias Sociales:
– Índices de impacto
– Identificación de las principales revistas
– Otros indicadores bibliométricos: curvas de
envejecimiento

18. Etapas del proyecto I
• Identificación de la población de revistas
Fuentes: Latindex, Directorio español de revistas
de Ciencias Sociales y Humanidades, Ulrich´s,
CE REBIUN
Disciplina Nº de revistas
Economía 95
Geografía 44
Psicología 97
Sociología 58

19. Etapas del proyecto II
• Clasificación de las revistas, criterios:
– Clasificaciones temáticas asignadas por las
propias bases de datos: CDU, UNESCO,
Ulrich´s
– Clusters temáticos obtenidos por el método
de las palabras asociadas

20. Ejemplo de adscripciones: Economía
• Comercialización e Investigación de
Mercados
Esic-Market
Investigación y Marketing
Estudios sobre Consumo
Distribución y Consumo
Revista española de investigación de marketing
ESIC
Harvard Deusto Marketing & Ventas
Ip-Mark
Mk Marketing+Ventas
Economía Aplicada
Actualidad Económica
Aduanas. Revista de Comercio InterNacional y Estudios
Fiscales
Ager. Revista de Estudios sobre Despoblación y
Desarrollo Rural
Alcabala. Revista de Hacienda Pública de Andalucía
Análisis local
Anuario jurídico y económico escurialense
Boletín economía Navarra
Boletín económico de Andalucía
Boletín económico de Informacion Comercial Española
Boletín económico del Banco de España
Ciriec-España. Revista de economía publica, social y
cooperativa
CLM Economía. Revista económica de Castilla la
Mancha
Comercio e Industria
Coyuntura económica de Andalucía
Coyuntura económica valenciana
Cronica tributaria
Cuadernos de economía murciana
Cuadernos de turismo
Economía Financiera y Contabilidad
Actualidad Financiera
Análisis financiero
Análisis Financiero Internacional
Argus
ASNEF
Auditoría interna
Auditoría pública
Banca & finanzas
Banca catalana. Revista económica

21. Etapas del proyecto III
• Selección de revistas fuente, criterios:
– Pervivencia o antigüedad
– Calidad editorial:
• Calidad en el proceso editorial (empleo de un riguroso
sistema de selección y evaluación de originales)
• Reputación y prestigio del editor y comités editoriales
– Impacto científico de las revistas españolas de
Ciencias Sociales tanto a nivel internacional como
nacional
– Opinión de los investigadores españoles medida a
través de encuestas sobre la calidad percibida de las
revistas de su especialidad.

22. A B C D Valo
ran
A B C D Valo
ran
A B C D Valo
ran
A B C D Valo
ran
A B C D
Anales de Psicología 6,4 19,8 18,3 3,2 47,6 2,4 21,2 29,4 2,4 55,3 0 22,1 22,1 5,9 50 12,1 24,2 26,3 6,1 68,7 8,2 15,6 25,9 9,6
Análisis y
Modificación de
13,5 24,6 14,3 4 56,4 5,9 22,4 18,8 5,9 52,9 4,4 14,7 16,2 1,5 36,8 43,4 40,4 7,1 3 93,9 11,9 23,7 23 5,2
Ansiedad y Estrés 0 8,7 7,1 5,6 21,4 7,1 15,3 10,6 4,7 37,7 2,9 10,3 5,9 4,4 23,5 18,2 52,5 14,1 2 86,9 12,6 15,6 10,4 5,2
Anuario de Psicología 22,2 28,6 17,5 1,6 69,8 24,7 20 23,5 1,2 69,4 1,5 19,1 39,7 7,4 67,7 14,1 27,3 34,3 6,1 81,8 23 28,2 23,7 3,7
Boletín de Psicología 2,4 6,4 13,5 4,8 27 8,2 30,6 28,2 2,4 69,4 0 2,9 13,2 7,4 23,5 8,1 17,2 23,2 4 52,5 2,2 13,3 21,5 4,4
Cognitiva 23 23,8 16,7 2,4 65,9 1,2 12,9 11,8 4,7 30,6 0 0 0 1,5 1,5 0 0 0 1 1 37 25,2 14,1 0,7
Cuadernos de
Pedagogía
11,1 19,8 29,4 4,8 65,1 2,4 5,9 9,4 10,6 28,2 0 0 7,4 4,4 11,8 1 2 5,1 7,1 15,2 2,2 2,2 5,2 8,1
Estudios de
Psicología
21,4 27 15,1 0 63,5 11,8 25,9 25,9 0 63,5 1,5 11,8 16,2 2,9 32,4 14,1 11,1 23,2 3 51,5 27,4 25,2 20 3,7
Infancia y
Aprendizaje
73,8 11,9 4,8 1,6 92,1 17,7 14,1 12,9 3,5 48,2 1,5 14,7 16,2 4,4 36,8 11,1 13,1 29,3 6,1 59,6 16,3 27,4 17 4,4
Intervención
Psicosocial
3,2 3,2 7,9 4 18,3 30,6 29,4 12,9 2,4 75,3 0 1,5 5,9 1,5 8,8 2 12,1 8,1 6,1 28,3 0,7 3,7 0,7 4,4
Metodología de
Encuestas
0 0,8 1,6 4 6,4 0 8,2 7,1 4,7 20 14,7 36,8 10,3 2,9 64,7 0 0 4 7,1 11,1 0 1,5 2,2 3,7
Metodología de las
Ciencias del
0,8 4 6,4 3,2 14,3 0 9,4 12,9 4,7 27,1 55,9 23,5 7,4 5,9 92,7 3 8,1 6,1 7,1 24,2 2,2 5,2 5,9 3,7
Papeles del Psicólogo 1,6 15,1 38,1 4,8 59,5 3,5 28,2 31,8 12,9 76,5 0 7,4 17,7 8,8 33,8 5,1 18,2 42,4 11,1 76,8 5,2 8,2 33,3 8,2
Psicologemas 1,6 9,5 5,6 3,2 19,8 1,2 4,7 12,9 5,9 24,7 0 2,9 5,9 8,8 17,7 7,1 28,3 28,3 5,1 68,7 3 11,9 11,9 7,4
Psicología
Conductual
5,6 4,8 2,4 4 16,7 0 7,1 9,4 5,9 22,4 1,5 2,9 8,8 2,9 16,2 28,3 30,3 16,2 2 76,8 3 11,1 8,9 5,9
Psicológica 1,6 8,7 11,1 3,2 24,6 0 11,8 9,4 4,7 25,9 38,2 23,5 8,8 4,4 75 4 13,1 18,2 7,1 42,4 29,6 22,2 7,4 1,5
Psicothema 36,5 22,2 11,9 0,8 71,4 43,5 28,2 12,9 5,9 90,6 55,9 27,9 8,8 2,9 95,6 56,6 22,2 14,1 1 93,9 42,2 29,6 12,6 2,2
Psiquis 0,8 4,8 7,9 4 17,5 4,7 4,7 14,1 8,2 31,8 0 2,9 7,4 4,4 14,7 5,1 19,2 37,4 5,1 66,7 2,2 10,4 8,1 8,9
Revista de Historia de
la Psicología
0 4 12,7 2,4 19,1 1,2 21,2 11,8 4,7 38,8 0 4,4 5,9 4,4 14,7 3 9,1 16,2 7,1 35,4 20 28,2 13,3 6,7
Revista de Psicología
General y Aplicada
25,4 26,2 15,9 0,8 68,3 28,2 30,6 21,2 1,2 81,2 4,4 26,5 30,9 2,9 64,7 27,3 25,3 26,3 1 79,8 34,8 39,3 11,1 2,2
Revista de Psicología
del Trabajo y de las
1,6 0 2,4 3,2 7,1 37,7 24,7 11,8 1,2 75,3 1,5 5,9 5,9 4,4 17,7 5,1 3 7,1 6,1 21,2 4,4 4,4 3 3,7
Revista de Psicología
Social Aplicada
1,6 3,2 3,2 4 11,9 50,6 30,6 4,7 2,4 88,2 0 2,9 8,8 2,9 14,7 4 9,1 12,1 1 26,3 2,2 6,7 3 4,4
Revista de Psicología
Social
8,7 8,7 7,9 0,8 26,2 75,3 14,1 1,2 3,5 94,1 0 4,4 7,4 1,5 13,2 3 8,1 11,1 3 25,3 5,2 12,6 5,2 3
Revista Internacional
de Psicologia Clinica
1,6 2,4 3,2 1,6 8,7 1,2 7,1 9,4 4,7 22,4 1,5 4,4 4,4 1,5 11,8 24,2 27,3 19,2 4 74,8 3 5,2 5,2 5,9
The Spanish Journal
of Psychology
15,1 15,9 15,1 4 50 12,9 17,7 20 2,4 52,9 10,3 20,6 26,5 4,4 61,8 10,1 32,3 25,3 2 69,7 17,8 34,8 18,5 5,2
Personalidad, Evaluación y
Tratamiento Psicológico
Psicología Básica
Psicología Evolutiva y de la
Educación
Psicología Social Metodología de las ciencias del
comportamiento
Opinión de los profesores universitarios de Psicología

23. Cuartiles 1996 1997 1998 1999 2000 2001 2002 2003Revistas
1 3 3 2 4 2 1 2 1Revista de Economía Aplicada
1 7 5 7 8 8 8 7 2Spanish Economic Review
1 16 12 11 9 6 2 3 3Revista Europea de Dirección y
1 2 2 1 1 1 6 1 4Investigaciones Económicas
1 9 7 13 22 12 9 10 5Revista de Historia Económica
1 5 6 5 7 5 3 4 6Papeles de Economía Española
1 4 9 12 5 10 7 8 7Hacienda Pública Española
2 1 1 3 2 4 10 5 8Moneda y Crédito
2 6 4 14 3 3 4 11 9Rev Esp Financiación Cont
2 12 8 6 6 13 11 9 10Información Comercial Española
2 18 18 21 23 15 15 16 11Economistas. Rev Col E Madrid
2 13 22 8 17 7 20 18 12Perspectivas Sistema Financiero
2 17 11 16 14 9 14 17 13Economía Industrial
2 27 27 27 27 26 23 20 14Estadística Española
3 10 10 4 11 25 13 6 15R E Est Agrosociales Pesqueros
3 19 14 15 18 14 25 12 16Ekonomiaz
3 11 19 18 21 17 17 14 17Cuad Información Económica
3 25 24 23 25 23 22 19 18Boletín Económico de ICE
3 23 26 26 24 19 27 15 19Rev Inst Estudios Económicos
3 14 17 19 10 11 5 24 20Actualidad Financiera
3 22 15 17 19 22 26 13 21Cuad Aragoneses Economía
4 28 28 28 28 28 28 21 22Análisis Financiero
4 8 13 9 12 18 21 22 23Revista Asturiana de Economía
4 26 25 20 15 16 16 23 24Boletín de Estudios Económicos
4 21 21 24 20 20 18 25 25Esic-Market.
4 24 16 22 13 24 12 26 26Técnica Contable
4 20 23 25 16 21 24 27 27Partida Doble.
4 15 20 10 26 27 19 28 28Cuadernos Económicos de ICE
Estabilidad de las revistas

24. Periodicidad
• Listados anuales por categorías
Objetivos
2005: Actualización categorías
Educación
Biblioteconomía y Documentación
Página de autores

25. Página principal In-Recs

35. http://ec3.ugr.es/in-recs/indice-impacto.shtml
Made by
GI “Evaluación de la Ciencia y de
la Comunicación Científica”
ec3
Página en construcción
disculpen las molestias