Panel: “Criterios de evaluación científica: ¿cómo se evalúan las publicaciones académicas?”. Organizado por CIECEHCS (Comisión Interinstitucional de Elaboración de Criterios de Evaluación para las Humanidades y Ciencias Sociales) e IDES (Instituto de Desarrollo Económico y Social). Buenos Aires, IDES, 16 de octubre 2014. http://ides.org.ar/archivos/8134

1. acceso abierto y evaluación de la investigación
@dominiquebabini
Panel: “Criterios de evaluación científica: ¿cómo se evalúan las publicaciones
académicas?”
CIECEHCS - Comisión Interinstitucional de Elaboración de Criterios de Evaluación para las
Humanidades y Ciencias Sociales (Argentina)
IDES - Instituto de Desarrollo Económico y Social, Argentina
IDES, Buenos Aires, 16 de octubre 2014

2. en esta presentación
• ¿qué es el acceso abierto?, modalidades,
beneficios, políticas
• ¿dónde publicamos y cómo nos evalúan según
dónde publicamos?
• evaluación e indicadores de acceso abierto

3. Qué es el acceso abierto?
Lo publicado en acceso
abierto (AA) es digital, en
línea, sin cargo
y está libre de la mayoría
de las restricciones en
términos de derechos de
autor y licencias
Peter Suber

4. Modalidades para publicar en abierto
• Publicar en revistas acceso abierto
– 10.020 revistas en acceso abierto www.doaj.org
• 70% no cobra por publicar
– 6.092 revistas acceso abierto Iberoamérica
http://www.latindex.unam.mx/
• Publicar en repositorios digitales
– Temáticos
– institucionales

7. Revistas de calidad de América Latina disponibles en
acceso abierto
Latindex: 2.662 DOAJ: 1.821
.
• inicio 1997
• hoy 1.007 revistas ALC
• 435.175 artículos ALC
• Indicadores bibliométricos
• Scielo Citation Index WoS
.
• inicio 2003
• hoy 768 revistas ALC
• 276.814 artículos LAC
• Indicadores de producción
científica (país, institución,
revista, área temática)
 Mejora en calidad, visibilidad, acceso abierto e impacto de revistas académicas y
científicas
 Desarrollo de indicadores de acceso abierto
 Investigación colaborativa sobre el alcance e impacto del acceso abierto en la
región

11. Autoarchivar en el repositorio
institucional postprint aceptado
para publicación en revistas
internacionales
http://www.sherpa.ac.uk/romeo/statistics.
php?la=en&fIDnum=|&mode=simple

12. Derechos de autor
• Derechos morales: del autor siempre
• Derechos patrimoniales:
– Tradicionalmente se ceden a la editorial
– En entorno digital se recomienda no ceder todos
los derechos patrimoniales, puede hacer una
cesión parcial o dar una licencia no exclusiva para
que el editor pueda publicar, pero el autor
conserva su derecho a difundirlo en el repositorio.
Ejs.:
• se puede adjuntar una adenda al contrato
• se pueden usar licencias Creative Commons si no se
han cedido los derechos previamente

13. beneficios del acceso abierto para
estudiosos e investigadores
buscando nuevos conocimientos:
• visibilidad y acceso a la producción científica
internacional y nacional sin pago
• acceso y contacto con pares
difundiendo su propia producción:
• autonomía para publicar vía web sin demora
• visibilidad más allá del público habitual
• aumenta posibilidades de impacto y más oportunidades
de ser citado
• facilita trabajo en redes de colaboración
• estadísticas de uso / métricas alternativas

14. beneficios del acceso abierto para
universidad
• conocer, difundir, preservar,evaluar su propia
producción (textos, datos de inv., software, REA,
multimedia)
• vincular producción de conocimientos con actividades
(investigación/educación/extensión)
• repositorio y publicaciones digitales AA de calidad
• interoperar con sistemas nacionales de repositorios
digitales y portales regionales de revistas
• difundir producción propia que está en otros
repositorios, por ej.: UNC tiene en Redalyc 438
artículos en texto completo
• llegar a nuevos públicos

15. beneficios para quienes financian investigación
impulsan políticas acceso abierto
• Global Research Council
• ICSU – International Council for Science
• gobierno EUA: NIH (2007), principales agencias
federales de inv. (2013), FASTR (2013 en debate)
• Comisión Europea en etapas, objetivo: 2020
• España (aprobada 2011 en Ley Ciencia)
• América Latina: leyes acceso abierto
o Perú (2013, aprobada)
o Argentina (2013, aprobada)
o México (2014, aprobada)
o Brasil (estado parlamentario)

16. Consejo Internacional para la Ciencia (ICSU)
promueve los siguientes objetivos para el acceso
abierto (2014)
Los registros científicos deberían estar:
• libres de barreras financieras para que cualquier investigador
pueda contribuir ;
• libres de barreras financieras para que cualquier usuario
pueda acceder;
• Disponible inmediatamente al publicarse;
• Sin restricciones para la reutilización, sujeto al reconocimiento
de autoría;
• Con calidad asegurada y publicado en tiempo y forma, y
• Archivado y puesto a disposición a perpetuidad
http://www.icsu.org/general-assembly/
news/ICSU%20Report%20on%20
Open%20Access.pdf

17. Argentina: Ley 26899 (2013): Creación de Repositorios Digitales
Institucionales de Acceso Abierto, Propios o Compartidos
• Artículo 1°- Los organismos e instituciones públicas que componen el
Sistema Nacional de Ciencia, Tecnología e Innovación (SNCTI), conforme lo
prevé la ley 25.467, y que reciben financiamiento del Estado nacional,
deberán desarrollar repositorios digitales institucionales de acceso
abierto, propios o compartidos, en los que se depositará la producción
científico-tecnológica resultante del trabajo, formación y/o proyectos,
financiados total o parcialmente con fondos públicos, de sus
investigadores, tecnólogos, docentes, becarios de posdoctorado y
estudiantes de maestría y doctorado. Esta producción científico-tecnológica
abarcará al conjunto de documentos (artículos de revistas,
trabajos técnico-científicos, tesis académicas, entre otros), que sean
resultado de la realización de actividades de investigación.
• Art. 2°- Los organismos e instituciones públicas comprendidos en el
artículo 1º, deberán establecer políticas para el acceso público a datos
primarios de investigación a través de repositorios digitales institucionales
de acceso abierto o portales de sistemas nacionales de grandes
instrumentos y bases de datos, así como también políticas institucionales
para su gestión y preservación a largo plazo.

18. Argentina: Ley 26899 (2013): Creación de Repositorios Digitales
Institucionales de Acceso Abierto, Propios o Compartidos
• Art. 5°- Los investigadores, tecnólogos, docentes, becarios de posdoctorado y
estudiantes de maestría y doctorado cuya actividad de investigación sea financiada
con fondos públicos, deberán depositar o autorizar expresamente el depósito de
una copia de la versión final de su producción científico-tecnológica publicada o
aceptada para publicación y/o que haya atravesado un proceso de aprobación por
una autoridad competente o con jurisdicción en la materia, en los repositorios
digitales de acceso abierto de sus instituciones, en un plazo no mayor a los seis (6)
meses desde la fecha de su publicación oficial o de su aprobación. Los datos
primarios de investigación deberán depositarse en repositorios o archivos
institucionales digitales propios o compartidos y estar disponibles públicamente en
un plazo no mayor a cinco (5) años del momento de su recolección, de acuerdo a
las políticas establecidas por las instituciones, según el artículo 2º.
• Art. 6°- En caso que las producciones científico-tecnológicas y los datos primarios
estuvieran protegidos por derechos de propiedad industrial y/o acuerdos previos
con terceros, los autores deberán proporcionar y autorizar el acceso público a los
metadatos de dichas obras intelectuales y/o datos primarios, comprometiéndose a
proporcionar acceso a los documentos y datos primarios completos a partir del
vencimiento del plazo de protección de los derechos de propiedad industrial o de
la extinción de los acuerdos previos antes referidos.

20. ¿dónde publicamos y cómo nos
evalúan según dónde publicamos?

21. ¿dónde publican?
414 investigadores full-time de ciencias sociales
del CONICET, Argentina (período 2004-2008)
• Sociología: 83% de los artículos se publicaron en revistas de la
región, 90% de los libros se publicaron en el país
• Ciencia política: 80% de los artículos se publicaron en revistas de la
región, 84% de los libros se publicaron en el país
• Economía: 68% de los artículos se publicaron en revistas de la
región, 82% de los libro se publicaron en el país
Fuente: Ernesto Gantman (2011). La productividad científi ca argentina en Ciencias
Sociales: Economía, Psicología, Sociología y Ciencia Política en el CONICET (2004-
2008) http://redc.revistas.csic.es/index.php/redc/article/viewFile/705/781

22. ¿dónde publican las ciencias sociales?
el caso de los libros, ejs.:
Libros publicados por las
editoriales universitarias,
institutos de investigación,
asociaciones y organizaciones
de ciencias sociales
Libros en repositorios
digitales de acceso abierto
- Institucionales
- temáticos
Editoriales académicas
comerciales

23. ¿cómo se define la calidad de libros?
• prestigio del sello editorial
• calidad del proceso de revisión por
pares externos, prestigio de sus
integrantes
• explicitación del proceso de revisión
por pares

24. ¿dónde publican las ciencias sociales?
el caso de las revistas, ejs.:
Revistas ciencias sociales en la región, la mayoría en acceso
abierto
– Latindex Catálogo: 2874 revistas iberoamericanas de
calidad en ciencias sociales
– SciELO: 228 revistas iberoamericanas de calidad en
cs.sociales
– Redalyc : 530 revistas iberoamericanas de calidad en
cs.sociales
– Núcleo Básico revistas calidad en cada país
Revistas internacionales de ciencias sociales
– Creciente número en acceso abierto www.doaj.org
– Por suscripción

25. ¿en el caso de las revistas, quien gestiona el
proceso de definir la calidad de las revistas?
• el ámbito académico, en el
caso de revistas locales y
regionales
• empresas comerciales, en el
caso de revistas
internacionales

26. define calidad de revistas nacionales
Otros países de la región,
ej.:
- Índice de
Revistas Mexicanas de
Investigación del CONACYT
(México),
- Sistema
Nacional de Indexación y
Homologación
de Revistas Especializadas
de CT+I
Publindex (Colombia),
- Indiice y Biblioteca
Electrónica de Revistas
Revencyt (Venezuela)
CONICET – CAICYT : http://www.caicyt-conicet.gov.ar/nucleo-basico-de-revistas-cientificas/

27. Fernanda Beigel, INCIHUSA-CONICET, Universidad Nacional de Cuyo
Publishing from the periphery: Structural heterogeneity and segmented circuits. The
evaluation of scientific publications for tenure in Argentina’s CONICETCurrent
Sociology September 2014 62: 743-765, first published on June 3, 2014
.
.

28. "el principal
indicador de
calidad de
contenido de
una
revista científica
está dado por la
revisión por
pares, los cuales
podrán
determinar su
originalidad y
aporte al avance
de la ciencia”
http://www.memoria.fahce.unlp.edu.ar/tesis/te.1031/te.1031.pdf

29. se publica en acceso
abierto, pero todavía se
evalúa principalmente
con los indicadores del
acceso cerrado

30. Argentina: define calidad revistas ciencias sociales: MINCYT-CONICET
Bases para la categorización de publicaciones periódicas para las
ciencias sociales y humanidades según sus sistemas de indización -
Niveles de jerarquización de índices y portales bibliográficos científicos
(25-06-2014)
http://www.ucc.edu.ar/portalucc/archivos/File/SIP/2014/Novedades/beses-categorizacion.pdf

31. calidad de revistas latinoamericanas
Definen calidad los portales que evalúan revistas
para su indización:
– Catálogo Latindex (UNAM, México)
– SciELO (FAPESP, Brasil)
– Redalyc (UAEM, México)
Y el Núcleo Básico de revistas de calidad de cada
país

32. Alperin,J.P.
Fischman, G.E.
Willinsky, John
Scholary
communication
strategy in Latin
America´s research-intensive
universities.
Revista Educación Superior y
Sociedad
Vol.16 n°2, 2011
http://ess.iesalc.unesco.org.ve/index.php
/ess/article/view/409/347

33. calidad de revistas internacionales
Definen calidad principalmente dos empresas
– Thomson-Reuters:
• En base al factor de impacto(cantidad de citas que recibió la revista a arts.
de los dos años previos, sobre el total de artículos publicados por la revista en ese período)
• Incluye sólo 5% de las revistas de calidad de América
Latina
– Elsevier:
• Scopus
Incluye sólo 15% de las revistas de calidad de América Latina

34. Presencia producción científica en
Web of Science (Thomson-Reuters)
1991 2011
Fuente: Juan Pablo Alperin http://jalperin.github.io/d3-cartogram/

35. http://www.nature.com/news/the-impact-gap-south-america-by-the-numbers-
1.15393
.
.
.
.
.
.
.
.
.
..
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
Sólo una porción de la producción científica de cada país está visible
en los indicadores internacionales utilizados para evaluarnos

36. Principales críticas
• indicadores en base a un conjunto de revistas del Norte y en inglés, con
mínima presencia de revistas de la región
• toma citaciones sólo en ese conjunto
CLACSO
• adhirió a la Declaración de San Francisco - DORA
http://am.ascb.org/dora/
– no usar el factor de impacto de la revista
– evaluar la calidad del artículo en forma individual
– considerar el valor e impacto de todo tipo de producciones, con indicadores
cuantitativos y cualitativos, incluyendo influencia sobre políticas y prácticas
• valorar las revistas en portales regionales y nacionales con requisitos de
calidad: SciELO, Redalyc, Listados revistas de calidad de cada país

37. complementar los indicadores tradicionales con
nuevos indicadores desde el acceso abierto en
América Latina, y evaluar otros impactos

38. indicadores del acceso abierto

39. indicadores del acceso abierto
http://redalycfractal.org/

40. 8.219 artículos de autores
Argentina, publicado en
revistas indizadas por
Redalyc: 50,9% ciencias
sociales, 53,6% escritos
en colaboración (18,4%
con académicos
extranjeros)

41. indicadores del acceso abierto
UNESCO/FLACSO/PKP
Portales de revistas:
SciELO
Redalyc
Portal temático:
CLACSO
http://biblioteca.clacso.edu.ar/clacso/se/2
0140917054406/OpenAccess.pdf

42. Fuente: http://www.nature.com/news/online-collaboration-scientists-and-the-social-network-
1.15711
Pendiente: explorar el uso de las redes sociales por parte de la comunidad científica y
académica de América Latina

43. Muchas gracias!!!
Dominique Babini – CLACSO, Acceso Abierto al Conocimiento
Universidad de Buenos Aires/IIGG-Proyecto Acceso Abierto
http://biblioteca.clacso.edu.ar/accesoabierto/
dasbabini@gmail.com
@dominiquebabini