O livro acadêmico é um dos tipos clássicos de literatura científica. Embora presente em todas as áreas do conhecimento, a sua relevância na comunicação da pesquisa é destacada com mais ênfase nas áreas de humanas, literatura, letras e artes. Nos demais campos predomina quase que exclusivamente a comunicação via artigos em periódicos ou em proceedings de conferências e congressos. Este fato é evidenciado pela composição temática das coleções de livros indexados e publicados pelo programa SciELO Livros, pelos índices bibliográficos internacionais e pela distribuição das citações dos artigos dos periódicos SciELO.
Além das editoras comerciais, a grande maioria das universidades e institutos de pesquisa e desenvolvimento e uma minoria de sociedades científicas e associações profissionais dos países da Rede SciELO operam editoras que além dos livros de texto e de divulgação científica publicam obras que comunicam resultados de pesquisas. Ao mesmo tempo, os sistemas nacionais de avaliação da produção científica contam com metodologias ou sistemas de avaliação de livros complementando os de periódicos. Em menor escala que os periódicos, a publicação de livros acadêmicos é também parte integral das infraestruturas de pesquisa.
A publicação online de livros acadêmicos e sua indexação além de ampliar radicalmente a sua visibilidade em relação à versão em papel o que contribui para aumentar o uso e impacto por citações. Uma das consequências positivas da publicação online e indexação é permitir a inserção e a interoperabilidade dos livros acadêmicos no fluxo de comunicação científica. Em particular, o Programa SciELO tem como uma das suas funções maximizar a interoperabilidade entre as pesquisas o que requer além dos periódicos a disponibilidade online dos livros seguindo padrões internacionais.
O escopo deste grupo de trabalho é analisar a relevância do livro acadêmico na comunicação da pesquisa, o estado atual e tendências da publicação online, indexação e avaliação de livros acadêmicos nos países da Rede SciELO e os desafios para a adoção de padrões que maximizem a sua visibilidade, uso e impacto.
Rogério Mugnaini - Livros e editoras: evolução do impacto nas diversas áreas do SciELO Brasil
1. Livros e editoras:
evolução do impacto
nas diversas áreas do SciELO Brasil
Rogério Mugnaini
Departamento de Informação e Cultura
Escola de Comunicações e Artes
Universidade de São Paulo
2. Introdução (parte 1)
Considerações importantes para proposição de indicadores
Pouca inserção da pesquisa brasileira na ciência dita mainstream por falta de
audiência potencial (MacRoberts & MacRoberts, 1996), indispensável para uma
análise de citação consistente
Consequentemente: avaliação limita-se aos indicadores de produtividade,
diante da necessidade de se estabelecer critérios de qualidade - restando
então classificar as revistas, ao invés de avaliar a produção;
Quando um pesquisador atua numa área de pesquisa de caráter local (o que
se pronuncia de maneira mais generalizada nas Ciências Sociais e Humanas),
o acúmulo de pontos requer um número significativamente maior de
publicações, sobrecarregando o sistema de comunicação científica.
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
3. Parte 1: metodologia qualitativa
• Política Científica brasileira
– Informação qualitativa, derivada das decisões dos comitês,
que definem os critérios específicos para avaliação de
produção científica de cada área.
– Análise documental dos documentos de área propostos
pelas comissões das Áreas de Avaliação do Qualis (triênio
2007–2009 e 2010–2012).
– Rica fonte de informação, fruto de consenso entre os
pesquisadores, que oferece os aspectos contextuais do
processo de comunicação científica de cada área.
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
4. Análise dos critérios de avaliação da produção
científica nacional
Critérios de classificação de periódicos do Qualis, segundo a importância
dada pelas Áreas de Avaliação, temos:
indicadores de citação
Fator de Impacto JCR / Índice H na Scopus/sciMAGO ou Google
Scholar / sciMAGO Journal Ranking / mix de indicadores
indexação em bases com critérios de seleção
explícito índices de citação como Web of Scienc, Scopus, SciELO / bases
temáticas - p. e. MEDLINE -, ou regionais - Redalyc, Latindex ou sem
critérios de seleção explícito (p. e. base PASCAL);
características das revistas, sendo elas intrínsecas (conteúdo,
qualidade, entre outras) ou extrínsecas (formato, gerenciais , entre outras).
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
5. Análise dos critérios de avaliação da produção científica
nacional
Muitos países têm criado formas alternativas para classificação
dos periódicos nacionais, buscando aferir o papel dos mesmos
– Alguns propuseram índices de citações nacionais:
• SciELO Projetos (Packer et al., 1998) – para Ibero-América –,
• Chinese Science Citation Database (Jim; Wang, 1999),
• Citation database for Japanese papers (Negishi; Sun; Shig, 2004),
• Indian Citation Index (Giri; Das, 2011),
• Islamic World Science Citation Center (Mehrad; Arastoopoor, 2012) e
• Korea Citation Index (Kim et al., 2013).
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
6. Análise dos critérios de avaliação da produção
científica nacional
– Outros viram este tipo de iniciativa como solução
apenas para as Ciências Humanas e Sociais:
• Polónia (Winkowska, 1996),
• Taiwan (Chen, 2004),
• Sérvia (Šipka, 2005),
• entre outros países do leste europeu (Pajic, 2014),
• Espanha (Piñeiro; Ricks, 2015) e
• projeto originalmente europeu - PLUS-ERIH (Índice Europeu de Referência para
as Humanidades e as Ciências Sociais) - que atualmente atinge todo o mundo.
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
7. Política Científica brasileira
Quais índices de citação são utilizados
pelas diferentes Áreas de Avaliação
das Grandes Áreas?
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
8. Grande Área Área de Avaliação A1 A2 B1
CIENCIAS BIOLOGICAS I
CIENCIAS BIOLOGICAS II
CIENCIAS BIOLOGICAS III
ENGENHARIAS I
ENGENHARIAS II
ENGENHARIAS III
ENGENHARIAS IV
ASTRONOMIA / FISICA
CIENCIA DA COMPUTACAO
MATEMATICA / PROBAB. E ESTATISTICA
QUIMICA
ENFERMAGEM
FARMACIA
MEDICINA I
MEDICINA II
MEDICINA III
ODONTOLOGIA
SAUDE COLETIVA
CIENCIAS DE ALIMENTOS
MEDICINA VETERINARIA
ZOOTECNIA
BIODIVERSIDADE
BIOTECNOLOGIA
MATERIAIS
BIOLOGICAS
(100%)
Indicador
ENGENHARIAS
(100%)
EXATAS E DA TERRA
(80%)
SAUDE
(78%)
AGRARIAS
(75%)
MULTIDISCIPLINAR
(50%)
Áreas com perfil de avaliação baseado estritamente em indicadores.
Qualis: áreas e critérios (triênio 2010-2012)
(Mugnaini, 2015)
9. Grande Área Área de Avaliação A1 A2 B1
EDUCACAO FISICA
NUTRICAO
ECONOMIA
ADM CIENCIAS CONTABEIS E TURISMO
AGRARIAS (25%) CIENCIAS AGRARIAS I Indic. / Caracts. Perióds.
MULTIDISCIPLINAR (17%) INTERDISCIPLINAR Indic. / Index. / Caracts. Perióds.
MULTIDISCIPLINAR (17%) CIENCIAS AMBIENTAIS
EXATAS E DA TERRA (20%) GEOCIENCIAS Indicador Indic. / Caracts. Perióds.
GEOGRAFIA Indic. / Caracts. Perióds. Indicador
ANTROPOLOGIA / ARQUEOLOGIA Index. / Caracts. Perióds.
CIENCIA POLIT. E RELS. INTERNACIONAIS Indic. / Index. / Caracts. Perióds.
MULTIDISCIPLINAR (17%) ENSINO DE CIENCIAS E MATEMATICA
SOCIAIS APLICADAS (14%) CIENCIAS SOCIAIS APLICADAS I Index. Index. / Caracts. Perióds.
EDUCACAO
FILOSOFIA / TEOLOGIA
HISTORIA
SOCIOLOGIA
LINGUIST. LETRAS E ARTES (50%) LETRAS / LINGUISTICA
PLANEJ. URBANO E REG. / DEMOGRAFIA
SERVICO SOCIAL
HUMANAS (12%) PSICOLOGIA Index.
SOCIAIS APLICADAS (14%) DIREITO Caracts. Perióds.
LINGUISTICA LETRAS E ARTES (50%) ARTES / MUSICA
SOCIAIS APLICADAS (14%) ARQUITETURA E URBANISMO
HUMANAS (50%)
Index. / Caracts. Perióds.
SOCIAIS APLICADAS (29%)
Index. / Caracts. Perióds.
Caracts. Perióds.
Indic. / Caracts. Perióds.
HUMANAS (38%)
Indic. / Index. / Caracts. Perióds. Index. / Caracts. Perióds.
Index.
Index. / Caracts. Perióds.
SAUDE (22%)
Indicador
Indic. / Index.
SOCIAIS APLICADAS (29%)
Indic. / Index.
Áreas com perfis de avaliação diversificados.
Qualis: áreas e critérios (triênio 2010-2012)
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018 (Mugnaini, 2015)
10. Política Científica brasileira
Quais Áreas de Avaliação
• Definem critérios para avaliação de livros
• Consideram a indexação na SciELO como critério de
qualidade
?
E qual o peso atribuído a
• Periódicos, em relação ao total de pontos de avaliação dos
Programas de Pós-Graduação
?
E qual o valor do Fator de Impacto exigido
para o estrato mais alto (A1)?
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
11. Qualis: áreas e critérios (triênio 2007-2009)
BIO 25% BIO2 14 4.7 BIO 25% BIO 3 20 4.9
MED 2 20 3.8
MED 1 20 3.8
ODONT 20 3.1
MED 3 20 3
ASTR, FÍS 17.5 6 QUÍM 21 4
COMP 26 1.4 GEOC 24 2.8
MAT, PROB, ESTAT 26 1
MED-VET 22 2.6
AGRIC 22 2
MULT 25% CI-MATER 17.5 1
ENG 4 17.5 1 ENG 25% ENG 2 20 1
ENG 3 17.5 -
18.5 3.3 21.0 2.7
EXA 40%
ENG 50%
Média
AGR 50%
SciELO SIM SciELO NÃO
Grande
Área
%
Área de
Avaliação
Peso
Periódic
FI JCRFI JCR
Média
Livro NÃO
SAÚ 50%
EXA 60%
Peso
Periódico
Área de
Avaliação
%
Grande
Área
Diversos critérios de avaliação utilizado pelas diversas Áreas de Avaliação,
dentro das Grandes Áreas.
(Miranda e Mugnaini, 2013)
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
12. BIOTEC 16 5 MULT 25% INTERD 21 -
ENS-CI&MAT 17.5 -
BIO 1 15.8 4.1
ECOL, AMB 20 3
C&T ALIM 22 2.6
ZOOT, PESC 22 2
FARM 16 3 SAÚ 13% SAÚ-PUB 16 4
EDUC-FÍS 16 1.9
ENF 16 0.8
ENG 25% ENG 1 17.5 0.8
ADM, CONT, TUR 22.8 0.5 URB&PLAN-REG, DEMOG17.5 -
ECON 22.8 - SERV-SOC, ECON-DOM 16 -
ARQ, URB, DESN 16 - CI-SOC-AP 16 -
DIR 16 -
FIL, TEOL 17.5 - GEOGR 14 0.5
EDUC 17.5 - PSIC 17.5 -
CI-POL, REL-INT 24 -
SOCIOL 20 -
ANTR, ARQ 16 -
HIST 14 -
LING, LET 20 -
ART, MUSC 12 -
18.1 2.4 17.3 2.3
Livro SIM
SciELO SIMSciELO NÃO
Grande
Área
%
Área de
Avaliação
Peso
Periódico
FI JCR
MULT 50%
LLA 100%
BIO 50%
AGR 50%
SAÚ 38%
SOC 57%
SOC 43%
HUM 25%
Média
Grande
Área
%
Área de
Avaliação
Peso
Periódic
FI JCR
HUM 75%
Média
(Miranda e Mugnaini, 2013)... continuação
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
13. Introdução (parte 2)
Consumo de informação na produção científica
brasileira (tipo de documento citado)
Quais são os tipos de documento mais citados
nos artigos de brasileiros publicados nos
periódicos da Rede SciELO das diferentes
Grandes Áreas?
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
14. Parte 2: Metodologia quantitativa
Consumo de informação na produção científica
A análise exploratória das referências bibliográficas
dos artigos ao longo do tempo revelam a tipologia
documental mais prevalente em cada área, assim
como sua obsolescência;
Período: 2010-2017.
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
16. Consumo de informação na produção
científica brasileira (tipo de documento citado)
Distribuição das referências bibliográficas dos artigos de brasileiros no SciELO Brasil,
segundo ano e tipo de documento citado – período de 2010-2017
0
50.000
100.000
150.000
200.000
250.000
300.000
350.000
400.000
450.000
500.000
2010 2011 2012 2013 2014 2015 2016 2017
book
journal
other
proceedings
thesis
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
17. Consumo de informação na produção
científica brasileira (tipo de documento citado)
Qual é o percentual de citações a livros e
periódicos, no período?
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
18. Consumo de informação na produção
científica brasileira (Livros e periódicos)
Percentual de citações a livros e periódicos nos artigos de brasileiros na Rede SciELO,
segundo ano (detalhe de citações até 5 anos de idade) – período de 2010-2017
0
50.000
100.000
150.000
200.000
250.000
300.000
2010 2011 2012 2013 2014 2015 2016 2017
book
wos journal
scielo-wos journal
scielo journal
other journal
0
10.000
20.000
30.000
40.000
50.000
60.000
70.000
80.000
90.000
20102011201220132014201520162017
book
wos journal
scielo-wos journal
scielo journal
other journal
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
19. Consumo de informação na produção
científica brasileira (diferentes Áreas)
Distribuição percentual anual das 5,1 milhões de referências bibliográficas do SciELO
Brasil – período de 2010-2017
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
2010 2011 2012 2013 2014 2015 2016 2017
Multidisciplinary
Linguistics, Letters and Arts
Human Sciences
Health Sciences
Exact and Earth Sciences
Engineering
Biological Sciences
Applied Social Sciences
Agricultural Sciences
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
20. Consumo de informação na produção
científica brasileira (diferentes Áreas)
Distribuição percentual das referências bibliográficas do SciELO Brasil, segundo Grande
Área e tipo de documento – período de 2010-2017
0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%
Exact and Earth Sciences
Health Sciences
Multidisciplinary
Engineering
Biological Sciences
Agricultural Sciences
Applied Social Sciences
Human Sciences
Linguistics, Letters and Arts
book journal other proceedings thesis
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
21. Consumo de informação na produção
científica brasileira (diferentes Áreas)
Distribuição percentual das referências bibliográficas do SciELO Brasil, segundo Grande
Área e tipo de documento (livro e periódico, detalhe de citações até 5 anos de idade)
– período de 2010-2017
0,00%
20,00%
40,00%
60,00%
80,00%
100,00%
book all book - 5y journal all journal - 5y
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
22. Consumo de informação na produção
científica brasileira (diferentes Áreas)
Distribuição percentual das referências bibliográficas do SciELO Brasil, segundo Grande
Área e tipo de documento (livro e tipos de periódico) – período de 2010-2017
0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%
Exact and Earth Sciences
Engineering
Health Sciences
Multidisciplinary
Biological Sciences
Agricultural Sciences
Applied Social Sciences
Human Sciences
Linguistics, Letters and Arts
wos journal scielo-wos journal scielo journal other journal
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
23. Consumo de informação na produção
científica brasileira (Editoras mais citadas)
Qual são as 30 editoras mais citadas nos
periódicos do SciELO Brasil e nas Grandes
Áreas, no período de 2010-2017?
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018
29. Consumo de informação na produção científica brasileira
(Editoras mais citadas: Ciências Agrárias)
30 editoras mais citadas 2017 2016 2015 2014 2013 2012 2011 2010 Total Geral
JOHN WILEY & SONS 170 200 238 218 186 257 277 344 1890
SPRINGER 171 147 135 139 132 183 201 182 1290
ACADEMIC PRESS 71 95 84 83 52 121 142 176 824
ELSEVIER 79 117 85 76 52 87 80 109 685
CAMBRIDGE UNIVERSITY PRESS 44 74 57 42 44 69 64 79 473
OXFORD UNIVERSITY PRESS 43 45 42 51 46 52 59 86 424
CRC PRESS 37 42 47 42 49 60 68 59 404
PRENTICE HALL 24 23 30 36 36 75 70 78 372
WILEY VCH 29 24 42 58 28 26 38 35 280
MCGRAW HILL 21 27 20 31 18 51 44 63 275
EMBRAPA 22 14 16 31 29 36 16 39 203
KLUWER ACADEMIC 12 9 17 13 12 34 48 25 170
CHAPMAN & HALL 8 14 10 21 23 28 31 27 162
PERGAMON PRESS 9 18 13 15 22 14 23 46 160
MARCEL DEKKER 8 8 12 24 14 28 23 34 151
GAUSSIAN INC 13 19 15 20 18 20 12 20 137
PLENUMPRESS 9 20 12 14 15 22 21 23 136
BLACKWELL 20 11 31 16 15 18 13 10 134
CPRM 19 32 12 24 3 3 13 15 121
BOOKMAN 11 14 15 11 9 27 15 14 116
WILEY INTERSCIENCE 9 7 9 4 10 26 21 29 115
EDUSP 15 10 4 18 10 13 17 11 98
Editora UNESP 10 16 12 18 5 11 11 11 94
UNIVERSIDADE DE SAO PAULO 12 17 13 16 2 14 7 11 92
EDGARD BLUCHER 5 10 7 11 7 15 15 22 92
TAYLOR & FRANCIS 8 6 11 16 14 16 10 8 89
LTC 4 7 10 6 7 11 19 25 89
FAO 32 4 10 9 9 4 9 8 85
MUSEU DE ZOOLOGIA DA UNIVERSIDADE DE SAO PAULO 21 8 15 5 1 8 17 5 80
WHO 7 10 7 9 8 15 7 16 79
Citações de até 5 anos
SPRINGER
JOHN WILEY & SONS
ELSEVIER
CRC PRESS
WILEY VCH
CAMBRIDGE UNIVERSITY PRESS
ACADEMIC PRESS
EMBRAPA
INTECH
R FOUNDATION FOR STATISTICAL COMPUTING
LTC
WHO
UNIVERSIDADE DE SAO PAULO
BOOKMAN
OFICINA DE TEXTOS
PRENTICE HALL
GAUSSIAN INC
OXFORD UNIVERSITY PRESS
EDITORA ATOMO
EDITORA UFV
UNITED STATES PHARMACOPEIAL CONVENTION
Editora UNESP
DIARIO OFICIAL DA UNIAO
CPRM
CENGAGE LEARNING
TAYLOR & FRANCIS
EDUSP
WILEY VCH VERLAG GMBH & CO KGAA
MCGRAW HILL
UNITED NATIONS
30. CHEN, K. The construction of the Taiwan humanities citation index. Online Information Review, v. 28, n. 6, p. 410-419,
2004.
GIRI, R.; DAS, A. K. Indian Citation Index: a new web platform for measuring performance of Indian research periodicals.
Library Hi Tech News, v. 28, n. 3, p. 33-35, 2011.
JIN, B.; WANG, B. Chinese Science Citation Database: its construction and application. Scientometrics, v. 45, n. 2, p. 325-
332, 1999.
KIM, S. et al. (2013). Korea Citation Index and Its Macro Bibliometrics. Asian Journal of Innovation and Policy, 2, 194-
211.
MACROBERTS, M. H.; MACROBERTS, B. R. Problems of citation alysis. Scientometrics, v. 36, n. 3, p. 435 - 444, 1996.
MEHRAD, J.; ARASTOOPOOR, S. Islamic World Science Citation Center (ISC): Evaluating Scholary Journals Based on
Citation Analysis. Acta Informatica Medica, v. 20, n. 1, p. 40, 2012.
MIRANDA, E. C. P.; MUGNAINI, R. Scientific policy in Brazil: exploratory analysis of assessment criteria. In: 14th
International Society of Scientometrics and Informetrics Conference, 2013, Vienna. Proceedings of the ISSI 2013.
Vienna: AIT Austrian Institute of Technology GmbH, 2013. v. II. p. 1578-1586.
MUGNAINI, R. Ciclo avaliativo de periódicos no Brasil: caminho virtuoso ou colcha de retalhos? In: ENANCIB - Encontro
Nacional de Pesquisa em Ciência da Informação, 16., 2015, João Pessoa. Anais... João Pessoa: UFPB, 2011. v. 16.
NEGISHI, M., SUN, Y., & SHIGI, K. (2004). Citation database for Japanese Papers: A new bibliometric tool for Japanese
academic society. Scientometrics, 60(3), 333-351.
PACKER, A. L. et al. (1998). SciELO: a methodology for electronic publishing. Ciência da informação, 27(2), 109-121.
PAJIC, D. (2014). Globalization of the social sciences in Eastern Europe: genuine breakthrough or a slippery slope of the
research evaluation practice?.Scientometrics, 1-20.
PIÑEIRO, C. L. & HICKS, D. (2015). Reception of Spanish sociology by domestic and foreign audiences differs and has
consequences for evaluation. Research Evaluation, 24(1), 78-89.
ŠIPKA, P. The Serbian citation index: Context and content. In: Proceedings of the 10th Conference of the International
Society for Scientometrics and Informetrics. 2005. p. 710-711.
WINCLAWSKA, B. M. (1996). Polish Sociology Citation Index (Principles for creation and the first results). Scientometrics,
35(3), 387-391.
Referências
Rogério Mugnaini | SciELO 20 anos 24 Set.
2018