Title
Search
All Issues
2
Ano: 2011  Vol. 15   Num. 2  - Abr/Jun
DOI: 10.1590/S1809-48722011000200002
Print:
Editorial
Versão em PDF PDF em Português Versão em PDF PDF em Ingls TextoTexto em Ingls
Editorial II
Editorial II
Author(s):
Mauricio Rocha e Silva
Palavras-chave:
Reflexes crticas sobre os trs erres, ou os peridicos brasileiros excludos

Mauricio Rocha e Silva

Rocha-e-Silva M. Hospital das Clnicas, Faculdade de Medicina, Universidade de So Paulo E-mail:mrsilva36@hcnet.usp.br Tel.: 55 11 3069-6235

Recentemente CLINICS props para debate a idia de que o QUALIS 2010 era passvel de aperfeioamento, atravs do conceito dos trs erres (Remover peridicos de reviso, Reconhecer outras mtricas de avaliao, Reavaliar peridicos brasileiros).1 Submetido ao debate por pares por ocasio do II Seminrio Satlite para Editores Plenos (ABEC Novembro de 2010), concluiu-se que idealmente haveria que focalizar num nico erre, a saber, o reconhecimento por parte da CAPES para 2013 das mtricas de avaliao SCImago (cites/document) e SciELO (Impact Factor).

J demonstramos anteriormente que o Impact Factor ISI THOMSON, nica mtrica reconhecida pela CAPES, praticamente idntico ao cites/document da SCImago. A correlao geral por amostragem entre os dois ndices maior que 0,9 e o coeficiente angular indistinguvel da unidade. A recente divulgao da coleo 2009 do SCImago Journal & Country Rank2 junta-se aos j divulgados Fatores de Impacto JCR-ISI e SciELO para aquele ano e permite o cotejo em tempo real dos trs ndices. Salientamos que este cotejo no se aplica a qualquer tabela QUALIS, pois a Tabela 2010 j histria e a Tabela 2013 ser decidida no futuro. Em outras palavras, o cotejo que se segue, relativo ao ano 2009, oferecido como base argumentativa adequada para reivindicar a correo de curso relativa excluso dos ndices SCImago e SciELO.

Vamos pois ao cenrio 2009 como simulao de uma hipottica tabela Qualis: na verso 2009 do Journal of Citations Report - ISI a representao brasileira saltou de 31 a 71 peridicos; j no SCImago Journal Ranking essa representao manteve-se constante em 235 peridicos. Existem, portanto 164 peridicos brasileiros (138 com impacto maior que zero) ausentes da tabela JCR-ISI. Mantida a norma Qualis aplicada em 2010, estes 138 peridicos cairiam nas categorias "sem fator de impacto". A Figura 1 mostra a identidade entre ISI e SCImago para as 64 revistas includas nos dois ndices: o coeficiente angular unitrio e o elevado coeficiente de correlao significam que, conhecendo-se um dos ndices, pode-se estimar o outro com 95% de probabilidade de errar por menos de 5%.



Figura 1 - Correlao entre fatores do impacto J. Citation Reports (ISI - Thomson) e SCImago (2009) para 64 peridicos brasileiros representados nos dois ndices com valores maiores que zero. A identidade entre mtricas praticamente absoluta. O coeficiente angular indica um ngulo de 45 (significando identidade) e a correlao (R2 = 0,932; p < 0.001) quase perfeita.






A tabela 1 exibe a relao desses 138 peridicos brasileiros com Cites/Document SCImago > zero, mas sem Fator de Impacto JCR-ISI. Ressalte-se que no so peridicos de impacto nitidamente mais baixo que os da coleo JCR-ISI. Os quatro primeiros apresentam impacto > 1.00, o que os colocaria entre os 15 melhores do Brasil. Outros dez apresentam impacto maior que 0.50, acima da mediana dos peridicos brasileiros no JCR-ISI. Todos os 138 ttulos evidentemente fariam jus classificao "com fator de impacto".





Outra correlao interessante ocorre entre SCImago e SciELO. Em primeiro lugar vale notar que existe extensa concordncia: a coleo SCImago contem 235 ttulos brasileiros e a coleo SciELO contem 223. As incluses no so 100% concordante: a coleo SCImago contem 69 peridicos ausentes da coleo SciELO; reciprocamente a coleo SciELO contem 56 peridicos ausentes da coleo SCImago. Por si s esta convergncia revela a consistncia de qualidade dos peridicos includos na coleo SciELO.



Figura 2 - Fatores de Impacto SCImago e SciELO (2009) para 142 peridicos brasileiros representados nos dois ndices com valor maior que zero. Observe-se que quando SCImago > SciELO a diferena frequentemente grande (como indicado pela seta vertical relativa s Memrias do Instituto Oswaldo Cruz), mas invariavelmente diminuta quando SciELO > SCImago.



fcil intuir que, para qualquer peridico brasileiro includo nas duas colees, h que se esperar que o impacto SCImago seja maior que o SciELO, porque a coleo SCImago contem 18.732 peridicos, contra apenas 759 na coleo SciELO. Surpreendentemente, porm, o efeito dessa enorme desproporo entre bases de dados menor do que o esperado, como se pode ver figura 2: dentre os 142 peridicos brasileiros presentes nas duas colees apenas 88 (62%) apresentam SCImago > SciELO, enquanto 45 (32%) apresentam SciELO > SCImago e nove (6%) apresentam igualdade. Esta discrepncia entre o esperado e o observado merece estudo bibliomtrico adicional, mas uma boa hiptese seria que artigos brasileiros citam outros artigos brasileiros com mais intensidade em virtude de um pronunciado interesse local especfico. A correlao entre os impactos (Figura 3) igualmente reveladora: o coeficiente angular (0,54) sugere que o impacto mdio SciELO apenas 40% menor que o impacto SCImago. J o alto ndice de correlao (r2 = 0.62; p <0.01) demonstra que as duas mtricas avaliam o mesmo parmetro em bases de dados muito dspares.



Figura 3 - Correlao entre fatores do impacto SciELO e SCImago (2009) para 142 peridicos brasileiros representados nos dois ndices com valor maior que zero. O coeficiente angular indica um ngulo de 28 e um impacto SciELO mdio 40% menor que o SCImago. A correlao significativa indica que os dois parmetros medem a mesma coisa sobre bases de dados dspares.



Caso a CAPES reconhea o Cites/Document SCImago estar resgatada a maior parte dos peridicos brasileiros com impacto > 0. Porem a Tabela 2 mostra que, se a deciso fosse tomada neste momento restariam 35 peridicos brasileiros com impacto SciELO maior que zero mas ausentes do JCR-ISI e do SCImago. Aqui tambm encontramos impactos no triviais: quatro peridicos apresentam impactos maiores que a mediana da coleo ISI. Sem esquecer a forte possibilidade de que estes 35 impactos SciELO infra-estimem o que seriam seus impactos ISI ou SCImago.






Desta simulao, podemos concluir que teramos 173 peridicos brasileiros com IMPACTO > ZERO tratados como "SEM FATOR DE IMPACTO" pelo QUALIS caso a avaliao fosse agora e caso os critrios 2010 fossem repetidos. Sabemos que esta "simulada excluso" no esttica: quando a tabela Qualis "fechar" para a prxima avaliao muita coisa ter mudado: dentre elas, com certeza, as tabelas ISI-JCR, SCImago e SciELO, bem como (esperamos!) os critrios CAPES de avaliao. Mas defendemos a tese de que reconhecer to somente o Fator de Impacto ISI-JCR no seria lgico. Por isso entendemos que esta simulao a base racional para um alerta, em tempo, pela adoo de novos critrios.

NOTA: este editorial publicado por CLINICS livre de restries de copyright. Oferecemo-lo aos peridicos cientficos brasileiros para reproduo integral ou parcial. Alternativamente sugerimos que apiem esta idia, em editoriais originais. Tais aes sinalizaro nossa vontade poltica de exercer o direito republicano de peticionar perante o poder pblico em defesa desta que uma reivindicao legtima e generalizada da comunidade editorial cientfica brasileira.


REFERNCIAS BIBLIOGRFICAS

1 Rocha e Silva M. Qualis 2011-2013: os trs erres. Clinics. 2010;65:935-6.

2 SCImago. SJR - SCImago Journal & Country Rank. 2007;Retrieved January 26, 2011, fromhttp://www.scimagojr.com..
  Print:

 

All right reserved. Prohibited the reproduction of papers
without previous authorization of FORL © 1997- 2024