Impact and prestige indicators of SciELO network health sciences journals: comparative study
e202009110
Keywords:
Bibliometric Indicators, Scientific journals, Health Sciences, SciELO, Impact FactorAbstract
Background: The use of bibliometric indicators to measure the quality of scientific journals is a general practice in all areas of science. The WoS and Scopus databases continue to be the reference sources to obtain bibliographic indicators. Others such as SciELO network offer indicators about Ibero-American science, which are scarcely collected in WoS and Scopus. The aim of this work was to analyze the association of the indicators proposed by SciELO for health sciences journals, with the most widely used impact and indicators and to study the complementarity of the existing prestige indicators.
Methods: Analytical correlational study between SciELO indicators, with impact and prestige indicators from Journal Citation Report, Scopus and Web of Science. The results refer to 2018, the most recent and complete data available. Association between the qualitative variables was analyzed using the chi-square test, and the analysis of variance (ANOVA) was performed for the quantitative variables using the Tukey method as a post hoc test. To obtain the relationship between quantitative variables, Pearson’s correlation coefficient was used and Spearman’s coefficient for ordinal variables. The level of significance used in all the hypothesis tests was α≤0.05.
Results: The SciELO Impact Factor showed a weak correlation both, with Journal Citation Report (R=0.36; p=0.003), and Scopus Cite Score (R=0.39; p=0.001). The association between the H index of the Web of Science andthe H index of Scopus with the H index of SciELO was weak in both cases (R=0.45; p<0.001 and R=0.340; p=0.003).
Conclusions: Indicators proposed by SciELO, for health journals, did not show an association with those of WoS or Scopus. The weak correlation between Impact Factor and Cite Score with SciELO Impact Factor, converts the latter into a necessary “metrics” to assess journals excluded from the “mainstream” and fundamentally those from the Latin American region. The need of using the prestige indicators to fill in the impact indicators, has not been proven in this study.
Downloads
References
Somoza M, Guallar J, Rodríguez-Gairín JM, Abadal E. Presencia de revistas españolas en bases de datos internacionales. En: Abadal E. Revistas científicas: situación actual y retos de futuro. Barcelona: Universitat de Barcelona; 2017. p. 161-78.
Yuen J. Comparison of Impact Factor, Eigenfactor Metrics, and SCImago Journal Rank Indicator and h-index for Neurosurgical and Spinal Surgical Journals. World Neurosurg. 2018;119:e328-37.
Tomás-Górriz V, Tomás-Casterá V. La bibliometría en la evaluación de la actividad científica. HospDomic. 2018;2(4):145-63.
Garfield E. The history and meaning of the journal impact factor. JAMA. 2006;295(1):90-3.
Castiel LD, Sanz-Valero J. Política científica: manejar la precariedad de los excesos y desnaturalizar la ideología «publicacionista» todopoderosa. Salud Colectiva. 2009;5(1):5-11.
Hirsch JE. An index to quantify an individual’s scientific research output. ProcNatlAcadSci USA. 2005;102(46):16569-72.
González-Pereira B, Guerrero-Bote VP, Moya-Anegón F. A new approach to the metric of journals’ scientific prestige: The SJR indicator. J Informetrics. 2010;4(3):379-91.
Santa S, Herrero-Solana V. Cobertura de la ciencia de América Latina y el Caribe en Scopus vs Web of Science. Investig Bibl. 2010;24(52):13-27.
Aleixandre-Benavent R, Valderrama Zurián J, González Alcaide G. El factor de impacto de las revistas científicas: limitaciones e indicadores alternativos. Prof Inform. 2007;16(1):4-11.
Packer A. SciELO Citation Index en el Web of Science. SciELO en Perspectiva, 2014. Disponible en: https://blog.scielo.org/es/2014/02/28/scielo-citation-index-en-el-web-of-science/.
El Editor de Información Tecnológica. SciELO Citation Index: mejorando la visibilidad de las revistas SciELO. InfTecnol. 2015;26(4):1-2.
Cañedo Andalia R, Dorta Contreras AJ. SC Imago Journal & Country Rank, una plataforma para la evaluación del comportamiento de la ciencia según fuentes documentales y países. ACIMED. 2010;21(3):310-20.
Valderrama M JO. Aspectos éticos en las publicaciones de revistas científicas de corriente principal. RevChilPediatr. 2012;83(5):417-9.
Fernandez-Llimos F. Differences and similarities between Journal Impact Factor and Cite Score. PharmPract. 2018;16(1):e1282.
Yan E, Chen Z, Li K. The relationship between journal citation impact and citation sentiment: A study of 32 million citances in PubMed Central. QuantSciStud. 2020;1-15.
Meneghini R, Packer AL, Nassi-Calò L. Articlesby Latin American Authors in prestigious journals have fewer citations. Bowyer SM, editor. PLoS ONE. 2008;3(11):e3804.
Beigel MF. Centros y periferias en la circulación internacional del conocimiento. Nueva Sociedad. 2013;(5):110-23.
Romero-Torres M, Acosta-Moreno LA, Tejada-Gómez MA. Ranking de revistas científicas en Latinoamérica mediante el índice h: estudio de caso Colombia. RevEspDocCient. 2013;36(1):e003.
Aroeira RI, A.R.B. Castanho M. Can citation metrics predict the true impact of scientific papers? FEBS J. 2020;287: 2440-2448.
Quindós G. Confundiendo al confuso: reflexiones sobre el factor de impacto, el índice hirsch, el valor Q y otros cofactores que influyen en la felicidad del investigador. Rev Iberoam Micol.2009;26(2):97-102.
Waltman L. A review of the literature on citation impact indicators. J Informetr. 2016;10(2):365-91.
Villaseñor-Almaraz M, Islas-Serrano J, Murata C, Roldán-Valadez E. Impact factor correlations with Scimago Journal Rank, Source Normalized Impact per Paper, Eigenfactor Score, and the Cite Score in Radiology, Nuclear Medicine & Medical Imaging journals. Radiol Med. 2019;124(6):495-504.
Granda Orive JI, Alonso Arroyo A, Pascual Lledó JF, López Padilla DE, García Río F, Aleixandre Benavent R. Relación y correspondencia entre diversos indicadores de repercusión en una muestra de artículos de excelencia. An Do. 2016;19(1).
Cantín M, Muñoz M, Roa I. Comparison between Impact Factor, Eigen factor Score, and SCImago Journal Rank Indicator in Anatomy and Morphology Journals. Int J Morphol. 2015;33(3):1183-8.
Kianifar H, Sadeghi R, Zarifmahmoudi L. Comparison between Impact Factor, Eigen factor Metrics, and SCimago Journal Rank Indicator of Pediatric Neurology Journals. Acta InformMed. 2014;22(2):103-6.
Downloads
Published
How to Cite
License
Copyright (c) 2020 Cristina Bojo Canales, Javier Sanz-Valero
This work is licensed under a Creative Commons Attribution-NonCommercial-NoDerivatives 4.0 International License.
Usted es libre de:
Compartir — copiar y redistribuir el material en cualquier medio o formato.
La licenciante no puede revocar estas libertades en tanto usted siga los términos de la licencia.
Bajo los siguientes términos:
Atribución — Usted debe dar crédito de manera adecuada , brindar un enlace a la licencia, e indicar si se han realizado cambios. Puede hacerlo en cualquier forma razonable, pero no de forma tal que sugiera que usted o su uso tienen el apoyo de la licenciante.
NoComercial — Usted no puede hacer uso del material con propósitos comerciales.
SinDerivadas — Si remezcla, transforma o crea a partir del material, no podrá distribuir el material modificado.
No hay restricciones adicionales — No puede aplicar términos legales ni medidas tecnológicas que restrinjan legalmente a otras a hacer cualquier uso permitido por la licencia.
Avisos:
No tiene que cumplir con la licencia para elementos del material en el dominio público o cuando su uso esté permitido por una excepción o limitación aplicable.
No se dan garantías. La licencia podría no darle todos los permisos que necesita para el uso que tenga previsto. Por ejemplo, otros derechos como publicidad, privacidad, o derechos morales pueden limitar la forma en que utilice el material.
