Evaluación científica basada en índices de citas: Historia del desarrollo del factor de impacto, sus debilidades y propuestas para otras soluciones
DOI:
https://doi.org/10.33448/rsd-v13i9.46878Palabras clave:
Revista científica; Índice de citas; Factor de impacto; Evaluación de la revista.Resumen
El propósito de este artículo es abordar el contexto de la evaluación de revistas científicas a partir de índices de citas. Se trata de un estudio descriptivo, que busca detallar las particularidades del Factor de Impacto (FI), así como ampliar la comprensión de la evaluación de revistas sustentadas en índices de citación. Como objetivos, el estudio busca: i) describir el desarrollo de la IF; ii) recopilar otras medidas bibliométricas en función del número de citas; iii) enumerar puntos de atención que deben observarse en los procesos de evaluación científica con base en índices de citación; y iv) identificar formas alternativas de utilizar los índices formulados por las grandes editoriales científicas comerciales. A pesar del creciente desarrollo de otros índices de citas, no es aconsejable limitar la evaluación de revistas a estas medidas únicamente, dada la diversidad de factores que influyen en sus resultados. Como alternativas a los índices publicados por bases de datos comerciales, algunos países han propuesto bases de datos e índices que evalúan más adecuadamente su producción científica. Destaca también el desarrollo de bases sin ánimo de lucro como OpenALex. En conclusión, se entiende que es necesario un cambio cultural en la comunidad científica respecto de la evidencia utilizada en la evaluación de los productos de investigación. Quienes realizan evaluaciones científicas sustentadas exclusivamente en métricas deben tener en cuenta que la precisión que otorgan los resultados numéricos es sólo aparente. Por tanto, el uso de un conjunto de métodos de análisis, prestando especial atención al juicio de los pares, es lo más recomendable.
Citas
ABCD/USP. (2022). Indicadores e métricas. https://www.abcd.usp.br/apoio-pesquisador/indicadores-pesquisa/lista-indicadores-bibliometricos/
Almeida, C. C. (2019). Fator de Impacto e avaliação da produção científica: compreensão na perspectiva das áreas de Ciência da Informação e Matemática, Probabilidade e Estatística. (Tese de Doutorado). Universidade Estadual Paulista Júlio de Mesquita Filho, Marília, SP. https://repositorio.unesp.br/handle/11449/182447.
Almeida, C. C. & Gracio, M. C. C. (2020). O Fator de Impacto e as boas práticas de avaliação científica. Ciência da Informação em Revista. 7 (1), 138–52. 10.28998/cirev.2020v7n1i. https://www.seer.ufal.br/index.php/cir/article/view/8865.
Antunes, A. A. (2015). Como avaliar produção científica. Revista do Colégio Brasileiro de Cirurgiões, 42, 17-19.
Bellis, N. (2009). Bibliometrics and Citation Analysis: from the Science Citation Index to Cybermetrics. The Scarecrow Press.
Bensman, S. J. (2007). Garfield and the impact factor. Annual Review of Information Science and Technology, 41(1), 93-155. http://garfield.library.upenn.edu/bensman/bensmanegif2007.pdf.
Canto, F. L., Pinto, A. L., Carvalho Segundo, W. L. R. & Neubert, P. S. (2024) Cobertura de citações da OpenAlex, da Scopus e da Web of Science: análise comparativa a partir da produção científica da Universidade Federal de Santa Catarina. In: 9º Encontro Brasileiro de Bibliometria e Cientometria EBBC, Brasília, Brasil. DOI: https://doi.org/10.22477/ix.ebbc.321. https://ebbc.inf.br/ojs/index.php/ebbc/article/view/321.
COARA (2022). The agreement full text. https://coara.eu/agreement/the-agreement-full-text/.
DORA (2012). San Francisco Declaration on Research Assessment. https://sfdora.org/.
Garfield, E. (1955). Citation Indexes for Science: A New Dimension in Documentation through Association of Ideas. Science, 122(3159), 108-111. https://doi.org/10.1126/science.122.3159.108.
Garfield, E. & Sher, I. H. (1963). New Factors in the Evaluation of Scientific Literature Through Citation Indexing. American Documentation, 4(3), 195-201.
http://www.garfield.library.upenn.edu/essays/v6p492y1983.pdf.
Garfield, E. (1972). Citation analysis as a tool in journal evaluation. Science, 17, 471-479. http://www.garfield.library.upenn.edu/essays/v1p527y1962-73.pdf.
Garfield, E. (1983). How to use Journal Citation Reports including a special salute to the Johns Hopkins Medical Journal. Essays of an Information Scientist, 6, 131-138. http://www.garfield.library.upenn.edu/essays/v6p131y1983.pdf.
Garfield, E. (1999). Journal impact factor: a brief review. Canadian Medical Association Journal, 161(8), 979-980.
Garfield, E. (2005). The Agony and the Ecstasy - The History and Meaning of the Journal Impact. In: International Congress on Peer Review And Biomedical Publication, Chicago. garfield.library.upenn.edu/papers/jifchicago2005.pdf.
Gil, A. C. (2017). Como elaborar projetos de pesquisa (6ed.). Atlas.
Hicks, D., Wouters, P., Waltman, L.; De Rijcke, S. & Rafols, I. (2015). The Leiden Manifesto for research metrics. Nature, 520(7548), 429-431. DOI: 10.1038/520429a.
Incites. Clarivate. (2021). Indicators handbook. Clarivate. https://incites.help.clarivate.com/Content/Indicators-Handbook/ih-about.htm.
Macêdo, D. J, Schiessl, I. T. & Shintaku, M. (2024). Desvendando o OpenAlex: avanços e oportunidades em métricas bibliométricas. In: 9º Encontro Brasileiro de Bibliometria e Cientometria EBBC, Brasília, Brasil.
Marchlewski, C., Silva, P. M. da. & Soriano, J. B. (2011). A influência do sistema de avaliação Qualis na produção de conhecimento científico: algumas reflexões sobre a Educação Física. Motriz: Revista De Educação Física, 17(1), 104–116. https://doi.org/10.5016/1980-6574.2011v17n1p94.
Maricato, J. M., Mazoni, A., Mugnaini, R., Packer, A. L. & Costas, R. (2023). SciELO as an open scientometric research infrastructure: general discussion of coverage in OpenAlex, WoS, Scopus and Dimensions. In: 27th International Conference on Science, Technology and Innovation Indicators, Leiden, Holanda.
Miglioli, S. (2018). Influências e limites do fator de impacto como métrica de avaliação na ciência. PontodeAcesso, 11(3), 17–33. https://periodicos.ufba.br/index.php/revistaici/article/view/17263
Openalex. (2024). About. https://openalex.org/about
Passos, P. C. S. J, Passos, J. E., Caregnato, S. E. & Silva, T. L. K. (2018). Quality criteria in scientific journals: A study on the adequacy to the digital environment. Informação e Sociedade, 28, 209-226.
Pereira, A. S., Shitsuka, D. M., Parreira, F. J. & Shitsuka, R. (2018). Metodologia da pesquisa científica. UFSM.
Priem, J., Piwowar, H. & Orr, R. (2022). OpenAlex: A fully-open index of scholarly works, authors, venues, institutions, and concepts. ArXiv. https://arxiv.org/abs/2205.01833.
Sampieri, R. H., Collado, C. F. & Lucio, P. B. (2006). Metodologia de pesquisa. (3 ed). McGraw-Hill Interamericana do Brasil Ltda.
Descargas
Publicado
Cómo citar
Número
Sección
Licencia
Derechos de autor 2024 Lívia Rejane Miguel Amaral Schumann; Luciana Calabró
Esta obra está bajo una licencia internacional Creative Commons Atribución 4.0.
Los autores que publican en esta revista concuerdan con los siguientes términos:
1) Los autores mantienen los derechos de autor y conceden a la revista el derecho de primera publicación, con el trabajo simultáneamente licenciado bajo la Licencia Creative Commons Attribution que permite el compartir el trabajo con reconocimiento de la autoría y publicación inicial en esta revista.
2) Los autores tienen autorización para asumir contratos adicionales por separado, para distribución no exclusiva de la versión del trabajo publicada en esta revista (por ejemplo, publicar en repositorio institucional o como capítulo de libro), con reconocimiento de autoría y publicación inicial en esta revista.
3) Los autores tienen permiso y son estimulados a publicar y distribuir su trabajo en línea (por ejemplo, en repositorios institucionales o en su página personal) a cualquier punto antes o durante el proceso editorial, ya que esto puede generar cambios productivos, así como aumentar el impacto y la cita del trabajo publicado.
