Scientific evaluation of journals in Information Science: join of Impact Factor and h index indicators

Authors

  • Deise Deolindo Silva Docente da Faculdade de Tecnologia de Garça.
  • Cátia Cândida de Almeida Universidade Estadual Paulista
  • Maria Cláudia Cabrini Grácio Universidade Estadual Paulista/Marília-SP

DOI:

https://doi.org/10.19132/1808-5245240.132-151

Keywords:

Fator de Impacto. Índice h. Indicadores bibliométricos. Periódicos da Ciência da Informação. Avaliação científica.

Abstract

Bibliometric indicators are a relevant subsidy to the assessment process of scientific production, especially at the meso and macro level, and to decision making in scientific policies. Among them, we highlight Impact Factor and h-index. Created for the impact assessment of scientific journals, Impact Factor is defined as the citation average reached by a scientific journal in a given period. The h-index considers in its formulation aspects related to the scientific impact (citation) and productivity (number of articles produced) of a researcher. Given the contemporary importance of these indicators, this research aims to propose a evaluate procedure to scientific journals that combines Impact Factor and h-index, in order to contribute to the discussion of the need for a multidimensional evaluation in the assessment processes. The values of Impact Factor and h-index of the 168 scientific periodicals from Information Science field that are indexed in the Scopus database for years 2012, 2013, 2014 were retrieved. Among the results, it was observed that, although there is a tendency of similar positioning regarding these indicators, for a significant portion of journals the trends are discordant. It is concluded that the combined use of Impact Factor and h-index contributes to a more precise evaluation of scientific journals.

Downloads

Download data is not yet available.

Author Biographies

Deise Deolindo Silva, Docente da Faculdade de Tecnologia de Garça.

Graduada em Estatística e em Matemática.

Mestre em Estatística

Doutora em Ciência da Informação

Docente da Fatec/Garça

Cátia Cândida de Almeida, Universidade Estadual Paulista

Graduada em Estatística

Doutoranda em Ciência da Informação da Universidade Estadual Paulista/Marília-SP

Maria Cláudia Cabrini Grácio, Universidade Estadual Paulista/Marília-SP

Graduada em Estatística.

Docente da Universidade Estadual Paulista - Marília/SP

References

ARAUJO, Carlos Alberto. Bibliometria: evolução histórica e questões atuais. Em Questão, v. 12, n. 1, p. 11-32, jan/jun, 2006.

BADOR, Pascal; LAFOUGE, Thierry. Comparative analysis between impact factor and h-index for pharmacology and psychiatry journals. Scientometrics, v. 84, n. 1, p.65-79, 2010.

BURRELL, Quentin L. On the h-index, the size of the Hirsch core and Jin's A-index. Journal of Informetrics, v. 1, n. 2, p. 170-177, 2007.

CHADEGANI, Arezoo Aghaei; SALEHI, Hadi; YUNUS, Melor Md; FARHADI, Hadi; FOOLADI, Masood; FARHADI, Maryam; EBRAHIM, Nader Ale. Comparison between Two Main Academic Literature Collections: Web of Science and Scopus Databases. Asian Social Science, Canada, v. 9, n. 5, 2013. Disponível em: http://www.ccsenet.org/journal/index.php/ass/article/view/26960. Acesso em: 15 abr. 2017.

CLARIVATE ANALYTICS. The Clarivate Analytics Impact Factor. 2018. Disponível em: https://clarivate.com/essays/impact-factor/ . Acesso em: 05 jan. 2018.

COURTIAL, Jean-Paul. A co-word analysis of Scientometrics. Scientometrics, v.32, n. 3, p.251-260, 1994.

EGGHE, Leo.; LIANG, Liming; ROUSSEAU, Ronald. A Relational Between h-index and Impact Factor in the Power-Law Model. Journal of the American Society for Information Science and Technology, v. 60, n. 11, p. 2362-2365, 2009.

EGGHE, Leo. The Hirsch index and related impact measures. Annual review of information science and technology, v. 44, p. 65-114, 2010.

FERNANDÉZ-LLIMÓS, Fernando. Análisis de la cobertura del concepto de Pharmaceutical Care en fuentes primarias y secundarias de información. Granada: Universidad de Granada, 2003.

GARFIELD, Eugene. Citation indexes for science: A new dimension in documentation through association of ideas. Science, v.122, n. 3159, p. 108–11, 1955. Disponível em: http://garfield.library.upenn.edu/papers/science1955.pdf . Acesso em: 10 dez. 2017.

GARFIELD, Eugene; SHER, Irving H. New Factors in the Evaluation of Scientific Literature Through Citation Indexing. American Documentation, v. 4, n. 3, p. 195-201, 1963. Disponível em: http://garfield.library.upenn.edu/essays/v6p492y1983.pdf. Acesso em: 11 nov. 2017.

GARFIELD, Eugene. Journal impact factor: a brief review. Canadian Medical Association Journal, v. 161, n.8, p. 979-980, 1999. Disponível em: http://www.garfield.library.upenn.edu/papers/JournalimpactCMAJ1999.pdf . Acesso em: 20 nov. 2017.

GARFIELD, Eugene. The Agony and the Ecstasy - The History and Meaning of the Journal Impact. In: INTERNATIONAL CONGRESS ON PEER REVIEW AND BIOMEDICAL PUBLICATION, Chicago, 2005. Disponível em http://garfield.library.upenn.edu/papers/jifchicago2005.pdf. Acesso em 11 nov. 2017.

GLÄNZEL, Wolfgang; MOED, Floribert Henk. Journal impact measures in bibliometric research. Scientometrics, v. 53, n. 2, p. 171-193, 2002.

GLÄNZEL, Wolfgang. Bibliometrics as a research field: a course on theory and application of bibliometric indicators. [S.l.]: Coursehandouts, 2003.

GRÁCIO, Maria Cláudia Cabrini; OLIVEIRA, Ely Francina Tanuri. A inserção e o impacto internacional da pesquisa brasileira em “estudos métricos”: uma análise na base Scopus. Tendências da Pesquisa Brasileira em Ciência da Informação, v. 5, n. 1, 2012.

GREGOLIN, José Ângelo Rodrigues. FARIA, Leandro Innocentini Lopes de; HOFFMANN, Wanda; QUONIAM, Luc.; QUEYRAS, Joachim. Análise da produção científica a partir de indicadores bibliométricos. In: Francisco Romeu Landi; Regina Gusmão. (Org.). Indicadores de Ciência, Tecnologia e Inovação em São Paulo 2004. 1. ed.São Paulo: Fapesp, 2005. p. 1-44. (v. 1).

HE, Qin. Knowledge discovery through co-word analysis. Library Trends, v.48, n. 3, p.133-159, 2008.

HERNÁNDEZ-GONZÁLEZ, V.; SANS-ROSELL, N. ; JOVÉ-DELTELL, M. C.; REVERTER-MASIA, J. Comparación entre web of science y scopus, estudio bibliométrico de las revistas de anatomía y morfología. Int. J. Morphol., v. 34, n. 4, p. 1369-1377, 2016.

HIRSCH, Jorge. E. An index to quantify an individual’s scientific research output. Proceedings of the National Academy of Sciences of the United States of America, v. 102, n. 46, p. 16569-16572, Nov. 2005.

JANNUZZI, Paulo de Martino. Considerações sobre o uso, mau uso e abuso dos indicadores sociais na formulação e avaliação de políticas públicas municipais. Revista de Administração Pública, v. 36, n. 1, p. 51-72, 2002.

KALTENBORN, Karl-Franz. Validity and fairness of the impact factor. German: Birkhäuser, 2004.

MARQUES, Fabrício. Os limites do índice-h: supervalorização do indicador que combina qualidade e quantidade da produção científica gera controvérsia. Pesquisa Fapesp, n. 207, p. 35-39, 2013.

MIGUEL, Sandra. Revistas y producción científica de América Latina y El Caribe: su visibilidad en SciELO, RedALyC y SCOPUS. Revista Interamericana de Bibliotecología, v. 34, n. 2, p. 187-199, 2011.

NARIN, Francis. Patent bibliometrics. Scientometrics, v. 30, p. 147-155, 1994.

OLIVEIRA, Ely Francina Tanuri; GRÁCIO, Maria Cláudia Cabrini. Indicadores bibliométricos em ciência da informação: análise dos pesquisadores mais produtivos no tema estudo métricos na base Scopus. Perspectivas em Ciência da Informação, v. 16, n. 4, p. 16-28, out./dez. 2011.

ROUSSEAU, Ronald. New developments related to the Hirsch index. e-prints in library & information science, 2006.

SANTOS, Raimundo Nonato Macedo; KOBASHI, Nair Yumiko. Aspectos metodológicos da produção de indicadores em ciência e tecnologia. In: ENCONTRO NACIONAL DE CIÊNCIA DA INFORMAÇÃO, 4, 2005. Anais... Salvador: UFBA, 2005.

SCHUBERT András; GLÄNZEL, Wolfgang. A systematic analysis of Hirsch-type indices for journals. Journal of Informetrics, v. 1, p. 179-184, 2007.

SEGLEN, Per O. Citations and journal impact factors: Questionable indicators of research quality. Allergy, v. 52, n. 11, p. 1050-1056, 1997.

SILVA, Deise Deolindo; ALMEIDA, Cátia Cândida; GRACIO, Maria Cláudia Cabrini. Avaliação de periódicos em Ciência da Informação: junção dos indicadores Fator de Impacto e Índice h. In: ENCONTRO BRASILEIRO DE BIBLIOMETRIA E CIENTOMETRIA, 6., 2018, Rio de Janeiro. Anais... Rio de Janeiro, 2018. Disponível em: https://ebbc.inf.br/ebbc6/docs/6EBBC2018v2018_07_27.pdf. Acesso em: 19 de dezembro de 2018.

SIMONS Kai. The misused Impact Factor. Science, v. 322, n. 10, 2008.

VANCLAY, Jerome K. Ranking forestry journals using the h-index. Journal of Informetrics, v. 2, p. 326-334, 2008.

VANZ, Samile Andréa de Souza; CAREGNATO, Sônia Elisa. Estudos de Citação: uma ferramenta para entender a comunicação. Em Questão, v. 9, n. 2, p. 295-307, jul./dez. 2003.

VELHO, Lea Maria Leme Strini. Como medir a Ciência? Revista Brasileira de Tecnologia, v. 16, n.1, p.35-41, jan./fev. 1985.

VINKLER Peter. The evaluation of research by scientometric indicators. Chandos Publishing. Oxford Cambrigde, New Delhi, 2010.

WALTMAN, Ludo. The importance of taking a clear position in the impact factor debate. Centre for Science and Technology Studies. Leiden University, Netherlands, 2016. Disponível em: https://www.cwts.nl/blog?article=n-q2w2c4. Acesso em: 06 dez. 2016.

WALTMAN, Ludo; TRAAG, Vincent. Use of the journal impact factor for assessing individual articles need not be wrong. Centre for Science and Technology Studies. Leiden University, Netherlands, 2017. Disponível em: https://www.cwts.nl/blog?article=n-q2w2c4. Acesso em: 03 ago. 2018.

Published

2018-12-31

How to Cite

SILVA, D. D.; DE ALMEIDA, C. C.; GRÁCIO, M. C. C. Scientific evaluation of journals in Information Science: join of Impact Factor and h index indicators. Em Questão, Porto Alegre, v. 24, p. 132–151, 2018. DOI: 10.19132/1808-5245240.132-151. Disponível em: https://seer.ufrgs.br/index.php/EmQuestao/article/view/86489. Acesso em: 24 jun. 2025.

Issue

Section

Encontro Brasileiro de Bibliometria e Cientometria

Most read articles by the same author(s)