Vol. 8 No. 1 (2017)
Contributi

Research evaluation in Humanities: an empirical study on the main journal lists about History and philosophy of science

Stefano Piazza
Alma Mater Studiorum - Università di Bologna, Area Ricerca e Trasferimento Tecnologico Settore Monitoraggio e Supporto alla Valutazione della Ricerca
Sara Mori
Istituto Marangoni, Italy
Stefano Bolelli Gallevi
Alma Mater Studiorum - Università di Bologna, Area Ricerca e Trasferimento Tecnologico Settore Monitoraggio e Supporto alla Valutazione della Ricerca

Published 2017-01-15

Keywords

  • ANVUR; CIRC; ERIH; Humanities; Journal ranking; Norwegian journal list; Research evaluation

How to Cite

Piazza, Stefano, Sara Mori, and Stefano Bolelli Gallevi. 2017. “Research Evaluation in Humanities: An Empirical Study on the Main Journal Lists about History and Philosophy of Science”. JLIS.It 8 (1):93-113. https://doi.org/10.4403/jlis.it-388.

Abstract

The article focuses on journal lists oriented to research evaluation in Humanities, specifically concerning History and philosophy of science. It begins with an overview of main issues concerning the use of journal lists, especially in connection to the Italian research evaluation initiatives, and afterwords it presents a study about a comparison between ERIH, Norwegian list, CIRC e ANVUR journal lists In conclusion the article gives some opinions about the use of journal lists in research evaluation of considered field of study, also related to international debate caused by Leiden manifesto, and about international databases and tools used in Italian research evaluation system.

Metrics

Metrics Loading ...

References

  1. AERES, Agence d’Evaluation de la Recherche et de l’Enseignement Superieur, 2009: Listes de revues SHS (Sciences Humaines et Sociales), Histoire et Philosophie des Sciences. http://www.aeres-evaluation.fr/Publications/Methodologie-de-l-evaluation/Listes-de-revues-SHS-de-l-AERES. Ultima consultazione: 30/11/2016.
  2. ANVUR, Agenzia Nazionale di Valutazione del Sistema Universitario e della Ricerca. “Abilitazione Scientifica Nazionale: Area11 ‐ Riviste di classe A.” http://www.anvur.org. Ultima consultazione: 20/02/2016.
  3. ANVUR, Agenzia Nazionale di Valutazione del Sistema Universitario e della Ricerca. “Chiarimenti sulla lista di riviste di classe A.” http://www.anvur.org. Ultima consultazione: 20/02/2016.
  4. ANVUR, Agenzia Nazionale di Valutazione del Sistema Universitario e della Ricerca. “Potenzialità e limiti della analisi bibliometrica nelle aree umanistiche e sociali. Verso un programma di lavoro.” http://www.anvur.org/attachments/article/44/valutazione_aree_umanistiche_e_sociali.pdf. Ultima consultazione: 30/11/2016.
  5. Baccini, Alberto. “Come e perché ridisegnare la valutazione.” il Mulino 1 (2013). doi: 10.1402/44138.
  6. Baccini, Alberto, and De Nicolao, Giuseppe. “Do they agree? Bibliometric evaluation versus informed peer review in the Italian research assessment exercise.” Scientometrics 108, 3 (2016): 1651–71.
  7. Cassella, Maria. “Bibliometria sì, bibliometria no: la valutazione della ricerca nelle scienze umane e sociali al bivio”. AIB studi 54, 2/3 (2014): 295-304
  8. “CIRC, Clasificación Integrada de Revistas Cientficas.” http://ec3metrics.com/circ. Ultima consultazione: 30/11/2016.
  9. De Bellis, Nicola. Introduzione alla bibliometria: dalla teoria alla pratica. Roma: AIB, 2014.
  10. De Nicolao Giuseppe “Nei criteri VQR c’è un “fatal error” (noto da più di 20 anni).” Roars Dicember 12 2015. http://www.roars.it/online/nei-criteri-vqr-ce-un-fatal-error-noto-da-piu-di-20-anni/. Ultima consultazione: 30/11/2016.
  11. ERA Excellence in Research for Australia. “Humanities and Creative Arts (HCA).” http://www.arc.gov.au/era-2015. Ultima consultazione: 30/11/2016.
  12. ERIH, European Reference Index for the Humanities. “Initial List, Discipline History and Philosophy of Science.” http://www.esf.org/index.php?id=4813. Ultima consultazione: 30/11/2016.
  13. Faggiolani, Chiara. “Contro le ‘unanticipated con-sequences’ della valutazione quantitativa della ricerca: il Leiden Manifesto for research metrics.” AIB studi 55, 3 (2015): 427-38. Accessed September 28, 2015. doi: 10.2426/aibstudi-11366.
  14. Ferrara, Antonio, and Bonaccorsi, Andrea. “How robust is journal rating in Humanities and Social Sciences? Evidence from a large-scale, multi-method exercise.” Research Evaluation (2016): 1–13. doi: 10.1093/reseval/rvv048
  15. Galimberti, Paola 2012. “Qualità e quantità: stato dell’arte della valutazione della ricerca nelle scienze umane in Italia.” JLIS.it 3, 1 (2012): 1-25. doi: 10.4403/jlis.it-5617.
  16. Galimberti, Paola. “Valutazione e scienze umane: limiti delle attuali metodologie e prospettive future.” Astrid rassegna 2013. E-LIS http://eprints.rclis.org/20773 . Anche disponibile in: Roars 12 dicembre 2015. http://www.roars.it/online/nei-criteri-vqr-ce-un-fatal-error-noto-da-piu-di-20-anni/. Ultima consultazione: 30/11/2016.
  17. Hicks, Diana. “Coverage and overlap of the new social science and humanities journal lists.” JASIST - Journal of the American Society for Information Science and Technology 62, 2 (2011): 284-294.
  18. Hicks, Diana. “The four literature of social siences.” In Handbook of quantitative science and technology research, edited by Henk F. Moed, Wolfgang Glaenzel, Ulrich Schmoch. The Nederlands: Kluver, 2004.
  19. Luglio, Fabrizio. Focus group e roadmap IRIS 2015-2016. Slides presentate alla giornata "IRIS per la disseminazione e la valutazione della Ricerca", Bologna, 26 Maggio 2015. http://streaming.cineca.it/IRIS260515/slides/luglio.pdf.
  20. Mazzotti, Massimo. “Listing wildly.” Times of higher education, November 8, 2012. http://www.timeshighereducation.co.uk/story.asp?storycode=421723. Ultima consultazione: 30 novembre 2016.
  21. Moed, Henk F. “Citation analysis in research evaluation.” Dordrecht: Springer, 2005.
  22. Norwegian association of higher education institutions, (UHR). “Scientific journals, series and publishers”. https://dbh.nsd.uib.no/publiseringskanaler/Forside.action?request_locale=enhttps://dbh.nsd.uib.no/publiseringskanaler/Forside.action?request_locale=en. Ultima consultazione: 30 novembre 2016.
  23. Piazza Stefano, “La valutazione della ricerca scientifica: uno studio empirico nelle Scienze umane” (tesi di dottorato, Alma Mater Università di Bologna, 2013). Accessed November 20, 2016. doi: 10.6092/unibo/amsdottorato/6149.
  24. Pontille David, and Torny, Didier. “The controversial policies of journal ratings: evaluating social sciences and humanities.” Research Evaluation 19 (2010): 347-60.
  25. Pritchard, Alan. “Statistical Bibliography or Bibliometrics?” Journal of Documentation 25, 4 (1969): 348-9.
  26. The Royal society. “Journals under Threat: A Joint Response from History of Science, Technology, and Medicine editors.” http://rsnr.royalsocietypublishing.org. Ultima consultazione: 30 novembre 2016.
  27. Seglen, P.O.. “Why the impact factor of journals should not be used for evaluating research.” BMJ 314 (1997): 498–502.
  28. Turbanti, Simona. “Navigare nel mare di Scopus, Web of science e Google Scholar: l'avvio di una ricerca sulla vitalità delle discipline archivistiche e biblioteconomiche italiane.” AIB Studi, 54, 2/3 (2014): 213-25. doi: 10.2426/aibstudi-10266.
  29. Turbanti, Simona. “Un Manifesto contro l'’ossessione della misura’.” Biblioteche oggi 33, luglio-agosto (2015): 19-22. doi: 10.3302/0392-8586-201506-019-1
  30. Turbanti, Simona. “Il magnifico mondo di Google scholar: luci e ombre di uno strumento multidisciplinare.” In Bibliotecari al tempo di Google: profili, competenze, formazione: Convegno, Milano, 17-18 marzo 2016, 264-69. Milano: Editrice Bibliografica, 2016.
  31. Wikipedia. “Research Excellence Framework.” http://en.wikipedia.org/wiki/Research_Excellence_Framework. Ultima consultazione: 30 novembre 2016.
  32. Wikipedia. “Coefficiente di correlazione per ranghi di Spearman.” https://it.wikipedia.org/wiki/Coefficiente_di_correlazione_per_ranghi_di_Spearman. Ultima consultazione: 30/11/2016.
  33. Wikipedia. “Coefficiente di correlazione per ranghi di Spearman.” https://it.wikipedia.org/wiki/Coefficiente_di_correlazione_per_ranghi_di_Spearman. Ultima consultazione: 30/11/2016.