Về việc sử dụng phân loại tạp chí trong khoa học xã hội và nhân văn: bằng chứng từ cơ sở dữ liệu của Ý

Scientometrics - Tập 125 - Trang 1689-1708 - 2020
Tindaro Cicero1, Marco Malgarini1
1National Agency for the Evaluations of Universities and Research Institutes (ANVUR), Rome, Italy

Tóm tắt

Trong khoa học xã hội và nhân văn, hiện tại ở Ý đang sử dụng phân loại tạp chí hai cấp trong bối cảnh chương trình Habilitation Quốc gia; việc đánh giá đồng nghiệp cũng được áp dụng cho một số lượng lớn các bài báo được công bố trong cùng các tạp chí này, trong khuôn khổ cuộc đánh giá quốc gia gần đây (VQR 2011–2014). Chúng tôi tận dụng hai tập dữ liệu phong phú kết hợp này để kiểm tra xem các tạp chí được phân loại là hàng đầu bởi các chuyên gia khoa học có thể hiện tác động cao hơn hay không và nếu các bài báo được xuất bản trong những tạp chí đó nhận được điểm số cao hơn trong các bài đánh giá của đồng nghiệp so với các tạp chí khác. Kết quả chính của chúng tôi cho thấy phân loại ANVUR cung cấp một đại diện tin cậy cho chất lượng của các tạp chí, được đo lường bằng các chỉ số tạp chí và đánh giá của các chuyên gia độc lập đánh giá các bài báo riêng lẻ được xuất bản trong các tạp chí đó. Mặc dù đánh giá đồng nghiệp vẫn được coi là phương pháp chính cho việc đánh giá trong nhân văn và khoa học xã hội, phân tích của chúng tôi ủng hộ quan điểm rằng phân loại tạp chí có thể là một công cụ hữu ích để hỗ trợ đánh giá đồng nghiệp ngay cả trong lĩnh vực khoa học xã hội và nhân văn.

Từ khóa


Tài liệu tham khảo

Ancaiani, A., et al. (2015). Evaluating scientific research in Italy: The 2004–10 research evaluation exercise. Research Evaluation, 24(3), 242–255. Anfossi, A., Ciolfi, A., Costa, F., Parisi, G., & Benedetto, S. (2016). Large-scale assessment of research outputs through a weighted combination of bibliometric indicators. Scientometrics, 107(2), 671–683. ANVUR. (2017a). Regolamento per la classificazione delle riviste nelle aree non bibliometriche. http://www.anvur.it/wp-content/uploads/2017/10/RegolamClassificazRiviste.pdf. ANVUR. (2017b). Evaluation of research quality 2011–14, ANVUR final report. http://www.anvur.it/wp-content/uploads/2017/06/VQR2011-2014_Final%20Report.pdf. Bonaccorsi, A., Ferrara, A., & Malgarini, M. (2018). Journal ratings as predictors of article quality in arts, humanities and social sciences: An analysis based on the Italian research evaluation exercise. In A. Bonaccorsi (Ed.), The evaluation of research in social sciences and humanities. Berlin: Springer. Cicero, T., & Malgarini, M. (2019). Robustness of journal classifications in SSH: An empirical analysis from Italy. In 17th International conference on scientometrics and informetrics (ISSI 2019). 2–5 September 2019, Rome, Italy. Ferrara, A., & Bonaccorsi, A. (2016). How robust is journal ratings in humanities and social sciences? Evidence from a large-scale, multi-method exercise. Research Evaluation, 25(3), 279–291. Franssen, T., & Wouters, P. (2019). Science and its significant other: Representing the humanities in bibliometric scholarship. Journal of the Association for Information Science and Technology, 70, 1124–1137. https://doi.org/10.1002/asi.24206. Hix, S. (2004). A global ranking of political science departments. Political Studies, 2, 293–313. Hogler, R., & Gross, M. A. (2009). Journal rankings and academic research: Two discourses about the quality of faculty work. Management Communication Quarterly, 23(1), 107–126. Kalaitzidakis, P., Mamuneas, T. P., & Stengos, T. (1999). European economics: An analysis based on publications in the core journals. European Economic Review, 43, 1150–1168. Lavik, G. A. V., & Sivertsen, G. (2017). ERIH PLUS making the SSH visible, searchable and available. Procedia Computer Science, 106, 61–65. Lee, C. J., Sugimoto, C. R., Zhang, G., & Cronin, B. (2013). Bias in Peer Review. Advances in Information Science, 64(1), 2–17. Moed, H. F. (2008). Research assessment in social sciences and humanities. In ECOOM Colloquium Antwerp. December 12–13. Pontille, D., & Torny, D. (2010). The controversial policies of journal ratings: Evaluating social sciences and humanities. Research Evaluation, 19(5), 347–360. Sivertsen G. (2014). Scholarly publication patterns in the social sciences and humanities and their coverage in Scopus and Web of Science. In Proceedings of the science and technology indicators conference (pp. 598–604). Walker, J., Fenton, E., Salandra, R., & Salter, A. (2018). What influences business academics’ use of the Association of Business Schools’ (ABS) list? Evidence from a survey of UK academics. British Journal of Management. https://doi.org/10.1111/1467-8551.12294. Williams, R. (2012). Using the margins command to estimate and interpret adjusted predictions and marginal effects. The Stata Journal, 12(2), 308–331.