The Assessment of individuals by Qualis-CAPES: survey on its adoption in the selection of graduate students

Data

Título da Revista

ISSN da Revista

Título de Volume

Editor

Universidade Estadual de Londrina

Resumo

Descrição

Objective: Qualis Periódicos ranks scholarly journals in which Brazilian graduate program faculty have published in a past period, aiming at the evaluation of graduate programs. Some programs have been adopting it to select graduate students regarding their current publications. In order to account for the incidence of this phenomenon, specifically for graduate programs in Information Science, the objective of this research was to measure the adoption of Qualis to evaluate individuals in the selection to enter the master's or doctorate in Information Science in Brazil. Methodology: We carried out an online survey, checking in calls for graduate studies whether each program on the ANCIB list evaluates candidates according to their publications in “Qualis journals” from the period 2013-2016, also considering whether it is a sole or partial criterion for assessing publications. Results: Around 21% of the programs adopt it, with little variation according to their CAPES rank. Conclusions: Adoption is sparse, but relevant. It is surprising that it is used by stricto sensu graduate programs in Information Science, as it means that the faculty that approved it ignored the CAPES recommendation, or approved it by distraction, or despite knowing that it was an error. This blocks interdisciplinarity, by valuing only publications in journals considered “from the subject area”, as well as it devalues not-in-Qualis leading journals from elite databases. It also goes against CAPES’ recommendation, which requires an “I’ve read and understood” tick on the Sucupira Platform to acknowledge that Qualis is only for the evaluation of past production from graduate programs.
Objetivo: Qualis Periódicos estratifica las revistas científicas en las que profesores del posgrado brasileño han publicado en un período pasado, para evaluar los programas de posgrado. Algunos programas lo han adoptado para seleccionar a los estudiantes de posgrado en función de sus publicaciones actuales. Con el fin de medir la incidencia de este fenómeno, específicamente en programas de posgrado en Ciencia de la Información, el objetivo de esta investigación fue verificar el grado de adopción del Qualis para evaluar a los individuos en la selección para el ingreso en maestría o doctorado en Ciencia de la Información en Brasil. Metodología: Realizamos una investigación documental en línea, verificando en las convocatorias de selección si cada programa presente en la lista de ANCIB evalúa a los candidatos en función de su publicación en "revistas Qualis" del período 2013-2016, considerando también si es un criterio único o parcial para evaluar. Resultados: Alrededor del 21% de los programas lo adoptan, con poca variación según la calificación del programa en CAPES. Conclusiones: La adopción es minoritaria, pero relevante. Sorprende que se use en programas de posgrado stricto sensu en Ciencia de la Información, ya que significa que el consejo que lo aprobó ignoró la recomendación de CAPES, o lo aprobó por distracción, o a pesar de saber que es un error. Esto bloquea la interdisciplinariedad, al valorar solo las publicaciones en revistas consideradas "del área", desvaloriza las revistas líderes en rankings de bases de datos de élite que no están en Qualis y va en contra de la recomendación de CAPES, que requiere señalar en la Plataforma Sucupira "Leí y entendí" que Qualis sirve solo para evaluar la producción pasada de los programas de posgrado.
Objetivo: O Qualis Periódicos estratifica revistas científicas em que docentes de programas de pós-graduação publicaram num período passado, para avaliar a pós-graduação. Alguns programas vêm adotando-o para selecionar pós-graduandos quanto a suas publicações atuais. Para medir a incidência desse fenômeno, especificamente por programas de pós-graduação em Ciência da Informação, o objetivo desta pesquisa foi verificar o grau de adoção do Qualis para avaliar indivíduos na seleção ao ingresso em mestrado ou doutorado em Ciência da Informação no Brasil. Metodologia: Fizemos um levantamento documental online, verificando em editais de seleção se cada programa constante na lista da ANCIB avalia os candidatos conforme sua publicação em “revistas Qualis” do período 2013-2016, considerando também se é critério único ou parcial para avaliar publicações. Resultados: Cerca de 21% dos programas o adotam, pouco variando conforme o conceito do programa na CAPES. Conclusões: A adoção é minoritária, mas relevante. Surpreende que seja usada por programas de pós-graduação stricto sensu em Ciência da Informação, pois significa que o colegiado que a aprovou ignorou a recomendação da CAPES, ou aprovou por distração, ou apesar de saber que é um erro. Isso boqueia a interdisciplinaridade, ao valorizar apenas publicações em revistas consideradas “da área”, desvaloriza revistas líderes em rankings de bases de dados de elite que não estão no Qualis e contraria a recomendação da CAPES, que requer assinalar na Plataforma Sucupira “Li e entendi” que o Qualis serve apenas para avaliar a produção passada dos programas de pós-graduação.

Palavras-chave

Avaliação da ciência, Qualis Periódicos, Boas práticas de avaliação científica, Dissonância cognitiva na ciência, Science evaluation, Qualis Periodicals, Good practices in scientific evaluation, Cognitive dissonance in science, Evaluación de la ciencia, Periódicos Qualis, Buenas prácticas de evaluación científica, Disonancia cognitiva en la ciencia

Citação