28 | DOT: http://x.dot.org/10.21879 faeeba2358-0194,2019.v28.n55.p28-42 RANKINGS: ESTRATEGIA DE DEFESA DA UNIVERSIDADE PUBLICA? Lara Carlette Thiengo (UFVJM)* htpsi//orcid.org/0000-0003-3593-4746 Lucidio Bianchetti (UFSC)** https:/orcid.org/0000-0001-9748-5646 Maria de Lourdes Almeida Pinto (UNOESC- SC)*** https://orcid.org/0000-0001-8515-2908 RESUMO Neste artigo analisamos os limites da utiliza¢o de rankings para construir argumentages em defesa da universidade publica brasileira frente as tentativas de desqualific4-la. Objetivamos responder as seguintes questdes: quais sio os principais rankings veiculados e quais indicadores compdem as suas respectivas métricas? Quais sfo os limites dessas tabelas classificatérias apontados pela literatura académica e pelos meios de comunicacao? De que maneira, nos discursos midisticos, sao utilizados os resultados dos rankings para defender/ atacar a universidade puiblica? Que argumentacdes sio utilizadas? Neste contexto resulta preocupante o fato de 0 atual governo sequer considerar, em suas decisdes e proposicdes, os informes, embora parciais e imprecisos, sobre a posig4o das tniversidades brasileiras nos rankings. Em termos metodolégicos, utilizamos a andlise da métrica de dois reconhecidos rankings internacionais € matérias jornalisticas, relacionadas ao tema, publicadas no ano de 2019. Palavras-chave: Rankings. Midia, Avaliagao da educagao superior. ABSTRACT RANKINGS: DEFENSE STRATEGY OF THE PUBLIC UNIVERSITY? In this article the limits of the use of rankings to construct the arguments in defense of the Brazilian public initiative against the attempts of disqualification were analyzed, We aim to answer the following questions: What are the main rankings served and which indicators make up their respective metrics? Are the classification tables pointed out in the academic literature and in the media? In what way, in media discourses, are the results of the rankings to defend/ attack the public university? What arguments are used? In this context, it is worrying that the current government does not even consider, in its decisions Pos Doutoranda em Educacio pela Universidade do Oesce de Santa Catarina (UNOESC), Doutora em Edtucacto pela Universidade Federal de Santa Catarina (UFSC),Professora Adjunta da Universidade Federal dos Vales de Jequitinhonha e Mucuri (UFVIM], E-mail laracarlette@gmailcom Doutor em Educagao pela Pontificia Universidade Catélica de Sao Paulo (PUC-SP). Professor Aposentado/Voluntario do Programa de Pos-Graduagdo om Educagio da Universidade Federal de Santa Catarina (UFSC). E-mail: lucidiob@gmailcom Doutora em Educacio pela Universidade Estadual de Campinas (Unicamp). Docente Pesquisadora do Programa de Pés- Graduarao em Educacao da Universidade do Oeste de Santa Catarina (UNOESC- SC) na linha de pesquisa Educagao, Politicas Paiblicas e Cidadania, E-mail: malu04@gmail com Rev. FABEBA Ed. Contemp, Salvador 28,n. SS p.28-82, malo/ago. 2019{ara Carlet Thiengo;Lucidio Blanchett; Maria de Lourdes Almeida Pinto and propositions, the reports, although partial and imprecise, about the position of Brazilian universities in the ranking, In methodological terms, it uses an analysis of the second generation of international rankings and of journalistic matters, related to the theme, published in the year 2019. Keywords: Rankings. Media, Evaluation of higher education. RESUMEN RANKINGS: zESTRATEGIA DE DEFENSA DE LA UNIVERSIDAD PUBLICA? Eneste articulo analizamoslos limites de la utilizacion de rankings para construir argumentaciones en defensa de la universidad publica brasileiia ante a los intentos de descalificarla. Objetivamos contestar a las siguientes cuestiones: zcudles son los principales rankings vehiculados y qué indicadores componen sus respectivas métricas? ,Cudles son los limites de esas tablas clasificadoras sefialadas por la literatura académica y por los medios de comunicacién? eDe qué manera, en los discursos mediaticos, se utilizan los resultados de los rankings para defender/atacar la universidad publica? ;Qué argumentaciones son utilizadas? En este contexto resulta preocupante el hecho de que el actual gobierno siquiera considera, en sus decisiones y proposiciones, los informes, si bien parciales ¢ imprecisos, sobre la posicién de las universidades brasilefias en los rankings. En términos metodolégicos, utilizamos el andlisis de la métrica de dos reconocidos rankings internacionales y materias periodisticas, relacionadas con el tema, publicadas en el ano de 2019. Palabras-clave Introducao A recente polémica envolvendo os pronun- ciamentos do atual governo brasileiro sobre a ineficiéncia e a irrelevancia das universidades ptiblicas tem levado varias entidades, associa- ges, sindicatos, Instituigdes de Ensino Supe- rior (IES), professores, institutos de pesquisa e até a imprensa a manifestarem-se contra tals ataques. Nessas manifestacdes tem-se afirmado e demonstrado justamente o oposto: a qualidade das universidades puiblicas ea sua relevancia na produgao e veiculagao de conhe- cimentos ¢ no desenvolvimento de pesquisas de ponta, basica e aplicada. Nesse cenario, os rankings académicos nacionais e internacionais passam a ser con- siderados, na maioria das vezes, como as principais e mais fidedignas fontes de dados para corroborar a qualidade e a relevancia dessas instituigdes. Todavia, nesse proceso, Rev, FAEEHA ~ Ed. Contemp. Salvador 28,55. 28-82, malo/ago. 2019 : Rankings. Media, Evaluacién de la educacién superior. sao relegadas a segundo plano questées como: © que efetivamente medem esses rankings? 0 que as universidades fazem com os rankings e ‘o que os rankings fazem com elas? Que papéis desempenham esses mecanismos métricos no Ambito da elaboragio de politicas piblicas para a educagao superior e para a propria ges- ‘Ho institucional? Em que medida os rankings efetivamente conseguem medira qualidade da universidade pitblica brasileira, considerando as especificidades do nosso contexto? Por meio dos rankings 6 possivel aprender e expressar oser/fazer da universidade em sua totalidade? Se olharmos retrospectivamente para o dis- curso da imprensa nos iiltimos anos, percebe- mos que os rankings também vieram servindo como “evidéncia” numérica e comparativa en- tre universidades intra e entre pafses e blocos, de modo a endossar o discurso de desmonte | 2930 | Rankings: extratégia de defesa da univeridade pblica? da universidade pablica, que vem acontecen- do via corte orcamentario, aprofundamento da diferenciacao institucional, criagao de i ciativas de exceléncia e priorizagdo de éreas consideradas estratégicas (THIENGO, 2018). Tal ofensiva & universidade piiblica vem sendo orquestrada pelo Banco Mundial em associacao comas elites brasileiras, e expressa uma forma de ajuste as necessidades prementes da nova ordem neoliberal. 0 documento “Um ajuste justo: andlise da eficiénciae equidade do gasto publico no Brasil” (BANCO MUNDIAL, 2017) foi elaborado visando apoiar as reformas regressi- vasarticuladas no ambito do Estado brasileiro. Neste sentido, no caso da educacio, 0 docu- mento era composto por recomendacées que visavam a extingdo das universidades ptiblicas, o fim da gratuidade de ensino ea ampliagao dos financiamentosaos estudantes mais pobres em instituigdes particulares. Considerando o acima exposto, no presente artigo, temos como objetivo analisar os limites da utilizacao de rankings para argumentacdes em defesa/ataque da universidade publica, Paraiso, organizamos o artigo em itens que in- tentam responder as seguintes questdes: quais so os principais rankings e quais indicadores compéemas suas métricas? Quais os principais limites dessas tabelas classificatérias aponta- dos pela literatura académica? De que maneira 0 discurso midistico utiliza o resultado dos rankings para defender/atacar a universidade piiblica e quais os limites dessa argumentago? Em termos metodoldgicos, utilizamos a andlise das métricas e indicadores de dois prin- cipais rankings internacionais e um nacional, além de matérias jornalisticas que abordam o tema do artigo, em parte do ano de 2019 (janeiro a maio), no arquivo do Jornal Folha de S, Paulo* e na plataforma Google Nottcias. Os descritores utilizados foram: “rankings and universidade”; “rankings académicos”; “ranking’ Para além disso, langamos mao do levantamento bibliografico e de dados e andlise 1 Considerado ser este ojornal de maior expressividade no Brasil, neste momento, seja pelo nimero de assinantes, soja pola sua linha editorial. ocumental, orientando-nos pela compreensio das contradigdes, das mediagGes e da totalida- de histérica, considerando com isto: “apreen- deras determinagdes que constituem o nticleo fundamental de um fendmeno, sem o que esse fenémeno nao se constituiria.” (FRIGOTTO, 1991, p. 187). Rankings académicos: qual qualidade esta sendo medida? Nao obstante a popularidade que os ran- kings académicos vém adquirindo (CALDERON, 2010; ORDORIKA; GOMEZ, 2010), estes tam- bém tém sido objeto de eriticas por parte de va- rios atorese autores ao longo das iltimas duas décadas (ENDERS, 2015; MOURA; MOURA, 2013; THIENGO, 2018). Todavia, concordamos com Altbach e colaboradores (2010) quando afirmam que essas criticas nao tém impedidoa conquista de legitimidade e credibilidade des- ses indicadores, convertidos, em pouco tempo, em referentes de uma determinada exceléncia e qualidade, Desse modo, os rankings internacionais podem ser considerados elementos-chave na governanca transnacional, criando um contexto de discussio sobre os critérios apropriados para as comparagdes, 0 éxito e a legitimidade das instituigdes que apontam elementos para criar estandares organizacionais. Assim, esses mecanismos de avaliacao/clas- sificagdo podem ser considerados instrumen- tos de legitimidade, de distingao e de poder, bem como dinamicas “organizadoras” de refor- mas educacionais que, por sua vez, estao atre- ladas as grandes metas sociais eeconémicas de cada pafs ea promogio da competitividade no Ambito da globalizagao (AZEVEDO, 2016; DIAS SOBRINHO, 2005; SHIROMA, 2016). Considerando as métricas dos rankings Aca- demic Ranking of World Universities (ARWU), Times Higer Education (THE) e Ranking Uni- versitario Folha (RUF), entendemos que estes privilegiam os indicadores relacionados & pesquisa. Rev. FABEBA Ed. Contemp, Salvador 28,n. SS p.28-82, malo/ago. 2019{ara Carlet Thiengo;Lucidio Blanchett; Maria de Lourdes Almeida Pinto No caso do ARWU, mais de 90% da métrica est relacionada a performance da investiga- ¢4o, registrada por meio de indicadores como © mimero de prémios Nobel entre os ex-estu- dantes da instituigao e o ntimero de artigos e de citagdes nos estudos bibliométricos, 0 RUF também atribui a este indicador 42% da sua inétrica. O THE possui dois eritérios relaciona- dos diretamente a pesquisa - Pesquisa: reputa- 40, orcamento e volume; Citagées: influéncias da pesquisa. Todavia, outros critérios e seus respectivos indicadores, como ensino, por exemplo, também esto relacionados a pesqui- sa, ainda que nao de forma “literal”, como per- cebemosnos Quadros 1, 2.¢3, que apresentam os critérios e indicadores desses trés rankings. Quadro 1 - Critérios e indicadores do ranking Times Higher Educacion (THE) ‘CRITERIOS INDICADOR DESCRICAO PESO Resultados obtidos por meio da pesquisa Reputaao académica | #@ opinito entre os académicos, sobre o | 4.4, prestigio e reputagao das instituigoes de ensino Niimero de doutores titulados em rela- Doutores titulados ¢A0 ao tamanho do corpo docente da ins- | 6% Ensino: ambiente tituigao de aprendizado Proporeio entre niimero de alunos de Alunos/Staffacadémico | graduacao admitidos em relacao ao ni-| 45% mero de docentes Relaco entre o orcamento da instituiga0 Orcamento 2 5° | 2.25% eo niimero de docentes Doutorados/ Proporcao entre o niimero de doutora- | > 59, Bacharelados dos e de bacharelados concedidos " Resultados obtidos por meio da pesquisa Reputagao em pesquisa | @@ Opinizo entre os académicos, sobre 0 | jo, “pUrage Pesquisa | prestigio e reputacdo das instituigdes em Pesquisa: pesquisa reputacio, Investimento em Relacao entre orcamento destinado &| 4, orcamento e pesquisa pesquisa e o mimero de docentes volume Relagao entre a quanticiade de documen- scaca tos publicados (indexados no Wos da Publicagdes p C 6% Thomson Reuters) e entre o mimero de docentes Citagdes: Influéncia 5 Nimero de citagdes recebidas na Wos Citagoes rc 30% da pesquisa nos tiltimos 5 anos Proporgio de estudantes estrangeiros Estudantes estrangeiros © | 61 relacao ao niimero de estudantes na- | 2,5% nacionais . clonais da instituiga0 Perspectiva Proporgio de docentes estrangeiros em Docentes estrangeiros e oreo Internacional relacao ao mimero de estudantes nacio- | 2,5% nacionais : nals da instituigao Colaboragao Nitmero de artigos cientificos produzidos | <4, internacional com um ou mais coautores estrangeiros ee Captagao de Mede 0 peso de recursos destinados 8 Recursos da Recursos da indistria | pesquisa provenientes da industria em | 2,5% Indiistria: inovagio relacao ao mimero de académicos Fonte: Elaborado pelos autores deste artigo com base em Santos (2015) Rey, FAEEBA ~ Ed Contemp, Salvador 28. 58, . 28-82, malo/ago. 2019 | 31Rankings: extratégia de defesa da univeridade pblica? Quadro 2 - Critérios e indicadores do Academic Ranking of World Universities (ARWU) CRITERIOS INDICADOR copico | PESO Qualidade da Ex-alunos com mecialhas Fields e Prémios Nobel Alumi | 10% educagao Funcionarios com medalhas Fields e PrémiosNobel_ [Award | 20% Qualidade do corpo Fee ae Pesquisadores mais cotados em 21 campus nici | 20% disciplinares Artigos publicados em Nature e Science nas | 20% Resultados das “Artizoscitados eum Science Ctation Ind Ged gos citados em Science Citation Index-expanded e vesquisas ln Social Selence Citation Index Sel 20% Tamanho do Resultados dos outros indices divididos pelo nimero |<. | 199, estabelecimento de funcionérios do estabelecimento ° Fonte: Elaborado pelos autores deste artigo com base em Shangai Ranking (2018). Quadro 3 - Critérios e indicadores do Ranking Universitario Folha (RUF) CRITERIO INDICADORES PORCENTAGEM Total de publicagoes ~ 7% Total de citagdes - 7% Citagdes por publicagao - 4% Publicagdes por docente ~ nos tiltimos anos - 7% Pesquisa Publicagdes por dacente ~ ano anterior - 7% 42% Publicagdes em revistas nacionais ~ 3% Recursos recebidos por instituigao ~ 3% Bolsistas CNPq - 2% Teses - 2% Avaliadores do MEC- 20% Professores com doutorado e mestrado ~ 4% Ensino 32% Professores em dedicagiio integral e parcial - 4% Nota no Enade ~ 4% Consicera a opiniao de 5.444 profissionais de RH Mercado consultados pela Datafolha em 2016, 2017 e 2018 18% sobre preferéncias de contrataga0 ; _,_ | Citacées internacionais por docente ~ 2% da nota total Internacionalizacao : 4% Publicagdes em coautoria internacional - 2% Patentes - 2% Inovacao 4% Parceria com empresas ~ 2% Fonte: Elaborado pelos autores deste artigo com base em Ranking Universitario Folha (2018). Auutilizagdio do indicador “pesquisa” eviden- cia a nogio de universidade prioritariamente enquanto espaco de producao de pesquisas e ainda a prépria nogao de ciéncia articulada a0 produtivismo académico. Neste sentido, os principais critérios relacionados a pesquisa sio citagdes, indexacio, total de publicagao ¢ publicagiio em revistas especificas (para caso 32 | Rev FABEBA~ Ed e Contemp, Salvador «28, 1.55, p.28-42, malo/ago. 2019{ara Carlet Thiengo;Lucidio Blanchett; Maria de Lourdes Almeida Pinto de ARWU e THE). Os rankings dependem da Thomson Reuters e Scopus, que coletam dados de citacdes em aproximadamente nove mil ar- tigos de revistas na Web of Science e 18 mil na Scopus, respectivamente (HAZELKORN, 2013). Hazelkorn (2013) explicita alguns proble- mas relacionados a esse indicador, dentre os quais destaca: a) os artigos podem ser citados por causa de erros, e nao necessariamente em razo de sua qualidade; b) a revisio pelos pares pode ser uma influéncia conservadora em relagao aos novos campos de pesquisa ou ideias que desafiam a ortodoxia; c) o critério de citagdes para medir o “impacto” sugere que sua relevancia e beneficio sao simplesmente fendmenos da academia, ignorando assim os beneficios que a investigagio e a inovagio podem gerar; d) a depender da disciplina, os resultados da pesquisa e andlise podem ser publicados em uma variedade de formatos Em contrapartida, os indicadores referentes a0 ensino incluem questdes como: reputagao sobre o ensino, a propor¢ao professor-aluno, a proporgao de doutores em relagao aos demais membros da equipe e outras semelhantes. A relagéo quantitativa tem como fundamento a ideia de que salas de aulas com menos alunos permitem uma melhor qualidade da educagao. Entretanto esta relagiio nao avalia a qualidade dos profissionais, tampouco 0 ambiente de aprendizagem, que também tem impacto sobre o desempenho dos alunos. Aquantidade de recursos também ¢ utiliza- da como wm indicador do ambiente de apren- dizagem, representado pelo montante total do orcamento da IES ou pelo tamanho da colecao da biblioteca, Mais uma vez, a relagao recursos por aluno pode ocultar dados da realidade, uma vez que existem faculdades ofertando grande variedade de programas e servigos ou dispendendo grandes gastos com dormitérios, instalagdes desportivas e de lazer, os quais se- ro todos interpretados como gastos por aluno, Hé, neste aspecto, uma linha ténue entre o real impacto desses gastos nas experiéncias de aprendizagem dos alunos, que se modifica de Rev, FAEEHA ~ Ed. Contemp. Salvador 28,55. 28-82, malo/ago. 2019 acordo com o que se entender por “assisténcia estudantil", que realmente pode ter impactos na aprendizagem, uma vez que diz. respeito oferta de recursos para que o estudante se mantenha na universidade ow ainda que figure com um “luxo para atrair alunos’, Essa abordagem também pode penalizar as instituicdes que tentam reduzir suas despe- sas ou que efetivamente contam com menos recursos. 0 indicador” perspectiva internacional” contabiliza o ntimero de estudantes e profes- sores de outros paises na IES ¢ os artigos em colaboragio com docentes de instituigdes de outros paises, Todavia é importante considerar que 0 indicador de internacionalizagio ¢ paralelo a outros, como a qualidade do corpo docen- te, que possui bastante expressividade nos referidos rankings e esta articulado ao pro- cesso de internacionalizagao, na medida em que ha um “mercado de cérebros” que move professores ¢ alunos de prestigio entre uni- versidades em todo o mundo. 0 investimento em pesquisa em redes de colaboragao e as pu- blicagdes em revistas internacionais também podem ser considerados fatores relacionados internacionalizagao. Outra questo proeminente é 0 fato de o maior mimero de revistas incluidas nas bases de dados serem publicadas em inglés, tor- nando-se mais facil para os falantes nativos e professores das universidades de lingua inglesa terem acesso aos principais jornais e editores, juntarem-se as redes informais que tendem a dominar a maioria das disciplinas cientificas, além de, efetivamente, publicar neste idioma. Outra questo relaciona-se ao tamanho ¢ao orgamento das IES ranqueadas. Neste sentido 6 atribuida maior importancia as instituigdes de ensino superior com 25 mil estudantes ou mais, 2,5 mil professores e um orgamento anual de cerca de 2 bilhdes de euros (USHER, 2015). De acordo com Hazelkorn (2013), ape- sar de existirem mais de 16 mil instituigdes | 33