FTE, produtividade científica e quotas

Recebemos do Director da Faculdade de Ciências e Tecnologia da Universidade de  Coimbra este texto, onde se aponta o dedo a mais um ERRO monumental da FCT que, se houvesse seriedade, devia ter consequências numa reavaliação:

Não obstante os indícios que têm sido apresentados em contrário, a FCT tem mantido a posição de que não existem quotas no processo de avaliação. Se tal é correto, a decisão por parte dos painéis de excluir metade das unidades de investigação a concurso baseia-se estritamente numa avaliação de mérito absoluto, entendendo que estas não cumprem os critérios de qualidade mínimos que são exigíveis em atividade de investigação com nível internacional. Numa avaliação deste tipo é normal que assuma algum relevo a produtividade científica passada, normalizada em função da dimensão das unidades, o que permite apurar indicadores verdadeiramente comparativos com padrões internacionais. Embora tardiamente, após a avaliação preliminar por três referees e a subsequente fase de rebuttal, a FCT pareceu caminhar neste sentido ao disponibilizar um estudo bibliométrico encomendado à Elsevier. Neste estudo constava um fator de normalização designado por FTE (full time equivalent) researchers, a partir do qual eram calculados elementos relevantes como o número médio de publicações e de citações por investigador, com valores globais e por percentis função da qualidade das revistas.

Sendo o conceito de FTE intuitivo e óbvio, foi algo estranho verificar que o cálculo dos valores reportados pela FCT não era suscetível de ser reproduzido por engenharia inversa, sendo os valores superiores ao número de membros integrados mas não correspondendo à soma destes com colaboradores, bolseiros, estudantes de doutoramento ou de combinações de diferentes grupos. Na impossibilidade de compreender os valores de FTE, foram pedidos esclarecimentos à FCT, sem resposta imediata, tendo entretanto sido recebidos os resultados da fase seguinte da avaliação com a atribuição da classificação final harmonizada pelos painéis de avaliação. Estes painéis tiveram seguramente acesso ao estudo bibliométrico, pois em muitos casos nos relatórios das unidades são referidas as taxas de publicação e citação normalizadas resultantes daquele estudo (ainda que por vezes com discrepâncias incompreensíveis num processo que se pretende rigoroso). Na impossibilidade de compreender os dados, a generalidade das unidades não terá sequer comentado os valores de produção científica que lhe foram atribuídos no rebuttal à proposta de classificação harmonizada.

Em momento incerto, mas que tudo indica muito recente e posterior à atribuição das classificações harmonizadas e ao subsequente rebuttal das unidades (finais de agosto?), verifica-se que a FCT republicou no seu site o estudo bibliométrico da Elsevier com correção dos valores de FTE. Esta correção é igual em praticamente todas as unidades e consiste numa simples divisão dos valores anteriores por 2. Não sendo percetível a origem do erro na primeira versão do estudo, é certo que os novos valores são agora consonantes com o esperado – soma das percentagens de tempo dedicadas à unidade por cada um dos seus membros integrados. Esta correção, efetuada num momento já adiantado do processo de avaliação e certamente da responsabilidade da FCT e não da Elsevier, tem uma consequência dramática nos resultados do estudo bibliométrico, duplicando a produtividade per capita das unidades em fatores relevantes como o número de publicações e de citações!

Num processo de avaliação sem quotas, certamente que os valores de produtividade corrigidos são um elemento muito importante que deveria ser de novo reapreciado pelos painéis, uma vez que colocam a ciência portuguesa num patamar de mérito absoluto muito superior ao que foi tido em conta na avaliação anteriormente efetuada. Expectavelmente, decorrerá desta reapreciação uma subida generalizada das classificações das unidades e uma redução significativa da percentagem das que não tiveram acesso à segunda fase, sem prejuízo da necessidade de correção de casos específicos de manifesta subavaliação através de outros mecanismos.

Caso a FCT não entenda proceder a uma reapreciação da classificação de todas as unidades face a este erro agora detetado, podemos concluir que o considera irrelevante por afetar todas as unidades de igual forma, o que constitui indicador de que a avaliação é afinal de carácter meramente relativo entre as unidades a concurso e como tal estruturada por quotas definidas à partida.

Luís Neves

Diretor da FCTUC