A quantidade de modelos usados para avaliar o efeito de periódicos e artigos científicos vem crescendo e se diversificando, embora a maioria ainda seja baseada no número de citações, levando ao chamado "fator de impacto".
Em linhas gerais, o cálculo do fator de impacto de um periódico é feito somando-se as citações dos artigos recebidas no ano do cálculo do fator de impacto e dividindo esse número pela quantidade de artigos publicados nos dois anos antecedentes a esse cálculo. Esta é a métrica que o Sistema Qualis resolveu adotar recentemente. Essa métrica é usada pela Capes para classificar os periódicos nos quais os programas de pós-graduação publicam sua produção científica.
Embora seja simples de calcular e compreender, o fator de impacto tem limitações.
A adequação de utilizar uma média para qualificar periódicos tem sido questionada devido à natureza por vezes distorcida da distribuição de citações de artigos de um periódico: um mesmo artigo pode receber muitas citações, enquanto outros recebem muito poucas. Além disso, a maioria dos periódicos tem publicado um grande número de artigos que nunca são citados. Estes artigos, neste modelo avaliação, são percebidos como "prejudiciais" para o fator de impacto da revista em que são publicados.
A Declaração sobre Avaliação de Pesquisa (Declaration on Research Assessment - DORA) foi criada em 2012, com o objetivo de promover abordagens práticas e eficazes para avaliação da pesquisa em todas as áreas do conhecimento. Essa declaração questiona o status do fator de impacto como critério primário para avaliar a ciência e defende a avaliação da pesquisa por seus próprios méritos, e não com base na métrica associada ao periódico em que foi publicada.
A Associação Brasileira de Linguística - Abralin é signatária da DORA. CadLin, uma das publicações da Abralin, tem trabalhado continuamente para aperfeiçoar a forma como são avaliados os artigos que nela se publicam, adotando uma variedade de critérios baseados na circulação mais ampla das publicações.
Por conta disso, aprimoramentos na aba de informações detalhadas, que fica na coluna à direita das páginas dos artigos do periódico, incentivam a mudança do foco do “sucesso” de um artigo com base no fator de impacto para a apresentação de um panorama mais amplo da repercussão que cada artigo tem na comunidade científica e fora dela.
Nas métricas do artigo, os leitores podem ter acesso a dados de citações de várias fontes. Além das tradicionais métricas que exibem o total de downloads e de visualizações de cada artigo, implementamos o rastreamento de altimetria, citações inteligentes e endosso público.
Embora ainda haja muito a ser feito para aumentar a precisão desses rastreamentos, esperamos que esses dados forneçam à comunidade científica uma visão mais completa de como os artigos publicados em CadLin estão circulando e que ajudem a reconsiderar o método corrente de avaliação de periódicos baseado no fator de impacto.
O fator de impacto ainda é supervalorizado como métrica para avaliar o sucesso de periódicos e artigos. Ao aderir à DORA, a Abralin objetiva contribuir com um sistema de avaliação mais apropriado e justo das pesquisas publicadas em seus periódicos.
