América Latina tem “inflação” de revistas científicas

Afirmação é do editor do Webometrics, Isidro Aguillo. Em entrevista, fala sobre ciência aberta e bibliometria

 12/01/2017 - Publicado há 7 anos
20170112_00_revistas_cientificas
Editor do Webometrics coloca em dúvida o papel da revista tradicional como a principal unidade de comunicação científica – Foto: Reprodução

.
Reconhecido como autoridade internacional nas questões relacionadas à bibliometria, cientometria e webometria, Isidro Aguillo concedeu entrevista (por e-mail) à equipe do Sistema Integrado de Bibliotecas (SIBi) da USP, na qual compartilhou alguns de seus pontos de vista sobre a visibilidade acadêmica e científica na Web, impacto da ciência e o futuro da comunicação científica. Antes, saiba um pouco mais sobre esse importante pesquisador, suas atividades e projetos.

Nascido Isidro Francisco Aguillo Caño, em La Rioja, Espanha, em 1963, licenciou-se em biologia com especialização em zoologia, é mestre em informação e documentação, diplomado em Estudios Avanzados (DEA), detentor de dois títulos Doctor Honoris Causa. É membro regular de comissões científicas de conferências e revistas científicas, autor de numerosas publicações sobre os processos de comunicação científica e indicadores Web de desenvolvimento da ciência e da tecnologia,  e quase que diariamente compartilha suas opiniões no Twitter.

Editor do Rankings Web de Universidades – Webometrics, responsável pelo Laboratorio de Cibermetria (Grupo Scimago) do Instituto de Bienes y Políticas Públicas (IPP – CSIC), dedica-se também a projetos como o OpenAIRE – de repositórios da Comissão Européia, Acumen – portfolio de indicadores científicos para indivíduos do VII Programa Marco de Inovação e Desenvolvimento da União Européia (UE); QEAVIS (Seção e Humanidades); Redes de Colaboración (Visibilidade Web) e Practis 2008 (Tecnometría de CC SS e HH) do Plano Nacional de Inovação e Desenvolvimento da Red de Excelencia MA2VICMR da Comunidade de Madri, Espanha. Ornitólogo aficionado, já fez várias viagens de observação de aves, da Floresta Amazônica aos desertos da Namíbia, entre outros destinos. Sua lista inclui mais de 2 mil espécies.

Em 2012, foi um dos palestrantes convidados pelo SIBi para o Simpósio Internacional sobre Rankings Universitários e Impacto Acadêmico na Era do Acesso Aberto, em São Paulo, que reuniu especialistas internacionais e possibilitou a discussão em torno do impacto gerado pela produção científica e os indicadores de qualidade institucionais. Confira a entrevista:
.

20170111_00_ranking

.
SIBiUSP: Você é pesquisador do Cybermetrics Lab, ligado à Agencia Estatal Consejo Superior de Investigaciones Científicas (CSIC). Conte-nos um pouco sobre este laboratório e seu papel na estrutura de Ciência e Tecnologia (C&T) da Espanha.

Isidro Aguillo: O Cybermetrics Lab é um grupo de pesquisa pertencente ao CSIC, o mais importante organismo de pesquisa pública da Espanha e um dos maiores da Europa. Nossa principal missão é estudar a comunicação científica na Web, publicando artigos e relatórios sobre esse tema em nível local e global, mas com um forte interesse na América Latina. Também acolhemos doutorandos e visitantes de pós-doutorado, e estamos envolvidos em projetos da União Europeia (UE).

SIBiUSP: O Cybermetrics Lab desenvolveu e mantém ferramentas de avaliação, como o Webometrics Ranking, o Ranking Web de Repositórios e, mais recentemente, a lista de Autores com h> 100 segundo seu perfil no Google Scholar Citations1 De que maneira essas ferramentas são distintas de outras disponíveis?

Isidro Aguillo: A diferença mais óbvia é que estamos usando indicadores da Web, sozinhos ou combinados com dados bibliométricos. Mas há também uma agenda “política”, pois decidimos cobrir todos os países em nossa análise, não apenas os desenvolvidos. Nossas listas de instituições possuem mais de 40 mil entradas, enquanto o número de indivíduos classificados é provavelmente perto de 200 mil, com uma cobertura completa dos países latino-americanos.

SIBiUSP: O Google Scholar é uma fonte de dados confiável?

Isidro Aguillo: Verificando a literatura disponível sobre este banco de dados, a maioria dos estudiosos concorda que é tão confiável como WoS ou Scopus, mas com uma cobertura que é várias vezes maior e considerando que é de livre acesso, eu acho que deveria ser a opção preferida para os países latino-americanos. Claro, existem problemas, como os indicadores de revistas científicas do Google Scholar Metrics que, na minha opinião, são demasiado tendenciosos para serem úteis.

SIBiUSP: Qual é a real importância dos rankings universitários?

Isidro Aguillo: Para nós, tem sido uma ferramenta poderosa para promover iniciativas de acesso aberto, que foi (e ainda é) o objetivo original dos Rankings Web. Outros editores de rankings têm outras agendas com fortes vieses políticos e comerciais e há até charlatões sem qualquer conhecimento real sobre o ensino superior e sobre as universidades. Mas no final há uma grande sobreposição entre os melhores desempenhos dos principais rankings, por isso há poucas dúvidas sobre quais são as melhores universidades de acordo com determinado modelo – as chamadas universidades intensivas em pesquisa. No entanto, as instituições que seguem outros modelos, como as universidades nacionais, que são tão importantes na América Latina, não são adequadamente reconhecidas nos rankings ARWU (Academic Ranking of World Universities), THE (Times Higher Education World University Rankings) ou o QS (Quacquarelli Symmonds World University Rankings).

SIBiUSP: Muitos pesquisadores consideram as Ciências Humanas periféricas no campo das ciências. Isso se deve às diferentes dinâmicas de produção de conhecimento, que dificultam a mensuração pelos padrões atuais de avaliação científica. Neste sentido, que alternativas teríamos para demonstrar o potencial desta área e quais os indicadores que poderiam ser utilizados?

Isidro Aguillo: Discordo fortemente dessa afirmação. Como mostra o Google Scholar, as contribuições das Humanidades não são apenas relevantes, mas têm um impacto independente dos canais de publicação. A bibliometria fácil realizada por estudiosos com a base de dados WoS é realmente errada em muitas disciplinas devido aos grandes vieses e lacunas das bases de dados “tradicionais”.

SIBiUSP: Tendo em conta que os atuais modelos de avaliação científica tendem a enfatizar as citações em vez dos resultados reais, uma alternativa a esta questão seria medir o impacto das pesquisas científicas na sociedade. Desta forma, como poderíamos medir o impacto social?

Isidro Aguillo: Em primeiro lugar, acho que as citações ainda têm um papel importante nos processos de avaliação e não devem ser descartadas. No entanto, elas devem ser utilizadas em combinação com métodos qualitativos como o Manifesto de Leiden recomenda. Os indicadores altmetrics2 podem ser úteis também, mas eu acho que os atuais indicadores disponíveis estão realmente longe de medir verdadeiro impacto social. Os bibliotecários passaram por alto de outra disciplina de métricas que deve ser explorada em profundidade para tal propósito: Econometria. Como método, não apenas como forma de incorporar fontes de dados econômicos.

SIBiUSP: Em sua recente apresentação, você destacou a importância dos perfis de autores, instituições e grupos de pesquisa, que representam uma mudança de paradigma na ciência e na comunicação científica.

Isidro Aguillo: Devemos abandonar as métricas baseadas em revistas que não são úteis e são muito enganosas para os processos de avaliação, um grave erro comum na América Latina. O perfil é o futuro e a marca digital do pesquisador se tornará cada vez mais importante, por isso novas estratégias de comunicação devem ser desenvolvidas, especialmente aquelas que envolvem redes sociais.

SIBiUSP: Neste cenário, como fica a revisão por pares, elemento fundamental da validação da qualidade da pesquisa? E o que acontece com o papel do marketing? Poderá desvirtuar a avaliação da qualidade da ciência?

Isidro Aguillo: Tenho sérias dúvidas sobre o papel da revista tradicional como a principal unidade de comunicação científica. O esforço deve ser no sentido de fortalecer os artigos individuais, e a revisão por pares aberta é uma boa opção para identificar e filtrar a qualidade. Existem vários modelos que podem ser aplicados, mas minhas preferências vão para um híbrido de revisão por pares pré e pós-aberta.

Desde o passado o prestígio tem sido um motor para a mobilidade acadêmica, e é um fator chave para explicar o sucesso das instituições anglo-saxônicas. Até muito recentemente este recurso intangível era construído de uma forma muito opaca, mas agora a marca digital de cada pesquisador oferece uma maneira mais acessível e transparente para construí-lo, embora a confiabilidade dos métodos de marketing possa ser um problema.

SIBiUSP: Tendo em conta este pano de fundo, qual seria o futuro da publicação científica? Estaremos publicando em revistas como fazemos hoje?

Isidro Aguillo:  Acho que o grande problema da ciência latino-americana é a inflação de revistas científicas. Redalyc, Scielo, Latindex e PKP (Public Knowledge Project) devem repensar seriamente suas políticas, pois promovem um enorme aumento de periódicos medíocres. Também na América Latina não há diretórios de assunto ou megajournals que deveriam ter um papel na transição para um cenário sem revistas. Também me preocupa o foco atual dos repositórios latino-americanos em teses e dissertações e artigos em revistas locais. Outra questão que necessita de mais debate é a preferência dos repositórios / coletores de conteúdo nacionais relativamente aos repositórios institucionais. Para minha surpresa, um grande número de repositórios institucionais na América Latina coletam principalmente teses e dissertações (doutorado e mestrado). Parece que muitas universidades pensam que apenas teses são de acesso aberto ou talvez publiquem poucos artigos em revistas não locais.

SIBiUSP: Como você vê o crescimento das recentes métricas alternativas na avaliação da pesquisa e dos pesquisadores?

Isidro Aguillo: Há muitos artigos na América Latina descrevendo muito acriticamente o movimento altmetrics2. Há muita ênfase nas métricas de uso que podem ser muito enganosas sem fixação de padrões, e os indicadores fornecidos por serviços como ResearchGate, Academia ou Mendeley de forma alguma substituem a análise de citação (provavelmente tais indicadores sejam um subconjunto da análise de citação); e o indicador composto oferecido pela (empresa) Altmetric.com é uma caixa preta, e ninguém sabe exatamente o que o Twittermetrics está realmente medindo.

SIBiUSP: Na sua opinião, qual é a importância da Ciência Aberta? Ela é realmente viável ou será “destruída” pelos interesses comerciais? Como vê as ameaças ao acesso aberto?

Isidro Aguillo: Cada um dos componentes da Ciência Aberta (incluindo até mesmo a Ciência do Cidadão – Citizen Science) já está sendo alvo de interesses comerciais. Os bibliotecários estão contribuindo com a aquisição ou suporte de ferramentas comerciais e serviços com condições desvantajosas (nada de novo nisso, uma vez que as condições de assinaturas digitais já são bastante abusivas). Em minha opinião, para evitar problemas, a Ciência Aberta deve ser fortemente apoiada por governos envolvendo um vigoroso financiamento público de infraestruturas e ferramentas.

SIBiUSP: Qual é o papel das bibliotecas e bibliotecários no atual cenário de mudança da avaliação científica?

Isidro Aguillo: Na Europa, os bibliotecários acadêmicos já constituem o maior grupo bibliométrico existente, mas ainda há muitos problemas – muitos deles não conhecem o Manifesto de Leiden, por exemplo. Na América Latina temos iniciativas equivocadas como a bibliografia do Redalyc, outras com viabilidade futura incerta como o acordo Scielo-WoS, e em geral a maioria de seus bibliotecários ainda não estão assumindo um papel bibliométrico. Se posso dar um conselho, sugiro-lhes o modelo Cris (Current Research Information System), evitando produtos comerciais como Pure e analisando serviços como o Futur (da Universidade Politécnica da Catalunha).

Notas:

1. h = índice h, mede a produtividade e o impacto individual de cientistas através do número de publicações e suas citações. Saiba mais em: https://pt.wikipedia.org/wiki/%C3%8Dndice_h.

2. Indicadores altmetrics = medidas de indicadores alternativos (em português: altmetria) baseadas no uso e nas menções nas mídias sociais. Saiba mais em: https://bsf.org.br/2014/07/15/altmetrics-redes-sociais-como-metricas-alternativas-para-medir-o-impacto-cientifico/.


Política de uso 
A reprodução de matérias e fotografias é livre mediante a citação do Jornal da USP e do autor. No caso dos arquivos de áudio, deverão constar dos créditos a Rádio USP e, em sendo explicitados, os autores. Para uso de arquivos de vídeo, esses créditos deverão mencionar a TV USP e, caso estejam explicitados, os autores. Fotos devem ser creditadas como USP Imagens e o nome do fotógrafo.