A tirania do “artigo sexy” – o novo Qualis / A terra é redonda

A tirania do “artigo sexy” – o novo Qualis / A terra é redonda

A intenção declarada é tornar a avaliação mais justa, valorizando o mérito intrínseco da pesquisa em vez do prestígio prévio do veículo de publicação. No entanto, ao ancorar a qualidade da produção científica justamente em métricas de visibilidade e citação, a nova política pode acentuar as desigualdades que já marcam o sistema acadêmico, além de possivelmente comprometer a qualidade dos artigos. Em vez de uma ciência mais plural e democrática, corremos o risco de aprofundar um regime de concentração de prestígio que, na era das plataformas digitais, se torna ainda mais perverso.

#Qualis #AvaliaçãoDaCiência

Disponível em: https://aterraeredonda.com.br/a-tirania-do-artigo-sexy-o-novo-qualis/

Repositórios institucionais ganham papel estratégico nas avaliações universitárias brasileiras / CI Express

Repositórios institucionais ganham papel estratégico nas avaliações universitárias brasileiras / CI Express

O artigo Repositórios institucionais: métricas de alcance das publicações e sua contribuição nos processos avaliativos internos e externos das instituições de ensino superior, de Dayane Dornelles e Luciana Mara Silva, demonstra que os repositórios institucionais deixaram de ser apenas ambientes digitais de armazenamento para se consolidarem como ferramentas estratégicas de avaliação acadêmica, gestão universitária e visibilidade científica. O estudo evidencia que essas infraestruturas podem influenciar diretamente processos regulatórios conduzidos pelo Ministério da Educação (MEC) e pela Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES), além de ampliar o alcance social da produção científica das universidades.

#Repositórios #AvaliaçãoDaCiência

via CI Express

Disponível em: https://www.cienciadainformacaoexpress.com/post/reposit%C3%B3rios-institucionais-ganham-papel-estrat%C3%A9gico-nas-avalia%C3%A7%C3%B5es-universit%C3%A1rias-brasileiras

Repensando a avaliação da atividade científica / Biblios

Repensando a avaliação da atividade científica / Biblios

O texto denuncia como a transformação de indicadores em objetivos de desempenho compromete a integridade da pesquisa, propondo abordagens que valorizam o impacto social e a diversidade institucional. Por fim, esta edição especial da 9ª EBBC contribui para um debate histórico sobre métricas, convocando a comunidade a abraçar a corresponsabilidade ética e epistemológica. Repensar as métricas significa refletir sobre que tipo de ciência queremos produzir e para quem. A bibliometria, com rigor e sensibilidade crítica, é essencial para orientar a produção científica não apenas por meio da quantificação, mas também por meio da relevância ética e do fortalecimento do ecossistema acadêmico.

#ProduçãoCientífica #Bibliometria #AvaliaçãoDaCiência

Disponível em: https://biblios.pitt.edu/ojs/biblios/article/view/1438

Interpretando indicadores bibliométricos como os “exames de sangue” dos sistemas de pesquisa / MDPI

Interpretando indicadores bibliométricos como os “exames de sangue” dos sistemas de pesquisa / MDPI

Cada técnica bibliométrica — que varia desde contagens de publicações e citações até análise de patentes, altmetria e modelagem de tópicos — está associada a uma função diagnóstica, como triagem, monitoramento ou detecção precoce de riscos. Ao conectar princípios estabelecidos de métricas responsáveis ​​(DORA, Manifesto de Leiden, Metric Tide, CoARA) com a profissionalização dos avaliadores, o ensaio situa a metáfora dentro dos debates atuais sobre alfabetização bibliométrica e a interpretação ética dos indicadores. Em vez de prescrever métricas ou regras de decisão, a contribuição convida à reflexão sobre como os avaliadores podem interpretar os sinais bibliométricos de forma diagnóstica — como evidência contextual para o aprendizado institucional, a tomada de decisões estratégicas e o cultivo de sistemas de pesquisa saudáveis ​​e adaptativos. Em consonância com o formato de ensaio, esta contribuição não propõe uma nova metodologia de avaliação nem validação empírica. Em vez disso, apresenta uma estrutura heurística e comunicativa destinada a enfatizar a interpretação holística, contextual e profissionalmente embasada de indicadores quantitativos na avaliação da atividade de pesquisa.

#Bibliometria #AvaliaçãoDaCiência

Disponível em: https://www.mdpi.com/2304-6775/14/1/9

A maioria dos pesquisadores receberia mais reconhecimento se fosse avaliada por métricas de nível de artigo do que por métricas de nível de periódico / Plos Biology

A maioria dos pesquisadores receberia mais reconhecimento se fosse avaliada por métricas de nível de artigo do que por métricas de nível de periódico / Plos Biology

Constatamos que o número de artigos citados, pelo menos tão bem quanto os publicados em periódicos de alto fator de impacto, excede em muito o número de artigos publicados nesses mesmos periódicos. No nível do pesquisador, esse fenômeno se estende a todos os grupos de cientistas, independentemente de gênero, raça ou estágio de carreira. Também constatamos que aproximadamente metade dos pesquisadores nunca publica em um periódico com fator de impacto acima de 15, o que, sob os regimes de avaliação de periódicos, pode excluí-los de oportunidades. Muitos desses pesquisadores publicam trabalhos igualmente influentes; no entanto, isso levanta a possibilidade de que as métricas tradicionalmente escolhidas para periódicos, que são rotineiramente consideradas em normas, políticas ou leis de tomada de decisão, reconheçam apenas 10% a 20% desses trabalhos influentes.

#AvaliaçãoDaCiência #IndicadoresBibliométricos

Disponível em: https://doi.org/10.1371/journal.pbio.3003532

Como avaliar cientistas? / Folha de S. Paulo

Como avaliar cientistas? / Folha de S. Paulo

A discussão não é nova, mas a Dora foi um catalisador para um movimento maior de reforma da avaliação de ciência, que pede o uso responsável dessas métricas, envolve organizações globais como a Coalizão para o Avanço da Avaliação da Pesquisa (CoARA) e luta por reformas mais abrangentes do sistema universitário (por exemplo, nos Países Baixos). A própria Dora, para além da declaração original, tornou-se, em 2018, uma organização que promove a reforma do sistema de avaliação –com a qual o Serrapilheira colabora como parte de um dos seus grupos de discussão de financiadores.

Mesmo que a passos pequenos, o cenário vem mudando. A avaliação dos programas de pós-graduação feita pela Capes, por exemplo, agora poderá considerar não só as métricas que dizem respeito aos periódicos, mas também critérios qualitativos. Esperamos que mais instituições que fomentam ou fazem pesquisa se juntem a nós na reflexão sobre as práticas de avaliação da pesquisa.

#AvaliaçãoDaCiência #Cientistas #DORA

via Folha de S. Paulo

Disponível em: https://www1.folha.uol.com.br/blogs/ciencia-fundamental/2025/12/como-avaliar-cientistas.shtml

A Declaração de São Francisco sobre Avaliação de Pesquisa / ABC

A Declaração de São Francisco sobre Avaliação de Pesquisa / ABC

A principal tensão nessa área diz respeito ao uso da “cientometria”: em que medida a avaliação da pesquisa pode estar baseada em métricas quantitativas como o número de citações dos artigos científicos ou o fator de impacto dos periódicos em que são publicados?

A posição da agência europeia é cristalina: tal como a NSF, o ERC aderiu formalmente à Dora (Declaração de São Francisco sobre Avaliação de Pesquisa), a qual bane o uso de tais métricas, apontando que “o conteúdo científico de um artigo é muito mais importante do que as métricas da publicação ou o nome do respectivo periódico científico”. Assim, seus julgamentos estão baseados exclusivamente em avaliações qualitativas (subjetivas!) do conteúdo de cada projeto realizadas por especialistas renomados. Foi assim que o ERC construiu um padrão de excelência respeitadíssimo, um dos raros consensos no complexo cenário europeu.

#AvaliaçãoDaCiência #DORA #DeclaraçãoDeSãoFranscisco

via ABC

Disponível em: https://www.abc.org.br/2025/12/03/a-declaracao-de-sao-francisco-sobre-avaliacao-de-pesquisa/

Recomendações para mitigar as desigualdades de gênero persistentes na avaliação das carreiras académicas / Clacso

Recomendações para mitigar as desigualdades de gênero persistentes na avaliação das carreiras acadêmicas / Clacso

Revisão dos critérios de avaliação e do tipo de informação utilizada

– Incorporar informações aos critérios de avaliação que permitam a justificativa qualitativa de interrupções ou adiamentos devido à sobrecarga de cuidadores e aos papéis de gênero, por exemplo, incorporando currículos narrativos.
– Ampliar as informações disponíveis sobre as características sociodemográficas dos candidatos para avaliar a interação entre os papéis de gênero e as carreiras acadêmicas ao longo da vida dos pesquisadores.
– Valorizar e recompensar diversas formas de divulgação e atividades científicas, além da produtividade medida por publicações revisadas por pares, e considerar os contextos pessoais e familiares nos níveis de produção, entre outros.

#MulheresNaCiência #AvaliaçãoDaCiência #DesigualdadeDeGênero

via Clacso

Disponível em: https://biblioteca-repositorio.clacso.edu.ar/handle/CLACSO/251720

Além das citações: a semantometria e o valor do texto completo para avaliação de publicações científicas / CI Express

Além das citações: a semantometria e o valor do texto completo para avaliação de publicações científicas

A semantometria incluiu a análise da semântica textual para avaliar a contribuição das publicações em redes de citações. Utilizando técnicas de mineração de texto e dados, mede a distância semântica entre as publicações citadas e as que citam determinado artigo. Essa abordagem é mais do que a simples contagem de citações, pois considera aspectos qualitativos e a profundidade das relações semânticas.

#Semantometria #AvaliaçãoDaCiência

via CI Express

Disponível em: https://www.cienciadainformacaoexpress.com/post/al%C3%A9m-das-cita%C3%A7%C3%B5es-a-semantometria-e-o-valor-do-texto-completo-para-avalia%C3%A7%C3%A3o-de-publica%C3%A7%C3%B5es-cient%C3%ADf

Orientação sobre o uso responsável de indicadores quantitativos na avaliação de pesquisas

Orientação sobre o uso responsável de indicadores quantitativos na avaliação de pesquisas

Este documento fornece orientação sobre o uso de vários indicadores (às vezes chamados de métricas) usados ​​na avaliação de pesquisas: o Fator de Impacto de Periódicos e outras medidas de periódicos, contagens de citações, índice h, indicadores de citação normalizados em campo e altmetria. Cinco princípios orientam o uso dessas métricas: seja claro, seja transparente, seja específico, seja contextual e seja justo.

#IndicadoresBibliométricos #AvaliaçãoDaCiência #DORA

Disponível em: https://zenodo.org/records/10979644

Contra a perversão do sistema de avaliação científica

Contra a perversão do sistema de avaliação científica

Um estudo realizado por Philip Campbell, então editor da Nature (consulte “Escape from the impact factor”, Nature Vol. 8, 2008) revelou que três quartos dos artigos publicados nessa prestigiada revista não contribuem para o cálculo do fator de impacto da revista. Na verdade, 80% dos artigos publicados na Nature em um determinado ano recebem menos de 20 citações nos dois anos seguintes.

#AvaliaçãoDaCiência #ProdutivismoAcadêmico

via El País

Disponível em: https://elpais.com/ciencia/2024-05-03/contra-la-perversion-del-sistema-de-evaluacion-de-la-ciencia.html

Avaliação da pesquisa: origens, evolução, resultados (2022) l No relatório, como…

[ad_1]

Avaliação da pesquisa: origens, evolução, resultados (2022) l No relatório, como Reino Unido, Austrália, Hong Kong e Nova Zelândia, Canadá e Alemanha tem abordado a avaliação da ciência e seus possíveis efeitos. Da Clarivate. #AvaliaçãoDaCiência clarivate.com/wp-content/upl… https://t.co/CN8wu9S8SB
[ad_2]

Curadoria: Projeto Informe-CI