Interpretando indicadores bibliométricos como os “exames de sangue” dos sistemas de pesquisa / MDPI

Interpretando indicadores bibliométricos como os “exames de sangue” dos sistemas de pesquisa / MDPI

Cada técnica bibliométrica — que varia desde contagens de publicações e citações até análise de patentes, altmetria e modelagem de tópicos — está associada a uma função diagnóstica, como triagem, monitoramento ou detecção precoce de riscos. Ao conectar princípios estabelecidos de métricas responsáveis ​​(DORA, Manifesto de Leiden, Metric Tide, CoARA) com a profissionalização dos avaliadores, o ensaio situa a metáfora dentro dos debates atuais sobre alfabetização bibliométrica e a interpretação ética dos indicadores. Em vez de prescrever métricas ou regras de decisão, a contribuição convida à reflexão sobre como os avaliadores podem interpretar os sinais bibliométricos de forma diagnóstica — como evidência contextual para o aprendizado institucional, a tomada de decisões estratégicas e o cultivo de sistemas de pesquisa saudáveis ​​e adaptativos. Em consonância com o formato de ensaio, esta contribuição não propõe uma nova metodologia de avaliação nem validação empírica. Em vez disso, apresenta uma estrutura heurística e comunicativa destinada a enfatizar a interpretação holística, contextual e profissionalmente embasada de indicadores quantitativos na avaliação da atividade de pesquisa.

#Bibliometria #AvaliaçãoDaCiência

Disponível em: https://www.mdpi.com/2304-6775/14/1/9

A maioria dos pesquisadores receberia mais reconhecimento se fosse avaliada por métricas de nível de artigo do que por métricas de nível de periódico / Plos Biology

A maioria dos pesquisadores receberia mais reconhecimento se fosse avaliada por métricas de nível de artigo do que por métricas de nível de periódico / Plos Biology

Constatamos que o número de artigos citados, pelo menos tão bem quanto os publicados em periódicos de alto fator de impacto, excede em muito o número de artigos publicados nesses mesmos periódicos. No nível do pesquisador, esse fenômeno se estende a todos os grupos de cientistas, independentemente de gênero, raça ou estágio de carreira. Também constatamos que aproximadamente metade dos pesquisadores nunca publica em um periódico com fator de impacto acima de 15, o que, sob os regimes de avaliação de periódicos, pode excluí-los de oportunidades. Muitos desses pesquisadores publicam trabalhos igualmente influentes; no entanto, isso levanta a possibilidade de que as métricas tradicionalmente escolhidas para periódicos, que são rotineiramente consideradas em normas, políticas ou leis de tomada de decisão, reconheçam apenas 10% a 20% desses trabalhos influentes.

#AvaliaçãoDaCiência #IndicadoresBibliométricos

Disponível em: https://doi.org/10.1371/journal.pbio.3003532

Como avaliar cientistas? / Folha de S. Paulo

Como avaliar cientistas? / Folha de S. Paulo

A discussão não é nova, mas a Dora foi um catalisador para um movimento maior de reforma da avaliação de ciência, que pede o uso responsável dessas métricas, envolve organizações globais como a Coalizão para o Avanço da Avaliação da Pesquisa (CoARA) e luta por reformas mais abrangentes do sistema universitário (por exemplo, nos Países Baixos). A própria Dora, para além da declaração original, tornou-se, em 2018, uma organização que promove a reforma do sistema de avaliação –com a qual o Serrapilheira colabora como parte de um dos seus grupos de discussão de financiadores.

Mesmo que a passos pequenos, o cenário vem mudando. A avaliação dos programas de pós-graduação feita pela Capes, por exemplo, agora poderá considerar não só as métricas que dizem respeito aos periódicos, mas também critérios qualitativos. Esperamos que mais instituições que fomentam ou fazem pesquisa se juntem a nós na reflexão sobre as práticas de avaliação da pesquisa.

#AvaliaçãoDaCiência #Cientistas #DORA

via Folha de S. Paulo

Disponível em: https://www1.folha.uol.com.br/blogs/ciencia-fundamental/2025/12/como-avaliar-cientistas.shtml

A Declaração de São Francisco sobre Avaliação de Pesquisa / ABC

A Declaração de São Francisco sobre Avaliação de Pesquisa / ABC

A principal tensão nessa área diz respeito ao uso da “cientometria”: em que medida a avaliação da pesquisa pode estar baseada em métricas quantitativas como o número de citações dos artigos científicos ou o fator de impacto dos periódicos em que são publicados?

A posição da agência europeia é cristalina: tal como a NSF, o ERC aderiu formalmente à Dora (Declaração de São Francisco sobre Avaliação de Pesquisa), a qual bane o uso de tais métricas, apontando que “o conteúdo científico de um artigo é muito mais importante do que as métricas da publicação ou o nome do respectivo periódico científico”. Assim, seus julgamentos estão baseados exclusivamente em avaliações qualitativas (subjetivas!) do conteúdo de cada projeto realizadas por especialistas renomados. Foi assim que o ERC construiu um padrão de excelência respeitadíssimo, um dos raros consensos no complexo cenário europeu.

#AvaliaçãoDaCiência #DORA #DeclaraçãoDeSãoFranscisco

via ABC

Disponível em: https://www.abc.org.br/2025/12/03/a-declaracao-de-sao-francisco-sobre-avaliacao-de-pesquisa/

Recomendações para mitigar as desigualdades de gênero persistentes na avaliação das carreiras académicas / Clacso

Recomendações para mitigar as desigualdades de gênero persistentes na avaliação das carreiras acadêmicas / Clacso

Revisão dos critérios de avaliação e do tipo de informação utilizada

– Incorporar informações aos critérios de avaliação que permitam a justificativa qualitativa de interrupções ou adiamentos devido à sobrecarga de cuidadores e aos papéis de gênero, por exemplo, incorporando currículos narrativos.
– Ampliar as informações disponíveis sobre as características sociodemográficas dos candidatos para avaliar a interação entre os papéis de gênero e as carreiras acadêmicas ao longo da vida dos pesquisadores.
– Valorizar e recompensar diversas formas de divulgação e atividades científicas, além da produtividade medida por publicações revisadas por pares, e considerar os contextos pessoais e familiares nos níveis de produção, entre outros.

#MulheresNaCiência #AvaliaçãoDaCiência #DesigualdadeDeGênero

via Clacso

Disponível em: https://biblioteca-repositorio.clacso.edu.ar/handle/CLACSO/251720

Além das citações: a semantometria e o valor do texto completo para avaliação de publicações científicas / CI Express

Além das citações: a semantometria e o valor do texto completo para avaliação de publicações científicas

A semantometria incluiu a análise da semântica textual para avaliar a contribuição das publicações em redes de citações. Utilizando técnicas de mineração de texto e dados, mede a distância semântica entre as publicações citadas e as que citam determinado artigo. Essa abordagem é mais do que a simples contagem de citações, pois considera aspectos qualitativos e a profundidade das relações semânticas.

#Semantometria #AvaliaçãoDaCiência

via CI Express

Disponível em: https://www.cienciadainformacaoexpress.com/post/al%C3%A9m-das-cita%C3%A7%C3%B5es-a-semantometria-e-o-valor-do-texto-completo-para-avalia%C3%A7%C3%A3o-de-publica%C3%A7%C3%B5es-cient%C3%ADf

Orientação sobre o uso responsável de indicadores quantitativos na avaliação de pesquisas

Orientação sobre o uso responsável de indicadores quantitativos na avaliação de pesquisas

Este documento fornece orientação sobre o uso de vários indicadores (às vezes chamados de métricas) usados ​​na avaliação de pesquisas: o Fator de Impacto de Periódicos e outras medidas de periódicos, contagens de citações, índice h, indicadores de citação normalizados em campo e altmetria. Cinco princípios orientam o uso dessas métricas: seja claro, seja transparente, seja específico, seja contextual e seja justo.

#IndicadoresBibliométricos #AvaliaçãoDaCiência #DORA

Disponível em: https://zenodo.org/records/10979644

Contra a perversão do sistema de avaliação científica

Contra a perversão do sistema de avaliação científica

Um estudo realizado por Philip Campbell, então editor da Nature (consulte “Escape from the impact factor”, Nature Vol. 8, 2008) revelou que três quartos dos artigos publicados nessa prestigiada revista não contribuem para o cálculo do fator de impacto da revista. Na verdade, 80% dos artigos publicados na Nature em um determinado ano recebem menos de 20 citações nos dois anos seguintes.

#AvaliaçãoDaCiência #ProdutivismoAcadêmico

via El País

Disponível em: https://elpais.com/ciencia/2024-05-03/contra-la-perversion-del-sistema-de-evaluacion-de-la-ciencia.html

Por uma mudança na avaliação das pesquisas científicas: “não jogue a criança com…

[ad_1]

[ad_2]

Fonte : Projeto Informe-CI

Voltar ao topo