Tag: AvaliaçãoPorPares

A avaliação por pares faz parte da construção da ciência / Encontros Bibli

Por em Informe-CI Tag

A avaliação por pares faz parte da construção da ciência / Encontros Bibli

Por trás de cada artigo publicado em revista com avaliação por pares há alguém que não aparece na autoria. O avaliador lê com atenção, aponta o que não se sustenta, sugere caminhos e devolve ao autor um trabalho melhor do que chegou. Tennant e Ross-Hellauer (2020) descrevem a avaliação por pares como parte do núcleo dos sistemas de produção de conhecimento, o mecanismo que confere legitimidade à pesquisa e distribui prestígio acadêmico. A ciência de uma área se faz, em boa parte, nos pareceres que seus pesquisadores aceitam escrever.

Quando um convite fica sem resposta, do outro lado há um colega esperando. Às vezes por meses, para saber o que outros pesquisadores acharam de um trabalho que levou anos para ficar pronto. Essa espera atrasa a publicação e, com ela, uma defesa, uma progressão na carreira, a avaliação de um programa de pós-graduação.

#AvaliaçãoPorPares

Disponível em: https://periodicos.ufsc.br/index.php/eb/announcement/view/2248

Viés da IA ​​generativa contra a novidade científica / Scientometrics

Por em Informe-CI Tag , ,

Viés da IA ​​generativa contra a novidade científica: um alerta a partir de uma avaliação de propostas de pesquisa com amostra reduzida / Scientometrics

Utilizando o GPT-4o, geramos decisões de financiamento baseadas em IA por meio de comparações pareadas dentro de cada área, agregadas em classificações por área, simulando um processo de seleção competitivo. As decisões de financiamento baseadas em IA coincidiram com as decisões humanas em 60% dos casos. A regressão logística condicional com efeitos fixos por área mostra que, entre as quatro dimensões de avaliação, a novidade é a única significativamente associada à discordância. Análises logit condicionais e multinomiais mostram, ainda, que a novidade prediz sistematicamente a direção da discordância. Propostas avaliadas como mais inovadoras por revisores humanos têm uma probabilidade substancialmente maior de serem financiadas por humanos e não pelo LLM. O padrão observado é consistente com uma tendência conservadora na avaliação baseada em LLMs, refletindo potencialmente a lógica estatística de previsão do próximo token (unidade de texto) treinada com base em produções científicas anteriores.

#Financiamento #LLMs #AvaliaçãoPorPares

Disponível em: https://link.springer.com/article/10.1007/s11192-026-05792-x

Projeto OpenEval: Avaliação transparente de revisão por pares com suporte a LLMs / OpenEval

Por em Informe-CI Tag , ,

Projeto OpenEval: Avaliação transparente de revisão por pares com suporte a LLMs / OpenEval

O projeto OpenEval oferece uma avaliação transparente e sistemática do desempenho de grandes modelos de linguagem (LLMs) na revisão por pares científica. Comparamos pareceres gerados por LLMs com revisões tradicionais por pares para avaliar sua precisão, consistência e confiabilidade na identificação de afirmações e na avaliação de evidências científicas. Explore nosso conjunto de dados de manuscritos abaixo. Clique em qualquer artigo para visualizar comparações detalhadas, afirmação por afirmação, entre as avaliações dos LLMs e dos revisores humanos. Todos os artigos são publicados sob a licença CC-BY e estão disponíveis em sua forma original no site da eLife. Os artigos apresentados aqui foram modificados para destacar as afirmações neles contidas.

#AvaliaçãoPorPares #OpenEval #IA

via OpenEval

Disponível em: https://openevalproject.com/

Editor de revista de neurociência renuncia devido a preocupações com automação / The Transmitter

Por em Informe-CI Tag , ,

Editor de revista de neurociência renuncia devido a preocupações com automação / The Transmitter

Um editor associado da Frontiers in Systems Neuroscience renunciou ao cargo em protesto contra o sistema de inteligência artificial (IA) da editora, argumentando que seu uso indevido está comprometendo a integridade acadêmica da revista.

Michael Okun , professor associado de neurociência da Universidade de Nottingham, anunciou sua renúncia nas redes sociais em 10 de junho, depois que funcionários da revista científica lhe disseram que não podiam desativar as ferramentas de inteligência artificial que encontram automaticamente potenciais revisores por pares.

Os recursos fazem parte do sistema Artificial Intelligence Research Assistant (AIRA) da editora, que a Frontiers lançou há alguns anos com o objetivo de auxiliar os editores na realização da revisão por pares, entre outros motivos .

#AvaliaçãoPorPares #Editoração #IA

via The Transmitter

Disponível em: https://www.thetransmitter.org/publishing/exclusive-neuroscience-journal-editor-resigns-over-automation-concerns/

Situação da revisão por pares em 2024

Por em Informe-CI Tag

Situação da revisão por pares em 2024

O relatório destaca como a pandemia de Covid-19, o aumento de publicações científicas e o surgimento da IA ​​generativa influenciaram a revisão por pares, bem como aborda o aumento das retratações e a comercialização de má conduta na investigação.

#AvaliaçãoPorPares

Disponível em: https://ioppublishing.org/state-of-peer-review-2024/

Questionários estruturados podem tornar a avaliação por pares mais eficiente

Por em Informe-CI Tag

Questionários estruturados podem tornar a avaliação por pares mais eficiente

O questionário padrão proposto3 inclui apenas oito questões, duas para cada seção do artigo, introdução, métodos, resultados e discussão, que podem ser adequadas a periódicos de qualquer área do conhecimento e está disponível on-line no website da European Association of Science Editors, associação da qual os autores do estudo, Malički e Mehmani são, respectivamente, presidente e membro do Comitê de Avaliação por Pares. Cabe notar que os autores recomendam respostas múltipla-escolha, para tornar o processo mais célere e facilitar a leitura pelos autores.

#AvaliaçãoPorPares

via Scielo em Perspectiva

Disponível em: https://blog.scielo.org/blog/2024/05/15/questionarios-estruturados-podem-tornar-a-avaliacao-por-pares-mais-eficiente/

Periódicos científicos de acesso aberto do Brasil e da Espanha: modelo terminoló…

Por em Informe-CI Tag , , ,

[ad_1]

Periódicos científicos de acesso aberto do Brasil e da Espanha: modelo terminológico e padrão das equipes editoriais e científicas e da avaliação por pares l #Periódicos #AcessoAberto #AvaliaçãoPorPares #GestãoEditorial repositorio.ufmg.br/handle/1843/49… https://t.co/GiEKZcSUAc
[ad_2]

Acesse o item em: https://repositorio.ufmg.br/handle/1843/49002

Lançada nova edição da Revista Interamericana de Bibliotecología, da Universidad…

Por em Informe-CI Tag , , , , ,

[ad_1]

[ad_2]

Source by Pedro Andretta