Como identificar alucinações de IA como um bibliotecário de referência / LLRX

Como identificar alucinações de IA como um bibliotecário de referência / LLRX

O usuário que se deparou com 31 citações falsas me fez uma pergunta interessante: “Devo simplesmente parar de usar IA para pesquisas?”

Não. Isso seria como dizer que você deveria parar de usar a Wikipédia porque qualquer pessoa pode editá-la. Você só precisa entender com o que está lidando. A IA é excelente para ajudar você a descobrir que tipos de pesquisa existem, qual terminologia os pesquisadores utilizam e quais debates estão ocorrendo em uma determinada área. Por outro lado, ela é péssima em citar fontes específicas com precisão.

Use a IA para explorar. Use bibliotecas para verificar. Use o seu cérebro para avaliar.

#CitaçãoFantasma

via LLRX

Disponível em: https://www.llrx.com/2025/12/how-to-spot-ai-hallucinations-like-a-reference-librarian/

Citações fantasma: Um estudo empírico sobre referências inexistentes e não verificáveis ​​na literatura acadêmica / ASIS&T

Citações fantasma: Um estudo empírico sobre referências inexistentes e não verificáveis ​​na literatura acadêmica / ASIS&T

Este estudo aborda duas questões de pesquisa: É possível desenvolver uma ferramenta automatizada e auditável para detectar referências inexistentes ou não verificáveis ​​em manuscritos acadêmicos? Qual é a prevalência e a distribuição dessas referências não verificáveis ​​em artigos revisados ​​por pares na interseção entre inteligência artificial e educação, publicados a partir de 2023? Para responder a essas perguntas, desenvolvemos um fluxo de trabalho (*pipeline*) de verificação de referências que combina a extração de referências com a checagem de DOIs/URLs e o cruzamento de dados entre bases, aplicando-o a um *corpus* de 3.201 artigos revisados ​​por pares (publicados entre 2023 e 2025). Identificamos 69 artigos (2,16%) que contêm pelo menos uma referência não verificável segundo o nosso protocolo; tais referências podem induzir leitores ao erro e propagar-se por meio de cadeias de citação. Isso indica a necessidade de maior cautela ao utilizar, revisar e reutilizar bibliografias.

#CitaçãoFantasma

Disponível em: https://doi.org/10.1002/asi.70104

Aumento nas citações falsas é descoberto após auditoria de 2,5 milhões de artigos em ciências biomédicas / Nature

Aumento nas citações falsas é descoberto após auditoria de 2,5 milhões de artigos em ciências biomédicas / Nature

A análise de Topaz e seus colegas revelou que os artigos de revisão apresentaram uma taxa de falsificação de referências 57% maior do que outros tipos de artigo. Vinte e oito estudos clínicos e 79 revisões sistemáticas continham referências falsas. Topaz afirma que essas referências “acabarão se propagando para as diretrizes clínicas — essa é a parte mais assustadora para mim”.

Apenas 1,6% dos artigos sinalizados no estudo foram retratados ou corrigidos. Mas as retratações ocorreram por questões diferentes das citações falsas, e as correções não abordaram as referências sinalizadas.

#MásCondutasCientíficas #Retratação #CitaçãoFantasma

Disponível em: https://www.nature.com/articles/d41586-026-00748-w

Citações “zumbis” e “fantasmas” em IA – são diferentes e qual a sua origem? / SciELO

Citações “zumbis” e “fantasmas” em IA – são diferentes e qual a sua origem? / SciELO

Para diferenciar uma citação fantasma de uma citação zumbi , a principal chave reside na existência real do documento citado e em seu status dentro do registro acadêmico, ou seja, verificando as fontes.

Definição de Citação Fantasma (Referência Inexistente): Trata-se de uma referência a uma obra que simplesmente não existe. Ela é gerada por “alucinações” de inteligência artificial, erros tipográficos humanos, cópias descuidadas de bibliografias ou a fusão acidental de dois artigos reais em um único artigo fictício. Como identificá-la: buscando o original; não é possível localizar, acessar ou verificar o documento fonte em nenhuma base de dados confiável.

Definição de citação zumbi (artigo retratado): É uma citação de uma obra que de fato existe (é real e pode ser localizada), mas que foi retratada pela revista original devido a fraude, erros graves ou falta de integridade.

No entanto, o artigo sobrevive à sua “morte” acadêmica porque outros autores continuam a citá-lo, muitas vezes sem saber que o trabalho foi retratado. Para identificá-lo, é necessário pesquisar o original. O documento estará fisicamente disponível (em formato PDF ou HTML), mas deverá conter um aviso de “Retratado” no site da editora.

#Citação #MásCondutasCientífica #CitaçãoFantasma #CitaçãoZumbi

Disponível em: https://blog.scielo.org/es/2026/04/01/citas-zombis-y-fantasmas-en-la-ia-son-diferentes-y-como-se-originan/

Uma possível solução para citações fantasmas / The Distant Librarian

Uma possível solução para citações fantasmas / The Distant Librarian

Minha solução é pagar bibliotecários para sinalizarem esses casos. Alguém no Google (alguém sabe se tem alguém fazendo controle de qualidade nesse projeto?) teria que investigar e remover a citação fantasma. Vamos estipular US$ 10 por cada uma removida – o Google pode arcar com isso. Embora fosse um jogo de bater em toupeiras, certamente ajudaria!

Um dos links na postagem de Aaron leva a um projeto chamado LLM Citation Verifier , que talvez valha a pena conferir. Parece mais técnico do que a maioria das pessoas gostaria, mas eu adoro o fato de verificar citações produzidas por mestrados em direito (LLMs) em tempo real. Uma desvantagem é que parece funcionar apenas se houver um DOI, o que excluiria trabalhos mais antigos.

via The Distant Librarian

#Citação #CitaçãoFantasma

Disponível em: https://distlib.pival.me/one-possible-solution-to-ghost-citations/