HalluCitation Matters: Revelando o Impacto de Referências Alucinadas com 300 Artigos Alucinados nas Conferências da ACL
HalluCitation Matters: Revealing the Impact of Hallucinated References with 300 Hallucinated Papers in ACL Conferences
January 26, 2026
Autores: Yusuke Sakai, Hidetaka Kamigaito, Taro Watanabe
cs.AI
Resumo
Recentemente, temos observado frequentemente citações ou referências alucinadas que não correspondem a nenhum trabalho existente em artigos em processo de revisão, pré-publicações ou artigos publicados. Tais citações alucinadas representam uma séria preocupação para a confiabilidade científica. Quando aparecem em artigos aceitos, podem também afetar negativamente a credibilidade das conferências. Neste estudo, referimo-nos a citações alucinadas como "HalluCitation" e investigamos sistematicamente sua prevalência e impacto. Analisamos todos os artigos publicados na ACL, NAACL e EMNLP em 2024 e 2025, incluindo artigos da conferência principal, da Findings e de workshops. Nossa análise revela que quase 300 artigos contêm pelo menos uma HalluCitation, a maioria dos quais foi publicada em 2025. Notavelmente, metade desses artigos foi identificada na EMNLP 2025, a conferência mais recente, indicando que esse problema está aumentando rapidamente. Além disso, mais de 100 desses artigos foram aceitos como artigos da conferência principal e da Findings na EMNLP 2025, afetando a credibilidade.
English
Recently, we have often observed hallucinated citations or references that do not correspond to any existing work in papers under review, preprints, or published papers. Such hallucinated citations pose a serious concern to scientific reliability. When they appear in accepted papers, they may also negatively affect the credibility of conferences. In this study, we refer to hallucinated citations as "HalluCitation" and systematically investigate their prevalence and impact. We analyze all papers published at ACL, NAACL, and EMNLP in 2024 and 2025, including main conference, Findings, and workshop papers. Our analysis reveals that nearly 300 papers contain at least one HalluCitation, most of which were published in 2025. Notably, half of these papers were identified at EMNLP 2025, the most recent conference, indicating that this issue is rapidly increasing. Moreover, more than 100 such papers were accepted as main conference and Findings papers at EMNLP 2025, affecting the credibility.