Questioni di HalluCitation: Rivelare l'Impatto dei Riferimenti Allucinati con 300 Articoli Allucinati nelle Conferenze ACL
HalluCitation Matters: Revealing the Impact of Hallucinated References with 300 Hallucinated Papers in ACL Conferences
January 26, 2026
Autori: Yusuke Sakai, Hidetaka Kamigaito, Taro Watanabe
cs.AI
Abstract
Recentemente, abbiamo spesso osservato citazioni o riferimenti allucinati che non corrispondono a lavori esistenti in articoli in fase di revisione, preprint o articoli pubblicati. Tali citazioni allucinate pongono un serio problema per l'affidabilità scientifica. Quando compaiono in articoli accettati, possono anche influire negativamente sulla credibilità delle conferenze. In questo studio, ci riferiamo alle citazioni allucinate come "HalluCitation" e indaghiamo sistematicamente la loro prevalenza e il loro impatto. Analizziamo tutti gli articoli pubblicati ad ACL, NAACL ed EMNLP nel 2024 e nel 2025, inclusi gli articoli della conferenza principale, di Findings e dei workshop. La nostra analisi rivela che quasi 300 articoli contengono almeno una HalluCitation, la maggior parte dei quali è stata pubblicata nel 2025. Notevolmente, la metà di questi articoli è stata identificata all'EMNLP 2025, la conferenza più recente, indicando che il problema è in rapida crescita. Inoltre, più di 100 di questi articoli sono stati accettati come contributi per la conferenza principale e per Findings all'EMNLP 2025, compromettendone la credibilità.
English
Recently, we have often observed hallucinated citations or references that do not correspond to any existing work in papers under review, preprints, or published papers. Such hallucinated citations pose a serious concern to scientific reliability. When they appear in accepted papers, they may also negatively affect the credibility of conferences. In this study, we refer to hallucinated citations as "HalluCitation" and systematically investigate their prevalence and impact. We analyze all papers published at ACL, NAACL, and EMNLP in 2024 and 2025, including main conference, Findings, and workshop papers. Our analysis reveals that nearly 300 papers contain at least one HalluCitation, most of which were published in 2025. Notably, half of these papers were identified at EMNLP 2025, the most recent conference, indicating that this issue is rapidly increasing. Moreover, more than 100 such papers were accepted as main conference and Findings papers at EMNLP 2025, affecting the credibility.