HalluCitation Matters: ACL会議における300件の幻覚的論文から見る幻覚的参考文献の影響の解明

HalluCitation Matters: Revealing the Impact of Hallucinated References with 300 Hallucinated Papers in ACL Conferences

January 26, 2026

著者: Yusuke Sakai, Hidetaka Kamigaito, Taro Watanabe

cs.AI

要旨

近年、査読中の論文、プレプリント、あるいは既発表の論文において、実在する研究に対応しない虚偽の引用や参考文献が頻繁に観察されるようになっている。このような虚偽の引用は科学の信頼性に対する深刻な懸念材料である。採録論文に出現した場合、学会の信頼性にも悪影響を及ぼしうる。本研究では、こうした虚偽の引用を「HalluCitation」と呼び、その蔓延状況と影響を体系的に調査する。ACL、NAACL、EMNLPにおいて2024年と2025年に発表された全ての論文（本会議、Findings、ワークショップ論文を含む）を分析した。その結果、約300本の論文に少なくとも1件のHalluCitationが含まれており、その大半が2025年に発表されたことが明らかになった。特に、最も最近の学会であるEMNLP 2025ではこれらの論文の半数が確認され、問題が急増している実態が示された。さらに、EMNLP 2025では本会議及びFindings採録論文100本以上が該当し、信頼性に影響を及ぼしている。

English

Recently, we have often observed hallucinated citations or references that do not correspond to any existing work in papers under review, preprints, or published papers. Such hallucinated citations pose a serious concern to scientific reliability. When they appear in accepted papers, they may also negatively affect the credibility of conferences. In this study, we refer to hallucinated citations as "HalluCitation" and systematically investigate their prevalence and impact. We analyze all papers published at ACL, NAACL, and EMNLP in 2024 and 2025, including main conference, Findings, and workshop papers. Our analysis reveals that nearly 300 papers contain at least one HalluCitation, most of which were published in 2025. Notably, half of these papers were identified at EMNLP 2025, the most recent conference, indicating that this issue is rapidly increasing. Moreover, more than 100 such papers were accepted as main conference and Findings papers at EMNLP 2025, affecting the credibility.