ChatPaper.aiChatPaper

jina-reranker-v3: Laat maar niet te laat Interactie voor Documentherrangschikking

jina-reranker-v3: Last but Not Late Interaction for Document Reranking

September 29, 2025
Auteurs: Feng Wang, Yuqing Li, Han Xiao
cs.AI

Samenvatting

jina-reranker-v3 is een 0,6B parameter multitalig documentherordenaar die een nieuwe 'last but not late'-interactie introduceert. In tegenstelling tot late interactiemodellen zoals ColBERT, die afzonderlijke codering uitvoeren gevolgd door multi-vector matching, voert onze aanpak causale zelf-attentie uit tussen query en documenten binnen hetzelfde contextvenster, wat rijke kruisdocumentinteracties mogelijk maakt voordat contextuele embeddings worden geëxtraheerd uit de laatste token van elk document. Deze compacte architectuur behaalt state-of-the-art BEIR-prestaties met 61,94 nDCG@10 terwijl het tien keer kleiner is dan generatieve listwise herordenaars.
English
jina-reranker-v3 is a 0.6B parameter multilingual document reranker that introduces a novel last but not late interaction. Unlike late interaction models such as ColBERT that perform separate encoding followed by multi-vector matching, our approach conducts causal self-attention between query and documents within the same context window, enabling rich cross-document interactions before extracting contextual embeddings from the last token of each document. This compact architecture achieves state-of-the-art BEIR performance with 61.94 nDCG@10 while being ten times smaller than generative listwise rerankers.
PDF64October 1, 2025