Daily Arxiv

世界中で発行される人工知能関連の論文をまとめるページです。
このページはGoogle Geminiを活用して要約し、非営利で運営しています。
論文の著作権は著者および関連機関にあり、共有する際は出典を明記してください。

Jina-reranker-v3: Last but Not Late Interaction for Listwise Document Reranking

Created by
  • Haebom

作者

Feng Wang, Yuqing Li, Han Xiao

概要

Jina-reranker-v3は0.6Bパラメータの多言語listwise rerankerで、「last but not late」相互作用を導入しました。 ColBERTなどのレイト相互作用モデルとは異なり、クエリとすべての候補文書を同じコンテキストウィンドウに因果的アテンションを適用して、各ドキュメントの最終トークンからコンテキスト埋め込みを抽出する前に豊富な対話を可能にします。このモデルは、同等の性能を持つ他のモデルよりはるかに小さいながらも、61.94 nDCG@10で最先端のBEIR性能を達成しました。

Takeaways、Limitations

"Last but not late" 対話方式により、クエリとドキュメント間の豊富な対話を可能にします。
同じ性能の他のモデルよりはるかに小さいサイズ(0.6Bパラメータ)で効率を向上させます。
BEIRベンチマークでSOTA(State-of-the-Art)性能を達成。
論文では、Limitationsは明示的に言及されていません。 (抽象コンテンツだけでは不明)
👍