Daily Arxiv

世界中で発行される人工知能関連の論文をまとめるページです。
このページはGoogle Geminiを活用して要約し、非営利で運営しています。
論文の著作権は著者および関連機関にあり、共有する際は出典を明記してください。

Hallucination Detection in LLMs with Topological Divergence on Attention Graphs

Created by
  • Haebom

作者

Alexandra Bazarova, Aleksandr Yugay, Andrey Shulga, Alina Ermilova, Andrei Volodichev, Konstantin Polev, Julia Belikova, Rauf Parchiev, Dmitry Simakov, Maxim Savchenko, Andrey Savchenko, Serguei Barannikov, Alexey Zaytsev

概要

大規模言語モデル(LLM)における事実誤差発生問題であるサイケデリック現象を解決するために,RAG環境における注意行列に導かれたグラフの位相学的発散を測定するTOPO(TOpology-based HAllucination detector)を提案する。プロンプトと応答サブグラフ間の位相学的発散を分析し、特定の注意ヘッドでより高い発散値が幻覚出力と相関関係があることを発見しました。質問の回答や要約作業を含む幅広い実験を通じて、TOHAは最小限の注釈データと計算リソースを使用して複数のベンチマークで最先端または競争力のある結果を達成しました。注意行列の位相構造解析はLLMの事実的信頼性を効率的かつ強力に表現できることを示唆した。

Takeaways、Limitations

Takeaways:
注意行列の位相構造を分析することで、LLMの幻覚現象を効果的に検出できます。
最小限の注釈データと計算リソースを使用しながら、優れたパフォーマンスを示します。
質問の回答と要約作業で、State-of-the-artまたは競争力のある結果を達成しました。
Limitations:
本論文の具体的なLimitationsは論文に記載されていない。
👍