Daily Arxiv

世界中で発行される人工知能関連の論文をまとめるページです。
このページはGoogle Geminiを活用して要約し、非営利で運営しています。
論文の著作権は著者および関連機関にあり、共有する際は出典を明記してください。

CoCoA: Collaborative Chain-of-Agents for Parametric-Retrieved Knowledge Synergy

Created by
  • Haebom

作者

Yi Jiang, Sendong Zhao, Jianbo Li, Haochun Wang, Lizhe Zhang, Yan Liu, Bing Qin

Collaborative Chain-of-Agents (CoCoA)

概要

Retrieval-Augmented Generation(RAG)モデルのLimitationsを克服するために、モデルの固有の知識と外部から検索された知識との相乗効果を向上させることを目的としたCollaborative Chain-of-Agents(CoCoA)フレームワークを提案します。 CoCoAはCoCoA-zeroと呼ばれるマルチエージェントRAGフレームワークに基づいており、条件付き知識の導出と回答の推論を行います。 CoCoAは、CoCoA-zeroから拡張されたマルチエージェント推論軌跡を合成してLLMを微調整する長期チェーントレーニング戦略を利用しています。これにより、モデルが固有の知識と検索された知識を明示的に統合し、共同で活用できるようになります。

Takeaways、Limitations

Takeaways:
LLMの知識集約的作業、特にオープンドメインQA及びマルチホップQAにおいて、従来のRAG方法より優れた性能を示した。
モデルの固有の知識と検索された知識との相乗効果を向上させることで、RAG法の効率を高めました。
CoCoA-zeroとCoCoAを通じて、マルチエージェントRAGフレームワークと長期チェーントレーニング戦略を効果的に組み合わせました。
Limitations:
具体的なLimitationsは論文に記載されていません。
👍