Demystifying Chains, Trees, and Graphs of Thoughts
Created by
Haebom
作者
Maciej Besta, Florim Memedi, Zhenyu Zhang, Robert Gerstenberger, Guangyuan Piao, Nils Blach, Piotr Nyczyk, Marcin Copik, Grzegorz Kwa sniewski, J urgen M uller, Lukas Gianinazzi, Ales Kubicek, Hubert Niewiadomski,
概要
この論文では、構造化されたプロンプトエンジニアリングを介して大規模言語モデル(LLM)の推論能力を向上させる方法を研究します。 Chain-of-Thought、Tree of Thoughts、Graph of Thoughtsなどの構造化されたプロンプト設計を分析し、効果的かつ効率的なLLM推論スキームのための一般的な青写真を提示します。プロンプト実行パイプラインの詳細な分析によって概念を明確に定義し、構造ベースのLLM推論スキームの最初の分類スキームを構築します。ここで使用される構造を「推論トポロジー」と定義し、それらの表現方式、アルゴリズム、パフォーマンス、コストパターンなどを分析して既存のプロンプト方式を比較します。さらに、理論的基盤、知識ベースとの関係、および関連する研究課題を提示し、今後のプロンプトエンジニアリング技術の発展に貢献することを目指しています。