本論文は、多エージェントディベートにおけるトークンコストの問題に取り組んでいる。多エージェントディベートは論理的推論能力を高める有効な手法であるが、エージェントの数や論争ラウンドの増加に伴いトークンコストが急激に上昇するという課題がある。
提案手法のGroupDebateでは、全エージェントをいくつかのグループに分割し、グループ内でディベートを行い、その結果をグループ間で共有するという方式を採用している。これにより、トークンコストを最大51.7%削減しつつ、精度を最大25%向上させることができる。
具体的な手順は以下の通り:
理論的な分析からも、提案手法のGroupDebateはトークンコストの複雑度を大幅に改善できることが示されている。
実験結果では、Arithmetic、GSM8K、MMLU、MATHの4つのデータセットにおいて、トークンコストを最大51.7%削減しつつ、精度を最大25%向上させることができた。また、単一エージェントの手法であるCoT、Reflection、CoT-SCと比較しても、精度の大幅な向上が確認された。
לשפה אחרת
מתוכן המקור
arxiv.org
תובנות מפתח מזוקקות מ:
by Tongxuan Liu... ב- arxiv.org 09-24-2024
https://arxiv.org/pdf/2409.14051.pdfשאלות מעמיקות