本論文は、自然言語埋め込みプログラム(NLEP)と呼ばれる新しい枠組みを提案している。NLEPは、大規模言語モデル(LLM)の自然言語理解能力とプログラミング言語の記号的推論能力を組み合わせることで、数学・シンボリック推論、自然言語理解、命令実行などの幅広いタスクを解決することができる。
具体的には、NLEPはLLMにタスクに関する自然言語のプロンプトを与え、LLMにPythonプログラムを生成させる。生成されたプログラムは、自然言語表現を含む構造化データ上で定義された関数を実行し、その出力を自然言語で返す。
実験の結果、NLEPは数学・シンボリック推論、質問応答、命令実行、テキスト分類などの幅広いタスクで強力な性能を発揮することが示された。特に、NLEPは従来の言語ベースの推論手法や、プログラム合成と組み合わせた手法と比べて、より汎用的で効率的な推論を実現できることが確認された。
To Another Language
from source content
arxiv.org
Key Insights Distilled From
by Tianhua Zhan... at arxiv.org 04-01-2024
https://arxiv.org/pdf/2309.10814.pdfDeeper Inquiries