大規模言語モデルにおけるコンテキスト圧縮のためのインコンテキストオートエンコーダー

大規模言語モデルを活用して長いコンテキストを効果的に圧縮する新しい手法であるICAEが提案されました。