収益説明会 transcript におけるQAの主観性を測定する - 6つの次元による特徴分析に基づく SubjECTive-QA

本稿では、企業幹部の発言の質を測定するために、新たに作成された Earnings Call Transcripts (ECT) の質問応答データセット「SubjECTive-QA」を紹介し、このデータセットを用いて、LLMを含む様々な自然言語処理モデルが、回答の主観的な側面をどの程度捉えられるかを評価しています。