アフリカ言語のための高品質な機械翻訳評価メトリックの開発

本研究では、リソース不足のアフリカ言語に対するCOMETメトリックの強化に取り組む。非専門家向けの簡略化されたMQMアノテーションガイドラインを作成し、13の言語を対象とした機械翻訳評価データセットAFRIMTEを作成した。さらに、リソース豊富な言語からの転移学習と、アフリカ言語に特化したマルチリンガルプリトレーンモデルを活用して、アフリカ言語の機械翻訳評価(AFRICOMET)とリファレンスフリーの品質推定(AFRICOMET-QE)のベンチマークシステムを構築した。