機械翻訳評価

アフリカ言語のための高品質な機械翻訳評価メトリックの開発

本研究では、リソース不足のアフリカ言語に対するCOMETメトリックの強化に取り組む。非専門家向けの簡略化されたMQMアノテーションガイドラインを作成し、13の言語を対象とした機械翻訳評価データセットAFRIMTEを作成した。さらに、リソース豊富な言語からの転移学習と、アフリカ言語に特化したマルチリンガルプリトレーンモデルを活用して、アフリカ言語の機械翻訳評価(AFRICOMET)とリファレンスフリーの品質推定(AFRICOMET-QE)のベンチマークシステムを構築した。

アフリカ言語のための高品質な機械翻訳評価メトリックの開発

大規模言語モデルを活用した参照なし機械翻訳評価: 英語とインド言語への適用

文脈を利用した機械翻訳の参照なし評価 - スライディングドキュメントウィンドウアプローチ

信頼性のある人間評価を効率的に処理・分析する