報酬マージンがプリファレンスモデルのパフォーマンスに与える影響の理解に向けて

報酬マージンを報酬モデルの訓練プロセスに組み込むことで、人間の嗜好をより正確に捉えることができる。