言語モデルの微調整におけるデータ多様性のスケーリング

大規模な言語モデル（LLMs）を人間の好みと一致させるために、より多くの応答を拡張することが、プロンプトを増やすよりも効果的である。