Core Concepts
ヘイトスピーチ検出における注釈者の意見の不一致は、単なるノイズではなく、異なる人口集団間での意見の系統的な違いを反映している。
Stats
多数派投票は地面真理ラベルとして使用されていた。
モデルは個々の注釈者評価や対象グループメンバー評価を予測することで成果を上げた。
Quotes
"Majority vote aggregation obscures disagreement among annotators due to their lived experiences and other factors."
"Modeling individual annotator opinions helps to determine when the group targeted by a possibly-hateful statement disagrees with the majority."