最近の研究では、文書ランキングにおけるジェンダーバイアスは、各ランク付けされた文書の非偏りスコアの集計に基づくNFaiRRメトリックで評価されています。しかし、この視点は個々の文書がバイアスを持つ可能性がある一方で、全体としてバランスが取れているかもしれないランク付けされたリスト全体でバイアスを測定することに制限があります。この問題に対処するために、我々は新しい指標TExFAIR(用語露出ベースの公平性)を提案しています。これは、AWRF(注目重み付きランキング公平性)フレームワークへの2つの新しい拡張に基づいています。TExFAIRは、ランク付けされたリスト内のグループの用語ベース表現に基づいて公平性を評価します。
我々はTExFAIRを使用してジェンダーバイアスを測定するタスクでTExFAIRとNFaiRRの関係を研究しました。実験結果から、TExFAIRとNFaiRRとの間に強い相関がないことが示されました。これは、TExFAIRがNFaiRRよりも異なる公平性次元を測定していることを示しています。
In un'altra lingua
dal contenuto originale
arxiv.org
Approfondimenti chiave tratti da
by Amin Abolgha... alle arxiv.org 03-12-2024
https://arxiv.org/pdf/2403.05975.pdfDomande più approfondite