Kernkonzepte
自動事実確認システムの信頼性と現実性を高めるために、リークされた情報や信頼できない情報を検出し除去する包括的なアプローチを提案する。
Zusammenfassung
本研究では、自動事実確認(AFC)システムの信頼性と現実性を高めるために、リークされた情報や信頼できない情報を検出し除去する包括的なアプローチを提案している。
まず、「信頼できる、信頼できない、リークされた」(CREDULE)データセットを構築した。このデータセットには、信頼できる、信頼できない、リークされた(事実確認済み)の3つのクラスの記事が含まれている。
次に、EVVER-Net(Evidence Verification Network)を開発した。EVVER-Netは、短いテキスト(タイトル)と長いテキスト(全文)の両方を処理し、ドメインの信頼性スコアも活用して、リークされた情報や信頼できない情報を検出することができる。実験の結果、EVVER-Netは最大94.4%の高い精度を達成した。
さらに、EVVER-Netを広く使用されているデータセット(LIAR-PLUS、MOCHEG、FACTIFY、NewsCLIPpings+、VERITE)に適用し、これらのデータセットに含まれる証拠の中にリークされた情報や信頼できない情報が多数存在することを明らかにした。これは、AFC システムの信頼性と現実性を損なう重大な問題である。
本研究の成果は、AFC システムの証拠収集プロセスにおける証拠検証と濾過の重要性を示唆している。EVVER-Netのような手法を導入することで、より堅牢で現実的な AFC システムの構築が可能になると考えられる。
Statistiken
「オバマ大統領は2011年にイラクからの移民を6か月間禁止した」
「ニューヨークタイムズ: オバマ大統領は退任10日後に移民禁止に反対声明」
「NBCニュース: オバマ大統領がトランプの移民政策に反対し、抗議を支持」
「Snopes: オバマ大統領は2011年にムスリムの入国を禁止したか?」
「The Gateway Pundit: オバマ大統領は2011年にイラク難民を6か月間禁止した - リベラルは何も言わなかった」
Zitate
「政治的な党派は道徳的な目的の推進に基づいていなければならない。そうでなければ、それは権力を奪取する陰謀にすぎない。」
「ほとんどすべての人が仕事に時間を費やし、家族と過ごす時間が減り、給料が減少し、ガソリン代や食料品代が増加している」