Entity6K: A Comprehensive Dataset for Real-World Entity Recognition

Основные понятия

Entity6K introduces a diverse dataset for real-world entity recognition, addressing the lack of suitable evaluation datasets in open-domain settings.

Аннотация

Abstract:

• Entity6K dataset introduced for real-world entity recognition.
• Features 5,700 entities across 26 categories with human-verified images.

Introduction:

• Recognizing entities from images is challenging due to visual complexity and open-domain nature.

Related Work:

• Studies on open-domain entity recognition, zero-shot image classification, and object detection discussed.

Entity6K Dataset:

• Data acquisition process explained with details on entity list compilation and image collection.

Human Annotation:

• Bounding box and textual description annotation process outlined.

Statistics of the Dataset:

• Comparison with existing datasets presented, highlighting the value of Entity6K.

Experimental Settings:

• Tasks chosen include object detection, zero-shot classification, image captioning, and dense captioning.

Detailed Results for Each Category:

• Image captioning results by OFA, BLIP, GRiT, and GIT provided along with object detection results for GLIP, GRiT, DINO, and ViT-Adapter.

Статистика

Entity6Kは、26のカテゴリにわたる5,700のエンティティを特徴とし、人間によって検証された画像を提供しています。

Цитаты

Ключевые выводы из

Entity6K

by Jielin Qiu,W... в arxiv.org 03-20-2024

https://arxiv.org/pdf/2403.12339.pdf

Дополнительные вопросы

データセットの拡張やバランスの調整など、今後の研究で改善できる可能性がある点は何ですか？

このデータセットにはさらなる拡張と改善の余地があります。まず第一に、データセットのサイズをさらに拡大することが考えられます。現在のデータセットはすでに多様性を持っていますが、より多くのエンティティを追加することでカバレッジを広げることが重要です。また、各カテゴリ内でエンティティ間のバランスを取ることも課題です。特定のカテゴリ（例：哺乳類）ではエンティティ数が制限されている場合もありますが、他方で有名人など他のカテゴリは非常に多く存在する可能性があります。これら固有な特性から生じる不均衡問題に対処し、データセット全体をより均等化する努力も必要です。