이 논문은 사용자와 로봇 간의 자연스러운 상호작용을 위해 다중 모달리티(언어, 제스처 등)의 정보를 상황 인식과 함께 융합하는 방법을 제안한다.
먼저, 시뮬레이션 실험을 통해 제안 모델의 성능을 검증한다. 모달리티 간 정보 불일치, 노이즈 등 다양한 상황을 고려하여 실험을 진행하였다. 제안 모델은 이러한 상황에서도 우수한 성능을 보였다.
이어서 실제 실험 환경에서 사용자 실험을 진행하였다. 사용자는 다양한 상황에서 로봇에게 명령을 내렸으며, 제안 모델은 이를 효과적으로 인식하고 적절한 행동을 수행하였다. 특히 적응형 엔트로피 기반 임계값 결정 기법을 통해 상황에 따른 최적의 상호작용 모드를 자동으로 선택할 수 있었다.
전반적으로 이 연구는 다중 모달리티 융합과 상황 인식을 통해 사용자와 로봇 간의 자연스러운 상호작용을 실현하는 데 기여한다.
To Another Language
from source content
arxiv.org
Viktige innsikter hentet fra
by Petr Vanc,Ra... klokken arxiv.org 04-03-2024
https://arxiv.org/pdf/2404.01702.pdfDypere Spørsmål