本論文では、仮想環境と物理環境を統合的に観察し、ユーザーの状態を把握してユーザーをサポートするインテリジェントエージェントを提案している。
まず、センサーを用いて物理環境と仮想環境の情報を収集する。物理環境の情報には、カメラによる映像や、マイクによる音声などが含まれる。一方、仮想環境の情報には、PCのアクティブウィンドウや、VRデバイスの操作情報などが含まれる。
次に、収集した情報を統合的に解析し、ユーザーの状態を把握する。ユーザーの手の動きや発話、注視点などから、ユーザーの作業状況や気分などを推定する。
そして、ユーザーの状態に応じて、物理的なロボットや仮想的なインターフェースを通じて、適切な支援を行う。例えば、ユーザーが集中している際に電話が鳴った場合、ロボットが電話に出るなどの対応を行う。
このようなシステムを「NEO」として実装し、ユーザー実験を行った。その結果、NEOはユーザーの没入感を高め、作業負荷を軽減することが示された。また、ユーザーの好みに合わせてパーソナライズすることで、ユーザー体験がさらに向上することが明らかになった。
本研究は、仮想環境と物理環境を統合的に観察し、ユーザーをサポートするインテリジェントエージェントの設計と実装、評価を行ったものである。提案手法は、没入型作業環境におけるユーザーサポートに有効であると考えられる。
To Another Language
from source content
arxiv.org
Principais Insights Extraídos De
by Zhe Sun,Qixu... às arxiv.org 03-28-2024
https://arxiv.org/pdf/2403.18331.pdfPerguntas Mais Profundas