本論文では、仮想環境と物理環境を統合的に観察し、ユーザーの状態を把握してユーザーをサポートするインテリジェントエージェントを提案している。
まず、センサーを用いて物理環境と仮想環境の情報を収集する。物理環境の情報には、カメラによる映像や、マイクによる音声などが含まれる。一方、仮想環境の情報には、PCのアクティブウィンドウや、VRデバイスの操作情報などが含まれる。
次に、収集した情報を統合的に解析し、ユーザーの状態を把握する。ユーザーの手の動きや発話、注視点などから、ユーザーの作業状況や気分などを推定する。
そして、ユーザーの状態に応じて、物理的なロボットや仮想的なインターフェースを通じて、適切な支援を行う。例えば、ユーザーが集中している際に電話が鳴った場合、ロボットが電話に出るなどの対応を行う。
このようなシステムを「NEO」として実装し、ユーザー実験を行った。その結果、NEOはユーザーの没入感を高め、作業負荷を軽減することが示された。また、ユーザーの好みに合わせてパーソナライズすることで、ユーザー体験がさらに向上することが明らかになった。
本研究は、仮想環境と物理環境を統合的に観察し、ユーザーをサポートするインテリジェントエージェントの設計と実装、評価を行ったものである。提案手法は、没入型作業環境におけるユーザーサポートに有効であると考えられる。
다른 언어로
소스 콘텐츠 기반
arxiv.org
더 깊은 질문