オープンボキャブラリーのモバイル操作のためのGPT-4Vを用いた閉ループシステム

COME-robotは、GPT-4Vの高度な多モーダル推論機能を活用し、ロボットの探索、ナビゲーション、操作のプリミティブアクションを組み合わせることで、未知の実世界環境でのオープンボキャブラリーのモバイル操作を実現する。