Core Concepts
본 연구는 텍스트 기반 인간 동작 생성 모델에 유연한 공간 제어 신호를 통합하는 새로운 접근법인 OmniControl을 제안한다. OmniControl은 공간 제어 신호와 현실감 제어 신호를 결합하여 생성된 동작이 공간 제약을 준수하면서도 현실적이고 일관성 있게 생성되도록 한다.
Abstract
본 연구는 텍스트 기반 인간 동작 생성 모델에 유연한 공간 제어 신호를 통합하는 새로운 접근법인 OmniControl을 제안한다. 기존 방법들은 주로 골반 궤적만 제어할 수 있었지만, OmniControl은 어떤 관절이든 어느 시점에서든 제어할 수 있다.
OmniControl은 공간 제어 신호와 현실감 제어 신호를 결합하여 사용한다. 공간 제어 신호는 생성된 동작을 입력 제어 신호에 맞추도록 하며, 현실감 제어 신호는 전신 동작을 암시적으로 수정하여 현실적이고 일관성 있는 동작을 생성한다. 두 가지 제어 신호는 서로 보완적이며, 제어 정확도와 동작 현실감의 균형을 잡는 데 필수적이다.
실험 결과, OmniControl은 골반 제어 성능에서 기존 최신 방법들을 크게 능가할 뿐만 아니라, 다른 관절들도 단일 모델로 제어할 수 있음을 보여준다. 이를 통해 다양한 응용 분야에서 활용될 수 있다.
Stats
생성된 동작이 입력 제어 신호를 잘 따르는지 측정한 Trajectory error, Location error, Average error 지표에서 기존 방법 대비 크게 향상된 성능을 보였다.
생성된 동작의 현실감을 나타내는 FID 지표에서도 기존 방법 대비 크게 개선되었다.
생성된 동작의 일관성을 나타내는 Foot skating ratio 지표에서도 기존 방법 대비 우수한 성능을 보였다.
Quotes
"OmniControl은 텍스트 기반 인간 동작 생성 모델에 유연한 공간 제어 신호를 통합할 수 있는 새로운 접근법이다."
"OmniControl은 공간 제어 신호와 현실감 제어 신호를 결합하여 생성된 동작이 공간 제약을 준수하면서도 현실적이고 일관성 있게 생성되도록 한다."
"OmniControl은 단일 모델로 다양한 관절을 제어할 수 있어 많은 응용 분야에 활용될 수 있다."