이 논문은 다중 사람 동작 추정을 위한 새로운 방법인 MultiPhys를 소개한다. MultiPhys는 물리 시뮬레이터를 활용하여 동작 추정 과정에 물리적 제약을 적용함으로써, 기존 방법들이 겪었던 신체 간 침투, 발 스케이팅, 지면 침투 등의 문제를 해결한다.
구체적으로, MultiPhys는 SLAHMR이라는 기존 키네마틱 기반 다중 사람 동작 추정 방법의 출력을 초기값으로 사용한다. 이후 물리 시뮬레이터 내에서 자기회귀적으로 동작을 보정하여 물리적으로 일관된 최종 동작을 추정한다. 이 과정에서 동작 추정의 정확도와 물리적 타당성 사이의 균형을 유지하기 위한 다양한 기술적 요소들이 고안되었다.
실험 결과, MultiPhys는 기존 방법 대비 신체 간 침투, 지면 침투, 발 스케이팅 등의 물리 관련 지표에서 크게 개선된 성능을 보였으며, 동작 정확도 측면에서도 경쟁력 있는 수준을 달성하였다.
Egy másik nyelvre
a forrásanyagból
arxiv.org
Mélyebb kérdések