이 논문은 확산 노이즈 최적화(DNO)라는 새로운 방법을 제안한다. DNO는 기존의 인간 동작 확산 모델을 다양한 동작 관련 작업을 위한 범용 동작 사전으로 활용할 수 있게 한다.
DNO의 핵심 아이디어는 확산 모델의 잠재 공간에서 최적화를 수행하는 것이다. 이를 통해 동작 편집, 개선, 완성 등의 작업을 수행할 수 있다. 구체적으로:
동작 편집: DNO는 기존 동작을 편집하여 특정 궤적, 자세, 관절 위치를 따르거나 장애물을 회피할 수 있다. 이때 원본 동작의 특성을 잘 보존한다.
동작 개선: DNO는 노이즈가 포함된 동작을 입력받아 원본 동작을 복원할 수 있다. 이를 통해 동작을 정제하고 부분적으로 누락된 동작을 완성할 수 있다.
동작 완성: DNO는 부분적으로 관찰된 동작을 입력받아 누락된 부분을 완성할 수 있다.
DNO는 기존 동작 확산 모델을 활용하므로 별도의 모델 학습 없이 다양한 작업을 수행할 수 있다는 장점이 있다. 실험 결과, DNO는 기존 방법들에 비해 동작 편집 및 개선 성능이 우수하다.
To Another Language
from source content
arxiv.org
Önemli Bilgiler Şuradan Elde Edildi
by Korrawe Karu... : arxiv.org 04-04-2024
https://arxiv.org/pdf/2312.11994.pdfDaha Derin Sorular