従来の手法では困難であった、複雑なキャラクターアートに、カメラワークを含めたダイナミックな動きを再現するアニメーション生成手法「MikuDance」を提案する。
Animate-Xは、人間に限らず、ゲームやエンターテイメント業界でよく使われる擬人化キャラクターを含む、あらゆるキャラクタータイプ(総称してXと呼ばれる)のアニメーションを可能にする、普遍的なアニメーションフレームワークである。
本稿では、テキスト指示とターゲット位置に基づくリアルタイム拡散モデルであるDiffusion Planner (DiP) と、堅牢なモーション追跡コントローラを組み合わせた、物理ベースのマルチタスクキャラクター制御システムCLoSDを提案する。