X-UniMotion

https://gyazo.com/ee17096d4ce6d4f835358c757ca3b811

X-UniMotionは、全身の人間の動きの暗黙の潜在表現を共同で学習し、DiTネットワークを使用してリアルなビデオを合成するエンドツーエンドのトレーニングフレームワークを備えています。その核となるのは、イメージエンコーダー E を使用して、走行画像 zID から1Dの潜在運動記述子を抽出し、全身の関節をキャプチャすることです。