MagicDance
https://youtu.be/VPJe6TyrT-Y
https://boese0601.github.io/magicdance/Project
https://arxiv.org/abs/2311.12052MagicDance: Realistic Human Dance Video Generation with Motions & Facial Expressions Transfer
https://github.com/Boese0601/MagicDanceBoese0601/MagicDance
https://gyazo.com/ef1c52c305d4aaf374cfbafef241fd29
Appearance Control Model
Stable Diffusionのネットワークと同じ構造を持ち、参照画像から人物の外見や表情を抽出して制御します
これとControlNet Openposeを組み合わせてAnimateDiffで動画にする