🦊Freenoise
AnimateDiffのみならず現状の動画生成モデルは16 or 32フレームほどしか生成できません
それでは短すぎるため、16フレームの動画を2つ作って、その間を上手くなじませる等して動画時間を伸ばしてきましたが全体の一貫性は減っていきます
ノイズをシャッフルしたり、馴染ませるフレームをattentionによって決めたり(?)することで安定させる技術がFreenoiseです 🦊ComfyUIでやってみる
https://gyazo.com/f075742f66c0118fd17ab4d9d0488b38
noise_typeをFreenoiseへ変更
https://gyazo.com/7f35240ff2943d3034640c5370137388https://gyazo.com/b9b6826a4f6fc61c2b76a12dece5051b
←Freenoiseなし →あり
見てわかる通りtext2imageで使うとほとんど動かなくなります
生成される画も大きく変わるためvideo2videoで使うのがいいかもしれません
あんま意味なかったnomadoor.icon