被写体だけ切り抜いて3コマ打ちにする
全体で3コマ打ちにするのは割と簡単にできるnomadoor.icon https://gyazo.com/cdba2ec7d15f96002efb74fb15787553
https://gyazo.com/33cb11349d106e6cbf9918484b884d29
バッチ画像から3枚ごとに1枚抜き出す
それぞれの画像を3回繰り返す
3回繰り返すんじゃなくて、8fpsで動画を保存すればいいか
被写体のみ3コマ打ちにする
https://gyazo.com/617baaf72f80052f2b5a21b1ec1c1882
https://gyazo.com/d3f86863d939e0180de3f16de129c697
背景
動画から被写体を削除
被写体があった場所をWan2.1_VACEで埋める
マスクの形が人型っぽいとプロンプトに人という文章を書いてないのに、勝手に人を生成してしまう
ので↓の被写体で作ったマスクを使わずFlorence-2のBBoxを使う
また、referenceとして人を消した画像を入力し、人を生成しないように強制する
被写体
3コマ打ちにする
前景(あれば)
Florence2 + SAM2.1 → SDMatte
再度合成
この手法だとカメラが動いたら使えない(コピペされた被写体のフレームが2コマずれる)ので、すごいレイヤー分けが技術が出てきても使えないnomadoor.icon
そもそもフレーム数を3分の1にして3倍にしているだけなので、3コマ打ちによるアニメーション表現としてはあまり本質的ではない