ComfyUI_CatVTON_Wrapper

https://github.com/chflame163/ComfyUI_CatVTON_Wrappera/Comfyui_segformer_b2_clotheschflame163/ComfyUI_CatVTON_Wrapper

CatVTON を実装するComfyUIカスタムノード

インストール

ComfyUI Managerでインストール

モデルのダウンロード

Google Drive からすべてダウンロード

path\to\ComfyUI\models\CatVTONに配置

ComfyUI_workflow

https://gyazo.com/21fae003845e31778da9308db0aaac92

CatVTON.json

🟨手書きしても良いが、今回はsegformer_b2_clothesで胴体をセグメンテーション

🟩mask_growでマスクの大きさを調整

https://gyazo.com/c4645929e1fc816a3a2d7566859f3603

CatVTON_v2.json

参照画像は服だけにしたほうが良い

元画像のポーズをよく理解していないようで、手や足が重なっているとすぐ失敗するnomadoor.icon

https://gyazo.com/ce3f14c025342447a1a797facbf99630https://gyazo.com/61461d7d571ad9ae453ddadc0e927921https://gyazo.com/b72180250f07f95ba961249f1e23b9b1

元画像にどの程度マスクを描くのかも悩ましい

半袖 → 半袖なら服だけセグメンテーションすれば良いけれど、上の画像のように半袖 → 長袖だと上半身ぜんぶマスクしないといけない

すると余計にポーズを理解しなくなる上に、SD1.5ベースなので細部、特に手が溶ける

手動でやる分にはまだ良いけれど、自動化しにくい