🦊雑に学ぶComfyUI
ComfyUIを真に使いこなす上で混乱しないための道標になったら良いなあと思っておりますnomadoor.icon
ComfyUIはStable Diffusionの仕組みをざっくりとでも分かっていないと使えないので諦めて勉強しましょう!
数学的なことは1mmもわからないので、すべてフワッとした説明です
ツッコミ大いにお待ちしております
1. とりあえず動かしてみる
🦊ComfyUIとは?
🦊推奨スペック
ComfyUIのセットアップ
🦊起動して生成
2. ソフトウェアとしてのComfyUI
a. 最低限のPC基礎知識
🦊パス
🦊ターミナル
🦊Python
🦊git
b. ComfyUIの操作とカスタム
🦊Settings
🦊ComfyUIカスタムノード
ComfyUIカスタムノードのインストール方法
とりあえず入れておいて欲しいComfyUIカスタムノード
ComfyUIの基本操作
🦊モデルのダウンロード
🦊コマンドライン引数
🦊workflowの保存と共有
c. 基本的なデータ処理
🦊データ・型
→ ComfyUI のデータおよび型
🦊単純な計算
🦊テキスト操作
🦊連続処理
🦊Webカメラ
ComfyUI-VideoHelperSuite
d. 基本的な画像処理
🦊画像のリサイズとクロップ
🦊色調補正・エフェクト
🦊マスクとアルファチャンネル
🦊マスク操作
🦊AIによるマスク生成
🦊画像合成
3. Stable Diffusionと生成AIの基礎
🦊拡散モデル
🦊Conditioning
🦊サンプリング
🦊latent diffuison modelsとVAE
🦊CFG
4. ComfyUIで動かすStable Diffusionの基本 (Stable Diffusion 1.5)
最新のモデルであっても、Stable Diffusion 1.5のworkflowと基本の形は一緒です
ComfyUIノードレシピ集
Scrapboxに載せた画像からComfyUIのワークフローを読み込めない
🦊プロンプト
🦊Textual Inversion
🦊LoRA
KSamplerノード
KSamplerAdvancedノード
🦊image2image
🦊Hires.fix
5. 基盤モデルの進化とそのworkflow
🦊SDXL
🦊Flux
🦊Stable Diffusion 3.5
🦊Qwen-Image
6. 下流タスクと応用workflow
画像生成AIの登場で、Photoshopなどのデザインツールによる編集とは全くレベルの違う、新しい画像制作・編集手法が次々と現れています
🦊inpainting / 🦊outpainting
🦊Differential Diffusion
🦊ControlNet
🦊制御画像の作成
🦊Subject/ID転送
🦊スタイル転送
🦊In-Context編集
🦊OmniGen2 / 🦊FLUX.1 Kontext / 🦊Qwen-Image-Edit
🦊領域指定
🦊Masking Model Weights
🦊Face Swap
🦊オブジェクト除去
🦊リライト
🦊アップスケーラー
🦊LLM/MLLM
🦊image2prompt
7. ちょっと難しい処理
🦊Unsampler
🦊Ultimate SD upscale
🦊ComfyUI-Impact-Pack
🦊SEGS
🦊Detector
🦊Detailer
🦊Detailer_複数の対象
🦊ワイルドカード
🦊Scheduling Model Weights
🦊モデルのマージ
🦊高速化と軽量化
ちょっと休憩: コラム (?)
1. workflowの組み方について
🦊リーダブルノードのすゝめ
🦊無線化
2. 初心者がコケそうな疑問
🦊同じパラメータを使ってもStable Diffusion web UIとComfyUIで同じ画像は生成できない
512px × 512pxで生成するのはなぜ?
🦊Stable Diffusion 1.5のLoRAやControlNetはSDXLでは使えない
8. モダリティの拡張
a. アニメーション
🦊AnimateDiff
🦊AnimateDiff_video2video
🦊AnimateDIff_ControlNet
🦊SparseCtrl
🦊FreeInit / 🦊Freenoise
🦊prompt travel
b. 動画生成 (UNet世代)
🦊Stable Video Diffusion
🦊DragNUWA
🦊CogVideoX
🦊CogVideoX_image2video
🦊CogVideoX_Interpolation
🦊Mochi
c. 動画生成 (After Sora世代)
🦊LTX-Video
🦊HunyuanVideo
🦊FramePack
🦊Framepack 1フレーム推論
🦊Wan2.1
🦊Wan2.1_VACE
🦊Wan2.1 画像生成
🦊Wan2.2
d. 動画生成の下流タスク
🦊フレーム補間
🦊talking head/リップシンク
e. 3D
f. 音楽・音声
9. ComfyUIカスタムノードを作る
肥大化しそうなので個別ページに切り出し
10. クラウドで動かす
🦊Runpod
🦊Lightning AI
🦊Comfy Cloud
🦊外部AIサービスを使う
11.トラブルへの対処法
🦊エラーが出た時にやることリスト
🦊よくあるエラー
🦊よくある失敗
アーティファクト
推薦図書
https://www.comflowy.com/Comflowy
https://comfyui.creamlab.net/ComfyUI 解説 (wiki ではない)
https://note.com/gcem156/allnote by gcem156(=)
https://www.felixsanz.dev/
🦊シリーズのComfyUIに関係する記事・画像・workflowはCC0です。ご自由にお使いください
使われているモデル・カスタムノードのライセンスにはご注意を