Latent Consistency Models - work4ai

Latent Consistency Models

https://gyazo.com/6d75aa2fccb5a144db63ad0b8103ba09

https://latent-consistency-models.github.io/Project

https://arxiv.org/abs/2310.04378Latent Consistency Models: Synthesizing High-Resolution Images with Few-Step Inference

https://github.com/luosiallen/latent-consistency-modelluosiallen/latent-consistency-model

https://huggingface.co/spaces/SimianLuo/Latent_Consistency_ModelDemo

https://replicate.com/luosiallen/latent-consistency-modelDemo2

4stepsで生成が完了する

https://gyazo.com/0ab44d57298a3d84dddd2be9bee71956

consistency modelを画像生成に適用させた

～32 A100 GPU時間で既存の事前学習済みモデルから蒸留可能

e.g. https://huggingface.co/SimianLuo/LCM_Dreamshaper_v7LCM_Dreamshaper_v7

Latent Consistency Fine-tuning(LCF)

Latent Consistency Models(LCM)のファインチューニング法

https://arxiv.org/abs/2310.14189Improved Techniques for Training Consistency Models

学習方法を改善して1step,2stepでよりよいFIDスコアを獲得

https://github.com/laksjdjf/sd-trainer/tree/lcmlaksjdjf/sd-trainer/lcm

参考

Latent Consistency Models について｜teftef

teftef - クリエイター

Consistency Models: 1~4stepsで画像が生成できる、新しいスコアベース生成モデル

https://x.com/Yokohara_h/status/1725975747209437621

Latent Consistency Modelによる蒸留を試してみた

画像生成の高速化

Consistency Models

高速サンプリング