Continuous Layout Editing of Single Images with Diffusion Models
https://gyazo.com/d65a3e8a5d9024794ed58ca151a77f8b
https://arxiv.org/abs/2306.13078Continuous Layout Editing of Single Images with Diffusion Models
拡散モデルを使い、画像内のオブジェクトのレイアウトを変えて編集する
masked textual inversion
画像内の特定のオブジェクトに対して、適当なトークンを選ぶ
そのトークンをマスクし、それ以外のトークンで画像を背性する
生成された画像と元の画像を比較し、損失関数を計算し、損失関数を最小化するように、モデルのパラメータを更新する
レイアウトの制御
ユーザーに指定された位置に基づいて、拡散モデルのクロスアテンションを最適化する
画像編集