RealFill
https://gyazo.com/2dbdf126ed1681363b110ac9126e04a1
https://realfill.github.io/Project
https://arxiv.org/abs/2309.16668RealFill: Reference-Driven Generation for Authentic Image Completion
通常のinpaintingやoutpaintingはそれらしいものを描いているだけで本物ではない
RealFillは、ほぼ同じシーンを撮影した数枚の参照画像を与えられると、それをもとにinpaintingを行う
https://gyazo.com/f2428c7a7c559346bffbdc70930c6652
訓練
参照画像とターゲット画像はランダムサンプリングされオーグメンテーション処理され、ランダムに生成されたマスクを追加される
それでLoRAを作る
空間を理解しているみたいで面白いnomadoor.icon
そのうち数枚の画像でNeRFが作れちゃったりするのかな
generative inpainting model