DiLightNet
https://gyazo.com/38d62f9597918e5d8eccc641e491f926
https://dilightnet.github.io/Project
https://github.com/iamNCJ/DiLightNetiamNCJ/DiLightNet
https://arxiv.org/abs/2402.11929DiLightNet: Fine-grained Lighting Control for Diffusion-based Image Generation
拡散モデルによって生成された画像と照明には相関があるのはわかっているが、内容と照明それぞれを正確に制御する方法はない
放射輝度ヒント(radiance hints)つまりターゲットシーンを均質な材料で照明したレンダリングを利用し、ライティングを行う
https://gyazo.com/d54a2f5908243475c29a8834f923eddc
text2imageで照明がない画像を作る
ControlNetモデル(DiLightNet)に放射輝度ヒントを入力し、ライティングされた画像を生成
背景をinpaintingで生成
リライトではないのかこれnomadoor.icon
これとは全く関係がないのだけど、入力した画像からライティングを消してのっぺらな画像にしてくれる技術かサービスがあったのだけど、全く思い出せない
StableDelightだ
関連
IC-Light