生成AIに清書してもらう
from 2024/04/17
サムネ
https://gyazo.com/2ce1c9470f0982a29c401ec05fdd84b6
生成AIに清書してもらう
@armored_fairy
ScribbleやLineartで同じことをやっていたのですが、Cannyでも出来るんですね。
①マウスで3分ラフ画
②Canny
③Lineart invert(from white bg & black line)
④Scribble scribble_xdog
プロンプトは引用。
試してみたい人に一つだけ注意点。
ラフ画は最低限、ヒトに見える必要があります。
https://gyazo.com/1cdffeaf0cc61bd5331e51a2a62ff37e https://gyazo.com/5b80aefb2063b6e518988223a5dc83db
https://gyazo.com/5e76d933f2f3da153003c23fe550b3da https://gyazo.com/ab54b2bf5d426159e600a0e3ba104f2f
この4枚を結合した画像をサムネにしたいtakker.icon
やりました（スクショなので適当）bsahd.icon
> @jikutakatsuo
> ネームからの線画生成
>
> ①簡単なネーム絵を描く
> ②i2iのControlNetにネーム絵を入れ、Cannyを選択。"Control Mode"の"My prompt is more important"にチェックを入れ、「白紙i2i法」で生成
> ③生成物。プロンプトはALTに
> ④クリスタでレベル補正し、黒色を強めて完成
> https://gyazo.com/4ddfea5d8911f966f6fb8b6d99f0acb2 https://gyazo.com/5e1e33e4d1e8b4aa5ab15b5670bb5b82
> https://gyazo.com/45b01c965935adc3098484251257b0cb https://gyazo.com/d3767119175ac2913ea32f135e38efa2
>
こんなことできる時代になってたんだ？という感じ
誰かが展開してくれたのだけど、スマから見てると長すぎて辛いから切り出して欲しい…
展開しました。すませんtakker.icon
どんなタイトルで切り出せばいいかな？
展開助かります、切り出しは義務ではないので雑に展開して欲しいinajob.icon
はーいtakker.icon
すごすぎtakker.icon*2biwa.icon
あとで見てみようinajob.icon
自分で何かをセットアップする必要がある？or手軽なWebサービスとかを使えばできる？とかからわかってない
同じく何もわかっていないtakker.iconnishio.icon
幸い井戸端にはこの分野に詳しい人がいっぱいいらっしゃるので、とりあえずブラケティングしておけば補足説明くれると勝手に思ってる
stable diffusion web uiのプラグインで入れれば使える(1年ぐらい前の知識)基素.icon
/motoso/ControlNet試す
この方法について分かりやすい資料があるけど、リンクはやめてと書かれているので「NovelAI 5ch Wiki」または「としあきdiffusion」で各自調べてほしいHiro Aki.icon
ControlNetを導入するまで何をすればいいのか、導入した後の操作も分かりやすいと思う
PythonのPの字も知らんような自分でも導入してテキトーな絵をtext to imageで生成出来るところまで行けたから、みんな行けると思う
ラフ画書ける程度のスキルが重要になりそうだなぁ……sta.icon
自分の中でこれが清書という単語とあまり結びつかない基素.iconnomadoor.icon
基素.iconさん(イラスト分野？)だとどういう言い回しが自然なんだろうtakker.icon
自分の感覚でも清書と言うとほぼ完成品と同じくらいの出来栄えの下書きから線を綺麗にするためにもう一度書く、くらいの感じcak.icon
線画工程であればこのくらいの離れ具合でも書く人はいる気がする
ちなみにラフと言う単語はイラスト時、ネームは漫画時に使うイメージがある
出力される絵は"モデルが描ける絵"になるので、ControlNet Scribbleで生成される絵は、ラフで指示したものを他の絵描きに描いてもらう感じで、自分の絵の清書だとは感じられないnomadoor.icon基素.icon
もちろん、自分が生涯描けないだろう絵柄を手に入れられる面白さと魅力はあるのだけれど
てことは、清書ではなく<名詞不明:委託発注的なニュアンスのやつ>と表現するのが適切かなtakker.icon
i2i（着色あり）に比べると清書と言いたいのはまあ、わかる基素.icon
例えばこういう絵をいい感じにしたい(from ステイホーム・子育てだからこそ、5000円で始められるWiiFitのススメ - inajob's blog )inajob.icon
https://gyazo.com/65c87499146d59b01448c72ac1f5127e
SeaArtというサービスですこしためしてみたが・・
コントロールネットというのを使う
img2imgではない
何が違うの？
i2i（何か特定のモデルを指しているのではなく、imageからimageを作るというだけの意味）の一種という認識基素.icon
初期のi2iは制御できなかったので、制御しやすくするControlNetが提案された
論文タイトルも"Adding Conditional Control to Text-to-Image Diffusion Models" https://arxiv.org/abs/2302.05543
以下コントローネットのタイプを色々変えてみた
https://gyazo.com/4b104028cfc44bbf502fd9d602a6cf28
着色しようと頑張っている
https://gyazo.com/f0616a4275247378f2e1a654bdfc6805
赤ちゃん部分のデフォルメ具合は割といい感じ
大人の手が消えてる
https://gyazo.com/5a6d1f8ed4013f5412afd865cf87e93c
線がよれよれ
うーむ、、という感じ
同じ感想だけど、使ってるモデルを変えたら結果はかなり異なると思う基素.icon