お絵描きAIで漫画を描く
漫画を描く際に利用する上でAIにたりていないもの
構図のコントロール
UI
コマごとにFireflyのようにイテレーションできなければならない
キャラクターの一貫性
作例
解像度が足りないので手作業で修正
小物は3Dをつかう
所要時間15分。ギターには3D作画を使っています。こういった形の決まっているオブジェクトの線画作成は、3D空間上への配置やレンダリング所要時間を考慮しても「3D作画の方が早い」です。形状も正確だし。blenderは線画も各種レイヤーも出力してくれるし。こう↓
AI作画:線画生成しそうなプロンプト入力→良い感じの出るまで生成ガチャ
3D作画:3Dモデル配置→カメラアングル調整→線画レンダリング
今の画像生成AIででないものは最初から手描き前提とする
パースの効いた躍動感のあるカットは、現在のAIでは生成が難しい...
画面右側で見切れたオッサンの苦悶顔なども上手い具合に生成できないですね。
「部屋!壁!窓!」みたいなシンプルな背景は手描きでバーッと描く方が早いですし、物体の形状を正確に描写したい場合は3D作画が最適だと思います。
画像生成AIの成果物は基本的に修正が前提
「果物が雑然と置かれた野菜市場の背景」を描くのにはAIが非常に役立ちましたが、整合性を無視したものがそこかしこに描かれがちなので常に全面的な修正が必要となります
画像生成AI利用が不向きな漫画の実例
https://pbs.twimg.com/media/FtwBFc0aAAACUvB.jpg https://pbs.twimg.com/media/FtwBFigakAESvHQ.jpg https://pbs.twimg.com/media/FtwBFliaMAM589t.jpg https://pbs.twimg.com/media/FtwBFlpacAEPiiy.jpg
構図のコントロールやキャラクターの一貫性を妥協している
出やすいキャラでやる
ある意味、棒人間と同じ
3Dでキャラクターがそんなにない支援ツールと同等
Lora(自キャラの追加学習)とControlNet(openposeによるポーズ指定)でAI漫画作画が簡単になったよという話の漫画。
出力後の編集や吹き出しの処理は必要ではあるが形にするのがずいぶん楽になりました。キャラはこの間のLora記事のデモ子さん。
https://pbs.twimg.com/media/FpS5i8eaIAA7nVi.jpg https://pbs.twimg.com/media/FpS5jb9aYAA_gjl.jpg
@_darger: 虹ゲイ 1/2 (文脈:ニコニコで流行ってる怪文書ネタのパロ) https://pbs.twimg.com/media/FqnCxIlakAIsLBN.jpg https://pbs.twimg.com/media/FqnCx3-aMAIWFM_.jpg https://pbs.twimg.com/media/FqnCypbaQAEPHVk.jpg
特に説明はないがLoRAとControlNetは使っているのではないか?
ネームは手書き
AIで描きやすい題材を選ぶ
会話が主体
モノクロにすれば色の一貫性の難易度が減る
ControlNetのreference onlyを使う
AIにわかりやすい絵を描く
「濃く太い線で描く」「顔の十字線はノイズになるので描かない or 消した方がよい」「色を斜線でつけるのはノイズになるので塗った方がいい」「コマ枠外や吹き出しで隠れる部分も描いておいた方がいい(後からクロップする)」
各コマごとに生成
scribbleは顔のアップが見切れているとうまく生成しない
まあ、そうだろうなぁ基素.icon
Clip studioで輪郭線を強調する
位置関係がふわふわしている点も多く指摘された。「イマジナリーラインを超えまくってるのが気になる」、「誰がどこにいるのかよくわからない」、「アップのショットが多い、もっとロングショットを使った方が良い」というフィードバックだ。これはネーム時点からある問題で、AI作画しやすいように複雑な構図を避け、顔のアップショットを多用してしまったことが原因だろうと思う。
漫画描き始めの人のあるあるパターンだと思う
関連
人間のイラストレーターが描いた作品に比べれば(少なくとも今の技術水準では)、比べ物にならないほど見劣りします。カニとカニカマくらい違う。AIの作る“画像”は、計画性や、緻密な設計に基づいた〝絵〟ではないからです。(略)けれど、お絵描きAIが面白い道具であることは間違いありません。
初音ミクが現れても、それまでの音楽は無くなりませんでした。新しい「ボカロ曲」というジャンルが生まれただけです。
そう簡単ではないことはお絵描きAIを触った経験からすでにわかっている
https://pbs.twimg.com/media/GMKBb4kaYAAZ2RD.jpg
・作画14時間(5時間2ページ+6時間4ページ+3時間2ページ)
手で描いた絵はキットカットだけです…🍫
https://pbs.twimg.com/media/GMKzgfaaUAAxUrJ.jpg https://pbs.twimg.com/media/GMKzgfYaQAA4ksQ.jpg
入力画像(手描きでもAIでもなんでもいいが今回はAI自動出力)をなんかいい感じに漫画の線とベタに変換してくれるComfyUIのWorkflow 仕組みとしては単純
入力画像は白黒ラフでも行ける
https://video.twimg.com/ext_tw_video/1784953343150071808/pu/vid/avc1/1280x720/t5Xuuy1VfOt0L-yy.mp4?tag=12#.mp4
添付のサンプルは
→3Dアプリで直方体置いて、アングルとレンズ決めてキャプチャ
→AdobeFFの「構成」にアップロード…
https://pbs.twimg.com/media/GK3ffN6bgAAcOif.png https://pbs.twimg.com/media/GK3ffN3acAATnN5.jpg
https://pbs.twimg.com/media/GK5VioOagAAhDTw.jpg https://pbs.twimg.com/media/GK5VjpOawAEZRnk.png