抹茶もなかさんのイラストまとめ

技術書典無事審査が降りて物理本、電子本共に頒布が決定しました〜 11/3は「あ21」で、「画像・動画生成AIを制御する技術」という内容で本を出します！
興味ある方は是非チェックしてください！
#技術書典17 #技術書典

https://t.co/1WTA3AlKdi

それなりに再現性あるのマジで謎過ぎる
一貫性維持の重要なヒントが隠されている気がしてならないんだけどなんでこんな挙動するのかさっぱりわからん

線画ControlNet、学習すすめてたらやけに一貫性の高いキャラ線画を複数一枚に描画するようになったんだけどいったい何を学習しているのか

線画を出そうという気概は'(ry

線画生成ControlNet、普段より５倍くらい学習量回しても全然収束しないけどまあ線画を出そうという気概は感じる

ちなみに仕組み的には、線画⇒Lineart＆Line２Line＆flat Loraで平坦な色付け⇒涙ぐましい古典的画像処理のごり押しによるバケツ塗り再現⇒色毎にレイヤー分け
という手順をたどってます

微妙に入力線画が違ったので上げなおし（こっちが正）

元の入力線画単品はこちら

「入力された線画をそのまま出力する」ControlNetを作ってみました。
何か意味あるの？と言いたくなるモデルですが、LineartやLine2Normalmapなどと併用することで、入力された線に対する忠実度の向上が期待できます
（サンプルの青線画元の入力線画）
https://t.co/57AtHjEXDW

画像生成時に描写される物体の密集度を制御するControlNetを作ってみました
結構改善の余地がありそうですが、一応SDXL用の試作版モデルをHugging Faceにあげたので興味がある人は是非
なんとかしてAIイラストの情報量制御に辿り着きたい気持ち
https://t.co/uqzNog8T9r