マネモブさん俺に"画像生成AI"について教えてください

1枚の絵からキャラクターLoRAを作る(AI実験/2024年3月)｜yatoracat新しい技法やモデルが出てきたので手順の再検討をしてみました。今回の目的(Purpose of this issue) 1枚の絵から特定キャラクターの再現性のあるLoRAの作成をします。 LoRA作成の手順を検討することが目的です。前提条件(Prerequisite) 【使用ツール】 ●Stable Diffusion (webui A1111)*1 ●Transparent-Background*2 ●NovelAI (V3)*3 ●Kohya_LoRA_GUI (kohya-ss)*4 【実験環境】 ●Model : Pony Diffusion V6 XL*note.com

>>14 >>16

14二次元好きの匿名さん24/07/28(日) 23:44:40

>>13

さ…最近のAIってすごいんだな

15二次元好きの匿名さん24/07/28(日) 23:45:55

>>12

とりあえずStabilityMatrixってのでStable Diffusionとkohaya-ssってのいれるといいっスね

>>17

16二次元好きの匿名さん24/07/28(日) 23:46:42

>>9

>>13

あざーすｶﾞｼｯ　取り敢えず立ち絵と差分はあるからそれでやってみるっス

17二次元好きの匿名さん24/07/28(日) 23:51:13

>>15

ふぅん取り敢えずそれを使えばいいということか

なんかよくわかってないけどマジであざーすｶﾞｼｯ

18二次元好きの匿名さん24/07/28(日) 23:57:52

あとAI画像生成する時ってやっぱり呪文とかって要るんスか？
ワシめっちゃ英語苦手やから不安やし

>>20 >>21

19二次元好きの匿名さん24/07/29(月) 00:12:12

ぶっちゃけいきなりローカルは絶対躓くからまずはpixAIかnovelAIにするべきだと思われるが…

20二次元好きの匿名さん24/07/29(月) 00:13:27

>>18

条件に合う絵を探してdanboorでタグをコピ・ペするだけだから英語とも思っていない

21二次元好きの匿名さん24/07/29(月) 00:15:20

>>18

taggerって拡張機能入れれば勝手にその絵にあった呪文出してくれるのん

まぁ品質プロンプトとか背景とかの無駄なプロンプトとかあるから調整はいるけどなブヘヘヘヘ

22二次元好きの匿名さん24/07/29(月) 03:05:49

あーっ調べてみたけどLoRAとかの使い方とかマジで分かんねぇよ

>>24

23二次元好きの匿名さん24/07/29(月) 06:27:54

不思議やな　LoRAに使う画像の作成がめっちゃ楽しい
LoRAでイラスト描いてもらうはずなのにLoRAに使う素材の厳選に夢中なのはなんでや

24二次元好きの匿名さん24/07/29(月) 07:28:30

>>22

おらよっ

Stability Matrix から kohya_ss(Kohya's GUI)をインストールしてLoRAを自作する｜はかな鳥　表題の通りです。　kohya_ss(Kohya's GUI)に関しては以前LoRA作成記事をいくつか書いてきたんですが、現状では内容が古くなってしまい、うまく設定できなかったりするんじゃないかと思いました。　Kohya_ss というのは Kohya Teck さんが公開なさっている、Stable Diffusionの学習、画像生成スクリプトです。　そして、それをWebUI形式のブラウザから簡単に操作できるようにしたのが、bmaltais さんが公開している Kohya's GUI です。 https://github.com/bmnote.com

25二次元好きの匿名さん24/07/29(月) 07:32:41

ムフッ　ワシも作ってみるのん…

26二次元好きの匿名さん24/07/29(月) 07:37:37

変な毛虫の供給がないと嘆いていたマネモブを思い出した　それが僕です

>>6

27二次元好きの匿名さん24/07/29(月) 08:28:57

ローカル環境で使いもんになるイラスト生成するなら廃スペックPC以上の環境必要になるからやめとけ。
どうしても自分の環境でやりたいなら金払ってクラウド環境借りとけ。

画像サイズ小さくても良いか、生成に膨大な時間掛けてもいいなら止めはしない。

>>28

28二次元好きの匿名さん24/07/29(月) 11:21:56

>>27

NAIと4070SUPERなら1024×1536がそれぞれ20秒弱と30秒ちょっとなんで言うほどじゃないスかね

29二次元好きの匿名さん24/07/29(月) 12:05:38

loraに用意した画像が全部健全でもげきえろ画像は生成できるんスか？

>>30 >>38

30二次元好きの匿名さん24/07/29(月) 12:13:44

>>29

髪の毛と顔をloraから持ってきて

身体を53億枚学習した基本データから持ってくるだけだからマイ・ペンライ

ウマエロ画像はそうやって大量生産されてるんだ

31二次元好きの匿名さん24/07/29(月) 12:21:19

性癖シチュLoRAを自作すればキャラLoRAをとっかえひっかえするだけで延々シコれる
そんな画像生成AIを誇りに思う

32二次元好きの匿名さん24/07/29(月) 12:22:58

>>6

そのマイナーなキャラがメジャーなキャラに近い見た目のキャラならメジャー側の髪色とか目の色とか変えて出力出来ないこともないっスよ

33二次元好きの匿名さん24/07/29(月) 12:29:41

とにかくAIってやつは情報量が重要なんだ
ぶっちゃけデータの質よりも量が大事なんだ
この原理がある以上はマイナー・キャラほど安定して出力し辛いのはAI技術の悲哀を感じますね…

>>36

34二次元好きの匿名さん24/07/29(月) 12:37:50

おいコラッマイナーで画像が少ないキャラでも諦めるなよ
左右対称のキャラなら左右反転させて教師画像を水増しすることもできるんだぞ

35二次元好きの匿名さん24/07/29(月) 13:48:07

あーっ適当なLoRAを試しにダウンロードしてみたけど使い方が分かんねぇよ

>>40

36二次元好きの匿名さん24/07/29(月) 13:53:57

>>33

お言葉ですが今は量より質ですよ

37二次元好きの匿名さん24/07/29(月) 13:57:56

ちなみにマイナーキャラというけど誰なんだよえーっ

>>39

38二次元好きの匿名さん24/07/29(月) 14:02:14

>>29

ウム…LoRA学習には制服しか使ってなくても呪文で指定すればどんな服装でも全裸含め応えてくれるんだなァ

39二次元好きの匿名さん24/07/29(月) 14:04:58

>>37

ヘンプリの…逆茂木…

エロゲのキャラなのに全裸差分の1つもないんだ　悲哀が深まるんだ

>>41 >>56

40二次元好きの匿名さん24/07/29(月) 14:12:36

>>35

物は試しでダウンロードしてみたけどこっからなにをどうすればいいのかわからないんだ

調べてみても全然出てこないしなヌッ

>>42

41二次元好きの匿名さん24/07/29(月) 14:22:33

>>39

ヘンプリはやったことないけど差分は何枚あるのん？

SDXLのLoRA学習なら10枚あれば作れないことはないっスよ

全身絵があるならクロップして画像増やすことも可能っス

42二次元好きの匿名さん24/07/29(月) 14:26:52

>>40

Stable Diffusionの生成画面でLoRA選択するとこがあるのん

>>43

43二次元好きの匿名さん24/07/29(月) 14:34:05

>>42

あざーすｶﾞｼｯ

不思議やな　さっきワシが自分でダウンロードした別のLoRAは全く反応しなかったのにこれはちゃんとLoRAの欄に表示されてる　なんでや

もしかして適当なサイトから拾ってきたのがダメだったタイプ？

>>44

44二次元好きの匿名さん24/07/29(月) 14:43:00

>>43

SDとSDXLってのがあって最初のほうはSDのみ対応だったと考えられる

>>45

45二次元好きの匿名さん24/07/29(月) 15:02:02

>>44

ふぅんそういうことか

あとLoRAを使って画像生成しても化け物が生まれるーッ助ケテクレーッ

やっぱりメチャクチャ呪文とか入れないとLoRA使っても特定のキャラを出力するのは難しいタイプ？

>>46 >>47

46二次元好きの匿名さん24/07/29(月) 15:04:35

>>45

キャラLoRAの説明を読め…鬼龍のように

まずはとりあえず作例のプロンプトを真似ることから始めるとええんや

47二次元好きの匿名さん24/07/29(月) 15:05:11

>>45

LoRAの説明欄にこういうタグと合わせてくれとか強度‹LoRA名:〇›←この〇に入る数字とかの指定やモデルの指定ないスか？

>>49

48二次元好きの匿名さん24/07/29(月) 15:16:43

ちなみにAI生成は初めてなタイプ？

49二次元好きの匿名さん24/07/29(月) 15:16:58

>>47

たぶんこれだけしかなさそうっスね

>>50 >>54

50二次元好きの匿名さん24/07/29(月) 15:18:35

>>49

URLよこせ

>>51

51二次元好きの匿名さん24/07/29(月) 15:23:08

>>50

しゃあっ

h ttps://civitai.com/models/80978?modelVersionId=195180

>>54

52二次元好きの匿名さん24/07/29(月) 15:25:40

comfyUIにキーロガーが含まれていた事件から足を洗った…それがボクです
お前らも気をつけろよ

53二次元好きの匿名さん24/07/29(月) 15:27:34

おおっ化け物がちょっとアニメ風の化け物に変わっていく
下の方にあった"Suggest Resources"を入れてみたのが多分効いとるんやっ

54二次元好きの匿名さん24/07/29(月) 15:32:06

>>51

>>49の下にあるアニメなんとかってモデル使ってその横のアモーレネガティブってやつをネガティブプロンプトに入れるといいのん

55二次元好きの匿名さん24/07/29(月) 15:50:49

とりあえずプロンプトに付いては現行のAIスレのテンプレを参考にしろ…鬼龍のように

AIイラスト展示・相談室【Room No 42】｜あにまん掲示板ボーイッシュな装いは良いですよねAIイラストを投げたり、呪文の相談したりするスレです18禁画像は胸や性器を隠した上での掲載をお願いします攻めた画像はほどほどに、見えていなければセーフの精神はラインをど…bbs.animanch.com

56二次元好きの匿名さん24/07/29(月) 16:19:13

>>39

3Dのイベントシーンあるならスクショで数は揃えられるんじゃねえかと思ってんだ

>>57

57二次元好きの匿名さん24/07/29(月) 17:30:07

>>56

3D無いよ（笑）解析してもこれと私服差分しか無かったよ（笑）

正面から見た姿も公式イラストレーターが1枚描き下ろしてくれてようやく反面したんだ

満足か？

>>60 >>61

58二次元好きの匿名さん24/07/29(月) 17:32:49

使ってるのが1.5かXLなのか教えてくれよ
1.5ならワンチャン昔組んだ環境が動けばLoRA作れるんだよね

59二次元好きの匿名さん24/07/29(月) 17:34:56

>>3

まずはVroidで3Dモデルを作れ……鬼龍のように

そしてモデルを動かしていろんなポーズや表情を学習させるんだ

>>64

60二次元好きの匿名さん24/07/29(月) 17:51:30

>>57

笑ってしまう

立ち絵しかないソシャゲのマイナーキャラをどう作るか頭を抱えている俺と似たような悩みを持ってるなんて

61二次元好きの匿名さん24/07/29(月) 20:16:54

>>57

ちょっと調べてみたらちょこちょこファンアートあるし公式絵の絵柄に拘らなければとりあえずLoRAは作れそうっスね

62二次元好きの匿名さん24/07/29(月) 21:51:45

スレ主！　他のキャラのLoRAを作れ
いきなり画像の少ないキャラを作ろうとするのは無理がある…　まずは作りやすいキャラで経験を積むべきだ

63二次元好きの匿名さん24/07/30(火) 09:48:44

スレ主、自作Loraはウマいやろか

64二次元好きの匿名さん24/07/30(火) 10:35:44

>>59

3Dキャラの画像突っ込んでローラ作ったらめっちゃケバケバしくなったのが…俺なんだ！

何でこんなにA国っぽい顔の濃さなんだよえーっ

>>65

65二次元好きの匿名さん24/07/30(火) 12:00:18

>>64

ベースモデルは慎重に選べ…鬼龍のように

あとマネモブ…これあげる

PixAI神LoRA学習編PixAI.artにLoRA学習機能が実装されました。持ってきたLoRAで遊ぶだけでも楽しいのに、自分でLoRA学習ができてしまう！サーバー的に難しいんだろうなぁ、と思っていたことをPixAI神がやってくれました！そこにシビれる！憧れるぅ！lanovesashie.com

>>69

66二次元好きの匿名さん24/07/30(火) 12:21:02

画像の下処理とかタグ付けどうするとかわからないことあったらいつでもワシにぶつけてくれ
ローカルSDXLのLoRA学習についてだったらなんぼでも教えたる
ワシめっちゃPonyのLoRA作ってるし

67二次元好きの匿名さん24/07/30(火) 12:26:42

気に入ったフィギュアの商品画像をそのまま素材にしたらひと昔前のツヤツヤのCGみたいな絵が出来たのが俺なんだよね
今はその商品画像ベースにイラスト量産して素材を集めてるんだ　苦労が深まるんだ

68二次元好きの匿名さん24/07/30(火) 13:00:50

もしかして”手”の目立つ画像は使わない方がいいタイプ？

69二次元好きの匿名さん24/07/30(火) 13:03:34

>>65

あざーす(ガシッ)

SD1.5でやってるけどモデルによっては固まって学習止まるんだよね

何故…？

70二次元好きの匿名さん24/07/30(火) 22:40:30

なあマネモブ　LoRA素材は正方形の画像がいいって本当か？

>>71

71二次元好きの匿名さん24/07/30(火) 22:52:04

>>70

はいっそうですよ(ニコニコ)

あと、できれば512×512ピクセルのほうがいいですよ

SDのサンプリングがそのサイズなので

72二次元好きの匿名さん24/07/30(火) 23:22:17

AI絵は大っぴらに学習に使うなよ
特にSD1.5だと生成した絵が元のAI絵に引っ張られると言われているからな

>>74

73二次元好きの匿名さん24/07/31(水) 00:07:04

スレ生き残らせてくれてあざーすｶﾞｼｯ
取り敢えず明日色々試してみるのん

74二次元好きの匿名さん24/07/31(水) 08:27:37

>>72

それでも元ネタは”フィギュアの商品画像”しかない　作るしかないっ

75二次元好きの匿名さん24/07/31(水) 08:45:05

キャラLOLAを作りたいなら15枚は画像が欲しいッスね
できれば膝丈以上が写ったものだと尚更良い伝タフ2年近くaiで遊び倒した男を継ぐ者

そしてとにかく1枚から学習する所謂「コピー機法」はかなり時間がかかるから相応の忍耐力が必要になる危険なトレーニングなんだ

まずはメジャーキャラでLOLAを作ってみて感覚を掴んでみるのがよいと思われるが…

76二次元好きの匿名さん24/07/31(水) 08:57:02

逆茂木真城でググったけど正面画像がまるでヒットしないんスけど…いいんスかこれで

>>77

77二次元好きの匿名さん24/07/31(水) 18:29:21

>>76

立ち絵が何故か背中向けて振り向いてるタイプだからね

しかも意外とこれ以外に立ち絵のパターンがあったりしない…！まっ元々立ち絵すら無い予定のキャラだったからこうして立ち絵があるだけでもありがたいからバランスは取れてるんだけどね

イラスト担当さんが描き下ろしてくれた正面絵もあるしなﾇｯ