1枚の絵だけを素材にしてAIに学習させた結果

たった1枚の絵からAIを学習させる試みで、最初に生成された画像は基本的でシンプルなものだった。
LoRA技術を使用し、コントロールネットを通じて様々なポーズの画像を生成し、それをさらに進化させた。
最終的には、独自のスタイルを持つキャラクター画像が生成され、それはオリジナルの絵とはかなり異なる結果となった。

1: ななしのAIさん 2024/05/11(土) 13:35:18.567
無理あるのだろうか

2: ななしのAIさん 2024/05/11(土) 13:35:48.525

まず、こういうのが出ました。

3: ななしのAIさん 2024/05/11(土) 13:36:35.260
LoRAじゃなくてモデルごとやったのか?

6: ななしのAIさん 2024/05/11(土) 13:38:53.034
>>3
Loraだよ
1枚の絵でLoraして、それをコントロールネットに入れてi2iをかけて
1/10くらいで宇崎ちゃん出てくるから、出てきたのを集める

4: ななしのAIさん 2024/05/11(土) 13:36:42.005
宇崎ちゃん

5: ななしのAIさん 2024/05/11(土) 13:37:30.068

そしてオリジナルの1枚とキレイに生成できた奴を集めてコントロールネットに入れたらこうなります。

7: ななしのAIさん 2024/05/11(土) 13:39:42.806

5をコントロールネットにしていろんなポーズを生成します。

8: ななしのAIさん 2024/05/11(土) 13:39:50.648
足りないパーツによる強制人体錬成みたいなことしてんな

9: ななしのAIさん 2024/05/11(土) 13:40:46.027

そして出来上がった次の世代の宇崎ちゃんがこれになります

10: ななしのAIさん 2024/05/11(土) 13:43:11.322

次世代の宇崎ちゃんは割と安定した絵になります

11: ななしのAIさん 2024/05/11(土) 13:43:45.150
これが現代の錬金術か

13: ななしのAIさん 2024/05/11(土) 13:46:48.254
1からこうなるわけないじゃん
別に学習データあるだろ

16: ななしのAIさん 2024/05/11(土) 13:47:54.839
>>13
1枚を200_くらいで学習させて、
それに学習Lora+本体をControlNetに入れれば出る

14: ななしのAIさん 2024/05/11(土) 13:46:53.701

後ろはこんな感じで覚えさせます。

17: ななしのAIさん 2024/05/11(土) 13:51:52.330

二代目Loraでもプロンプトが甘いとこうなる

19: ななしのAIさん 2024/05/11(土) 13:52:53.231
元モデルにuzakiって入れるのと変わらない事遠回りでしてそう

22: ななしのAIさん 2024/05/11(土) 13:59:56.009
>>19

元モデルにuzakiって入れたらこうなる

20: ななしのAIさん 2024/05/11(土) 13:56:35.498

だいぶ宇崎ちゃんになってきた

21: ななしのAIさん 2024/05/11(土) 13:57:17.037
こういう自分の持ってる絵を覚えさせてAIに絵を描かせるのってオススメのソフトとかある?

23: ななしのAIさん 2024/05/11(土) 14:02:00.814
>>21
StableDiffusionくらいじゃないのかな

26: ななしのAIさん 2024/05/11(土) 14:09:28.266

Controlnetにどんどん増やすと、AIが描いた絵を学習し、独自解釈の宇崎ちゃんができはじめる

27: ななしのAIさん 2024/05/11(土) 14:11:06.612

アニメ塗りして完成

28: ななしのAIさん 2024/05/11(土) 14:13:32.539
このLoraに、石恵画風を混ぜます

30: ななしのAIさん 2024/05/11(土) 14:15:33.511

こうなります

32: ななしのAIさん 2024/05/11(土) 14:16:47.949

そして少し画風を修正して、こういう感じの顔にします

48: ななしのAIさん 2024/05/11(土) 17:03:19.790
>>32
ニャル子さん出てるな

46: ななしのAIさん 2024/05/11(土) 15:21:20.769
元絵1枚でもこんな似るの

引用元:https://mi.5ch.net/test/read.cgi/news4vip/1715402118/