illustriousやnoobAIの出力を、学習素材1枚～4枚程度の絵柄LORAで安定させる

　前回書いた「noobAI」で固有名詞タグを使わずに画質を安定させる方法の中で触れた、絵柄LORAでイラストの画風を向上させる方法についてです。

　下記の「タグやLORAを駆使してIllustrious-XLの絵柄を安定させる」でも書いたのですが、イラストリアス系は「少枚数の学習画像で強めに学習したLORAが、絵柄LORAのようにふるまう」傾向が強いです（実はponyでも同様のことができるけど今回は割愛）。

　この方法の利点は

・素材が１枚でもいける。
・少ない枚数でいけるので準備が楽。
・素材枚数が少ないので学習時間が短くLORA作成が手軽。

　あたり。
　イラストリアスとnoobのデフォルト状態でのイラスト生成の不安定さを大幅に改善できるのと同時に、LORAの作成が手軽なので、さまざまな絵柄でイラスト生成できるようになるという副次的な効果も見逃せません。

　1つのLORAを作るのに、RTX3060tiの12GBで１時間～1時間半程度で終わるので、いろいろ試しまくってみました。
「素材の枚数は1枚がいいのか、もう少し多い方がいいのか？」「素材はどんなものがいいのか？」「学習パラメータはどんな感じがいいのか？」　などなど、いろいろと知見を得ることができたので、そのあたりを報告していきます。

上の画像とこの画像は、SD1.5時代のモデルで出力した画像4枚から作成したLORAをnoobAIで使用したもの。モデルの雰囲気をある程度再現できている。有料部分で配布。

少数米で作成したLORAは背景にも影響を及ぼす。
素材の選定によっては背景の品質向上に繋がる可能性も…

上のLORAをTOP絵で使用。別キャラもまぁまぁ出せる。
プロンプトを使えば学習素材とは違う形や表情にできる。

こちらもSD1.5モデルの出力からLORAを作成しイラストリアスSPOで出力。
元モデルの再現度は高くないが画像出力は安定する。こちらも有料部分で配布。

Ponyで出力した画像を使って作成したLORAをnoobAIで使用。
塗りの感じがオリジナルではなくLORAによるマットな感じになっている。

ベースモデルにイラストリアスを使用し、
1枚絵で学習したLORAをイラストリアスSPOで出力。
複数人を出しつつも、素材画像の雰囲気をかなり再現できている。

上のLORAをnoobAIで使用。
ベースモデルが違うので再現度は下がるが、大まかな雰囲気は残っている。

　有料部分では、少数素材による簡易絵柄LORAの説明と、サンプルで作成した絵柄LORA2種、および学習に使用した画像（センシティブ部分モザイク有）を公開しています。
　こちらは11月一杯はメンバー公開および単体販売で、それ以降は単体販売のみとさせていただきます。