【自作LoRA】教師画像の背景を白背景にした時の効果を検証する【Stable Diffusion】

こんにちは、zetaと申します。
今回はLoRAを自作する際に、教師画像の背景を白くすると生成画像にどのような変化があるかを調べていきます。

※一応今回は前回記事の続きになります。

やること

• 教師画像の背景を白くしたものに差し替える

• それ以外の条件を揃えて生成結果を比較する

教師画像

教師画像に使用したものは以下20枚になります。
※前回教師画像としたものの背景を白背景にしてます。

katanukiやペイントで作成しました

LoRAモデルを作成

前回同様、20枚×20回×20epochで8000step学習させました。

生成結果

同じ呪文・乱数を使用してYuzuで生成した結果になります。
わかりやすい差分としてはヘイローでしょうか。背景を白くした方がくっきり表れており、全体的な色合いもよくなっている気がします。

背景白

背景未編集（ゲームのスクリーンショットのまま）

結論

結論としては教師画像の背景は白背景にできるならした方が良さそうです。
元画像が少なく、検証が足りていない面もありますが、その他の条件を揃えた場合に一目でわかる改善があったことは間違いないと思います。

最後に

背景を白くすることで、生成画像の質は向上しましたが、キャラの名前が一目でわかるほどのクオリティではないので、まだまだ改善が必要そうです。

この後は「なるべく少ない画像で生成する」の目標からは外れてしまいますが、表情差分を増やすなど、教師画像の量を増やしてどうなるかを試してみたいと思います。（イベントスチルやSDキャラとかも増やしたいですね）

ここまで読んでいただきありがとうございました。