
新しめのStable Diffusionモデルについて(更新終了)
◆重要な補足(参考)
NAIのリークモデル問題については、8-23-2024にNovelAI Diffusion V1 ウェイトが公開されたことにより、一定の区切りが付きました。本記事では問題について特に触れていませんが、ご参考まで。
(参考:NovelAIが初期のイラスト生成AIモデルを公開 研究・個人利用OK - ITmedia)
※新しいモデルに注力するため、新記事に移行しました。なお、本記事にしか掲載していないモデルも多数あります。
※最近の更新(2023年)
~03-19:「yumekawa_diffusion_ver2.1」「Dreamlike Anime 1.0」追加。
~03-10:「Cool Japan Diffusion 2.1.2」「Aikimi_dC3」「OpenNiji-V2」「OpenNiji」追加。「Aikimi_d(旧)」削除。
~03-05:「Mitsua Diffusion One」「Aikimi_dC1.0(Aikimi_diffusion)」「WD 1.5 Beta 2」追加。
~02-25:「Aikimi_dV3.0」「SomethingV2」「SomethingV1」「Subtly」「Animistatics」「Untitled」「NewArtModel Version 4」追加。
~02-20:「7th_anime_v2_B-fix」「Aikimi_diffusion」「Anything V3.1」「Anything V3.3」追加。「8528-diffusion」削除。
~02-18:「Alloy Models Brass Mix」「Alt Pastel」「Myne Factory Base Model」「Picasso Diffusion 1.1」「Replicant」「RuminationDiffusion」「WD 1.5 Beta」追加。
~02-05:「Counterfeit-V2.5(V2.1とV2.2も)」「Cool Japan Diffusion 2.1.2 Beta」「補足」追加。「7th Test」更新。
※複数のv1系Stable Diffusionモデルにおいて、データの破損(特定の位置にあるトークンが無視される現象)が確認されています。それらには目印「◆」を付けておきますので、下記の記事で詳細を確認してください。
※内容の誤り、掲載を推奨するモデルなどの情報がありましたら、末尾のTwitterまでお知らせいただけると幸いです。なお、掲載は個人的に興味のあるモデルに限定します。
1. はじめに
概要
22年8月にStable Diffusionが公開されて以来、多種多様なモデルが誕生し続けています。本記事では、アニメ、イラスト系が得意な新しめのモデルを中心に紹介します。マージモデルは下記の記事を参照してください(本記事にもマージモデルが含まれる可能性があります)。
2. v1系モデル一覧
名前の横に「(*)」が付いている場合は、破損チェック未実施(実施予定)です。「◆」はチェック時に破損モデルがありました。無印は、チェック時に破損モデルがありませんでした。「推奨」や「補足」の項目はざっくりな確認のみですので、詳細はリンク先でご確認ください。
7th Layer ◆
作者:godeyesai(syaimu)氏
https://huggingface.co/syaimu/7th_Layer
7th_layer/Abyss_7th_layer.ckpt
7th_layer/abyss_7th_layerG1.ckpt
7th_anime_v1/7th_anime_v1.1.*
7th_anime_v2/7th_anime_v2_[A-C,G].*
7th_anime_v2/7th_anime_v2_B-fix.ckpt
7th_anime_v3/7th_anime_v3_[A-C].*
推奨:NP
備考:破損は「v2_B」と「v2_C」のみ
7th Test
作者:godeyesai(syaimu)氏
https://huggingface.co/syaimu/7th_test
7th_anime_3.1_[A-C,Cg].ckpt
7th_anime_v2.1_B.ckpt
<del> 7th_anime_v3_test[A-C].ckpt(7th_anime_v3と殆ど同じ)
推奨:NP
8528-diffusion ◆
作者:852話氏https://huggingface.co/852wa/8528-diffusion 8528d-v0-*.ckpt
8528d-final.ckpt
ACertainty
作者:Joseph Cheung氏
https://huggingface.co/JosephusCheung/ACertainty
ACertainty.ckpt
推奨:CLIP Skip:2
補足:学習元として設計された
ACertainModel ◆
作者:Joseph Cheung氏
https://huggingface.co/JosephusCheung/ACertainModel
ACertainModel*.ckpt
推奨:CLIP Skip:2
ACertainThing ◆
作者:Joseph Cheung氏
https://huggingface.co/JosephusCheung/ACertainThing
ACertainThing*.ckpt
推奨:CLIP Skip:2
AniReal ◆
作者:Hosioka氏
https://huggingface.co/Hosioka/AniReal
AniReal.safetensors
AniReal.vae.pt (=kl-f8-anime2)
推奨:VAE
Anything V3 ◆
掲載者:Furqanil Taqwa(Linaqruf)氏
https://huggingface.co/Linaqruf/anything-v3.0
anything-v3-*.safetensors
<del> Anything-V2.1.ckpt
<del> Anything-V3.0*.ckpt
<del> any-v3-fp32-better-vae.safetensors
推奨:V2.1とV3.0はVAEが必要(V4側に掲載)
補足:出所と作者は不明、公開停止時前のファイルは削除、any-v3-fp32-better-vaeとanything-v3-fp32-prunedは同一
Anything V3.1
作者:Cagliostro Research Lab
https://huggingface.co/cag/anything-v3-1
anything-v3-1.*
anything-v3-2.*
推奨:Prompt等
補足:V3→V3.1はV3→V4とは別の系統、VAE不要
Anything V3.3
作者:Cagliostro Research Lab
https://huggingface.co/cag/anything-v3-3
anything-v3-3.*
補足:V3.1の系統、VAE不要
Anything V4 ◆
作者:andite氏
https://huggingface.co/andite/anything-v4.0
Anything-V3.0-pruned.ckpt
anything-v4.0*.*
anything-v4.5*.*
anything-v4.0.vae.pt(過去のバージョンと同一)
推奨:VAE
補足:V3は公開停止されたファイルと同一、V4はAbyssOrangeMix2をマージ
Baka-Diffusion ◆
作者:Hosioka氏
https://huggingface.co/Hosioka/Baka-Diffusion
Baka-DiffusionV1*.safetensors
Baka-Diffusion.vae.pt (=Anything)
推奨:VAE
BPModel
作者:Kurosu Chan氏
https://huggingface.co/Crosstyan/BPModel
bp_1024_*.ckpt
bp_mk*.safetensors
推奨:適当なVAE
補足:ACertaintyをベースに学習を行った
Counterfeit ◆
作者:gdgsfsfs(gsdf)氏
https://huggingface.co/gsdf/counterfeit-v1.0
counterfeit-v1.0.ckpt
推奨:NP、CLIP Skip:2
Counterfeit-V2.0
作者:gdgsfsfs(gsdf)氏
https://huggingface.co/gsdf/Counterfeit-V2.0
Counterfeit-V2.0*.*
推奨:NP、CLIP Skip:2
Counterfeit-V2.5
作者:gdgsfsfs(gsdf)氏
https://huggingface.co/gsdf/Counterfeit-V2.5
Counterfeit-V2.5*.safetensors
Counterfeit-V2.1.safetensors
Counterfeit-V2.2.safetensors
Counterfeit-V2.5.vae.pt(=Anything)
推奨:EasyNegative、VAE
Dreamlike Anime 1.0 ◆
作者:dreamlike.art
https://huggingface.co/dreamlike-art/dreamlike-anime-1.0
dreamlike-anime-1.0.*
情報:画像、一部の設定
推奨:Prompt、NP
EimisAnimeDiffusion
作者:Eimis M.(eimiss)氏
https://huggingface.co/eimiss/EimisAnimeDiffusion_1.0v
EimisAnimeDiffusion_1-0v.ckpt
Elysium Anime ◆
作者:Bob(hesw23168)氏
https://huggingface.co/hesw23168/SD-Elysium-Model
Elysium_Anime_V[1-3].*
推奨:NP、CLIP Skip:1~2、VAE(kl-f8-anime2)
Elysium Kuro
作者:Bob(hesw23168)氏
https://huggingface.co/hesw23168/SD_Elysium_Kuro_Model
Elysium_Kuro_Anime_V1.safetensors
Elysium_Kuro_Anime_V1-inpainting.safetensors
推奨:NP、CLIP Skip:2、VAE(kl-f8-anime2)
Evt_V2
作者:椎名晴樹(haor233)氏
https://huggingface.co/haor/Evt_V2
evt_v2-ema-pruned.ckpt
推奨:CLIP Skip:2
Evt_V3
作者:椎名晴樹(haor233)氏
https://huggingface.co/haor/Evt_V3
Evt_V3_ema.ckpt
推奨:CLIP Skip:2
Evt_M
作者:椎名晴樹(haor233)氏
https://huggingface.co/haor/Evt_M
Evt_M*.*
推奨:CLIP Skip:2
Evt_V4-preview
作者:椎名晴樹(haor233)氏
https://huggingface.co/haor/Evt_V4-preview
Evt_V4_e*.*
推奨:CLIP Skip:2
Myne Factory Base Model
作者:Myne Factory
https://huggingface.co/MyneFactory/MF-Base
MyneFactoryBase V1.0.*
推奨:Prompt等、VAE(vae-ft-mse-840000)、Steps:30~、CFG Scale:9~12
NewArtModel Version 4
作者:Nerfgun3氏
https://huggingface.co/Nerfgun3/NewArtModel4
NewArtModel4.*
補足:他モデルとのマージも可
Openjourney
作者:PromptHero氏
https://huggingface.co/prompthero/openjourney
mdjrny-v4*.*
https://huggingface.co/prompthero/openjourney-v2
openjourney-v2*.ckpt
OpenNiji ◆
作者:Buttercream(Korakoe)氏
https://huggingface.co/Korakoe/OpenNiji
https://civitai.com/models/5143/openniji
OpenNiji.*
OpenNiji-LoRA.safetensors
情報:画像、一部の設定
補足:VAEが必要(Anything)、anything-v4.5にniji・journeyの画像を学習
OpenNiji-V2
https://huggingface.co/Korakoe/OpenNiji-V2
https://civitai.com/models/14479/openniji-v2
OpenNiji-V2.safetensors
情報:画像、一部の設定
補足:SD-Siliconにniji・journeyの画像を学習
Plat Diffusion
https://huggingface.co/p1atdev/plat-diffusion
https://huggingface.co/p1atdev/pd-archive
作者:Plat氏
plat-v0-1.ckpt
plat-v1-2-*.*
推奨:VAE(kl-f8-anime2)
補足:v1系はv1.3.0未満
Shirayuki Anime
作者:Bob(hesw23168)氏
https://huggingface.co/hesw23168/SD_Shirayuki_Model
Shirayuki_Anime_V1-fp16.safetensors
推奨:VAE(kl-f8-anime2)
SomethingV1 ◆
作者:NoCRYPT氏
https://huggingface.co/NoCrypt/SomethingV1
SomethingRaw.safetensors
SomethingV2 ◆
作者:NoCRYPT氏
https://huggingface.co/NoCrypt/SomethingV2
somethingv2.safetensors
somethingv2_1.safetensors
推奨:EasyNegative、CLIP Skip:2
Waifu Diffusion 1.3.5ほか
作者:haru氏ほか(?)
https://huggingface.co/hakurei/waifu-diffusion-v1-4/tree/main/models
wd-1-3-penultimate-ucg-cont.ckpt
wd-1-3-5_80000-fp32.ckpt
3. VAE一覧
AUTOMATIC1111氏のStable Diffusion web UI(以下、web UI)では、VAEを別のものに変更して表現を変えることができます。使い方は、「5. 補足」で紹介しているweb UIの利用手順を参照してください。VAEを用意していたり(主に下記のコピー)、特定のVAEを使用するよう指示しているモデルもあります。
AnythingのVAE
https://huggingface.co/andite/anything-v4.0/tree/main
anything-v4.0.vae.pt
Stability AIのVAE
https://huggingface.co/stabilityai/sd-vae-ft-ema-original
vae-ft-ema-560000-ema-pruned.ckpt
https://huggingface.co/stabilityai/sd-vae-ft-mse-original
vae-ft-mse-840000-ema-pruned.ckpt
Waifu DiffusionのVAE
https://huggingface.co/hakurei/waifu-diffusion-v1-4/tree/main/vae
kl-f8-anime.ckpt
kl-f8-anime2.ckpt
naclbit(TrinArt)のVAE
https://huggingface.co/naclbit/trinart_derrida_characters_v2_stable_diffusion/tree/main
autoencoder_fix_kl-f8-trinart_characters.ckpt
Stable Diffusion originalのVAE
https://note.com/mayu_hiraizumi/n/n136bd7b3a156 の 8. を参照。
VAE mix test
https://huggingface.co/sp8999/test_VAE
mse840000_klf8anime.vae.pt
mse840000_klf8anime_klf8anime2.vae.pt
4. v2系モデル一覧
v2系モデルには設定ファイル(*.yaml)があります。モデルの配布先で用意していない場合は原則不要です。配布先で用意している場合は、それをモデルと同じ場所に設置してファイル名を同じにしてください(拡張子のみが異なる状態)。通常は、512x512のモデル(v2-base)であれば v2-inference.yaml が、768x768のモデル(v2)であれば v2-inference-v.yaml が使用されます。
Aikimi_diffusion
作者:Aikimi氏
https://huggingface.co/Aikimi/Aikimi_diffusion_base_wd-1-5_beta2
Aikimi_dC3.safetensors
情報:画像、設定(画像内)
補足:v2モデルhttps://huggingface.co/Aikimi/Aikimi_diffusion_base_wd-1-5_beta1
Aikimi_diffusion_*.safetensors
Aikimi_d*.safetensors
Alloy Models Brass Mix
作者:Plat氏
https://huggingface.co/p1atdev/alloy-mix
brass/[a-c]/alloymix-brass-[a-c]*.safetensors
補足:v2-baseモデル
Alt Pastel
作者:Plat氏
https://civitai.com/models/8885/alt-pastel
https://huggingface.co/p1atdev/alt-pastel
type_[a-c]/altpastel_type_[a-c]*.safetensors
補足:v2-baseモデル
Animistatics
作者:Maseshi氏
https://huggingface.co/Maseshi/Animistatics
Animistatics*.*
Animistatics.vae.pt(=Anything)
Animistatics.yaml
推奨:VAE
補足:v2-baseモデル
Cool Japan Diffusion
作者:あるふ氏
https://huggingface.co/aipicasso/cool-japan-diffusion-2-1-2
v2-1-2.*
v2-1-2.yaml
補足:旧バージョンは下記URLに掲載
https://huggingface.co/aipicasso
https://huggingface.co/alfredplpl/cool-japan-diffusion-for-learning-2-0
Lazurite
https://huggingface.co/p1atdev/ore-o
作者:Plat氏
lazurite-v1*.*
lazurite-v1.yaml
補足:LoRAのデータ有
Mitsua Diffusion CC0
作者:アブストラクトエンジン
https://huggingface.co/Mitsua/mitsua-diffusion-cc0
mitsua-diffusion-cc0-v1-0.ckpt
補足:後継モデル「Mitsua Diffusion One」公開済み、v2-baseモデル
Mitsua Diffusion One
作者:アブストラクトエンジン
https://huggingface.co/Mitsua/mitsua-diffusion-cc0
mitsua-diffusion-one.*
mitsua-diffusion-one.-base*
補足:絵藍(えらん)ミツアが広報を行っている、v2-baseモデル
Picasso Diffusion 1.1
作者:AI Picasso、あるふ氏
https://huggingface.co/alfredplpl/picasso-diffusion-1-1
v1-1.*
補足:v2モデル
Plat Diffusion
https://huggingface.co/p1atdev/plat-diffusion
https://huggingface.co/p1atdev/pd-archive
作者:Plat氏
plat-v1-3-*.*
plat-v1-3-.yaml
補足:v2系はv1.3.0以降
RuminationDiffusion
作者:Joseph Cheung氏
https://huggingface.co/JosephusCheung/RuminationDiffusion
Rumination*.ckpt
Rumination*.yaml
補足:test model、v2モデル
Stable Diffusion v2
作者:Stability AI
https://huggingface.co/stabilityai/stable-diffusion-2-1-base
v2-1_512-*.*
https://huggingface.co/stabilityai/stable-diffusion-2-1
v2-1_768-*.*
補足:初出のv2系モデル
Subtly
作者:だだっこぱんだ氏
https://huggingface.co/ddPn08/subtly
subtly-fp16.*
subtly-fp32.*
補足:v2モデル
Untitled
作者:Robin Rombach, Patrick Esser, Alfred Increment
https://huggingface.co/alfredplpl/untitled
untitled.safetensors
embeddings/positive/*.*
embeddings/negative/*.*
推奨:Prompt等、TI
補足:v2モデル、マージモデル「Untitled:Replicant」も公開された
Waifu Diffusion 1.4 Anime
作者:haru氏ほか
https://huggingface.co/hakurei/waifu-diffusion-v1-4
wd-1-4-anime_e*.ckpt
wd-1-4-anime_e1.yaml
補足:v2-baseモデル
WD 1.5 Beta
作者:Waifu Diffusion
https://huggingface.co/waifu-diffusion/wd-1-5-beta
https://cafeai.notion.site/WD-1-5-232cfa9443fc4661b469e7d1df8b7dd8
checkpoints/wd15-beta1-fp*.safetensors
checkpoints/wd15-beta1-fp*.yaml
embeddings/wdbadprompt.pt
embeddings/wdgoodprompt.bin
推奨:wdgoodprompt & wdbadprompt(アニメ系の場合)、VAE(kl-f8-anime2)
補足:v2モデル
WD 1.5 Beta 2
作者:Waifu Diffusion
https://huggingface.co/waifu-diffusion/wd-1-5-beta2
https://cafeai.notion.site/WD-1-5-Beta-2-Release-Notes-2852db5a9cdd456ba52fc5730b91acfd
https://cafeai.notion.site/WD-1-5-Beta-2-Aesthetic-Ver-c44a410fec06478fbf1a08a9890310ff
checkpoints/wd-1-5-beta2-fp*.safetensors
checkpoints/wd-1-5-beta2-fp*.yaml
checkpoints/wd-1-5-beta2-aesthetic-fp*.safetensors
checkpoints/wd-1-5-beta2-aesthetic-fp*.yaml
推奨:VAE(kl-f8-anime2)
補足:aestheticは微調整を行った、v2モデル
WD Unofficial Releases
作者:Waifu Diffusion
https://huggingface.co/waifu-diffusion/unofficial-releases
wd14-booru-step-14000-unofficial.safetensors
補足:非公式(開発中もしくはトレーニング中)のモデル
補足:v2-baseモデル
yumekawa_diffusion_ver2.1
作者:teftef氏
https://huggingface.co/teftef/yumekawa_diffusion_ver2.1
WD4-teftef_LoRA_50000-merged.ckpt
WD4-teftef_LoRA_50000-merged.yaml
情報:画像、設定
推奨:Simple prompts、NP
補足:LoRA有(*_50000.pt、*_80000.pt)、v2-baseモデル
Ushio Anime
作者:shinomakoi氏
https://civitai.com/models/10462
ushioAnime_v1.safetensors
補足:WD 1.5 Beta1にトレーニング、v2モデル
5. 補足
web UIの利用手順について
下記の記事にて説明していますのでご覧ください。
safetensors形式について
従来の形式(pickle)より安全でロードが高速とされていて、web UIでは同じように利用できます。現在は、こちらの形式での公開が増えています。
6. twitterの連絡先
noteのアカウントはメインの@Mayu_Hiraizumiに紐付けていますが、記事に関することはサブアカウントの@riddi0908までお願いします。