【ComfyUI】イラストをラインアートに変換して塗り直す【SD1.5】

SD1.5用のLineArtモデルのダウンロード

SD1.5用のControlNetモデルが配布されています。

lllyasviel/ControlNet-v1-1 at main

この中から、今回はcontrol_v11p_sd15s2_lineart_anime.pthを使用します。

ComfyUIの起動スクリプトにモデルダウンロードを追加

ComfyUIの起動用のjupyter notebookにモデルダウンロードを追加します

!wget -c https://huggingface.co/lllyasviel/ControlNet-v1-1/resolve/main/control_v11p_sd15s2_lineart_anime.pth -P ./models/controlnet/

ワークフロー

sd15-lineart-repaint-workflow.json

11 KB

ファイルダウンロードについて

ダウンロード

今回はAnimagineXLで生成したイラストをdreamshaper(SD1.5系モデル)で塗り直してみました。

元画像と生成される画像

元画像
AnimagineXLで生成した1024x1024画像

元画像から生成された線画 512x512

線画からSD1.5系モデル(dreamshaper8)で塗り直した1024x1024画像

参考

DreamShaper - 8 | Stable Diffusion Checkpoint | Civitai

lllyasviel/ControlNet-v1-1 at main