StableDiffusionのCotrolNetで線画の出力を色々試してみる

はじめに

StableDiffuionのControlNetのModelを変えて線画の出力を確認してみる

元絵

ARIA THE ORIGINATIONの第11話からアリスを鉛筆描きして見る

プロンプト

pencil,A girl whose figure is reflected in a rain-soaked window
なるべくシンプルなワードを指定みる

PreProcesser と離散値について

PreProcesserはlineart(white & black)、離散値は0.2を指定する

Canny

Cannyを使う場合は、離散値を0.3以上にすると元絵との乖離が大きくなってしまう

lineart

soft_edge

lineart_anime

openpose

まとめ

個人的な好みで言えば、softedgeとcannyが好み
だけど、softedgeは手の描写がイマイチ、Cannyは離散値を0.3以上にできない、という問題があるので、絵の内容によってlineartを使うようにしています