
Kritaで写真を元に建築パース生成し、リアルタイムで点景を加える
面白いので、しつこく Krita AI Diffusionで遊んでますがw、今回は、参照元の写真と良く似た画像をControlNetのRefarenceで生成させ、その上にペンタブレットで子供や植栽などの点景を描き足しています。
下が参照元の写真です。プリプロセッサの強度を30%程度に設定し、写真を元に画像を生成させます。

下が生成された画像です。参照元の写真とは少し細部が異なっていますが、強度が低すぎると、描いたスケッチがそのまま出力されてしまいます。

参照元の写真とは別のレイヤに、ペンタブレットで子供や机、植木鉢などを描き足していきました。

ペンタブレットで点景を描き足すと、リアルタイムで画像が生成されるので、バランスを見ながら子供や机、植木鉢などが配置できます。

といったような感じで、建築パースが生成できました。プリプロセッサの強度が低いので、子供が少々漫画チックになってしまいました。
しかし、強度を上げ過ぎると、元の写真のイメージからは離れてしまいますので、良い塩梅を見出す必要ありですね。