キャバクラ未経験のITエンジニアが画像生成AIで「理想のキャバクラライフ」を爆誕させるまで
はじめに
本記事はアドベントカレンダー「画像生成 Advent Calendar 2024」の12月18日の記事として書かれたものです。
生成AI技術の進化が止まらない中、私が挑戦したのは 『キャバクラにハマるさえないITエンジニア（＝私：キャバクラ未経験）』 のシチュエーション生成です。中心に据えたのは Stable Diffusion （ComfyUIベース）での静止画生成、そしてLumaAIやRunwayやHailuoAIでの動画生成。この “生成AI総力戦” で、リアルには実現しない理想の世界が結構自然に描けたので共有しようと思います。
本記事では、画像生成AIツールの ComfyUI/IP-Adapter、顔描画を向上する comfyui-reactor-node、さらに進化する 動画生成AIサービス の比較を交え、 技術のフル活用 で作り上げた4つのシチュエーションをご紹介します。
生成AI技術の中核と活用方法
1. Stable Diffusion（ComfyUI + IP-Adapter）
役割：
静止画の生成と服装、背景のカスタマイズ。
技術ポイント：
IP-Adapter：キャバ嬢の服装を「サンタコス」等自分好み衣装に変更。
Attention Maskingによるマスキング処理：以下の動画を参考に左右2人のシーンを自然に配置。
結果：
緊張感や笑顔など「理想の瞬間」をガチャ生成で細部まで再現。
2. Face Rewap（comfyui-reactorノード）
役割：
自分の顔を自然にキャラクター合成し、表情のリアリティを向上。
技術ポイント：
Reactorノードの使い方：以下の動画を参考に顔を忠実に再現
結果：
1枚の画像でも驚くほど似た顔画像が生成できる（似てるけど完全に似てないのが公開しやすくて良いです^^）
3. 動画生成AIツールの比較
LumaAI（DreamMachine）
特徴：ダイナミックな動きが得意。アウトドアやデートシーンに適している。複数キーフレーム指定可能（２つまで）。
課題：顔が欧米風になりがちで、アジア系キャバ嬢の再現が難しい。
特徴：静止画を忠実に動画化。顔の崩れが少なく、自然な動きが強み。複数キーフレーム指定可能（３つまで）。
課題：動きが控えめだが、安定感は抜群。
特徴：表情の豊かさやストーリー性が秀逸。AIキャバ嬢との掛け合いにドラマを感じさせる。
課題：顔の再現性はやや不安定。複数キーフレーム指定不可能。
生成した4つの妄想シチュエーション
※全てComfyUI上でIPAdapterとFaceSwapを活用して生成したものです
1. 初めての屋外デート（東京駅周辺）
設定：初デートに選んだのは東京駅
2. 屋外キャンプデート
設定：キャンプ場で大自然を背後に微笑む二人
3. キャバクラのクリスマスパーティ
設定：クリスマス装飾がきらめくキャバクラで、サンタコスのキャバ嬢にご機嫌なITエンジニア。
4. ポッキーゲームを楽しむITエンジニア
設定: もうすっかりキャバクラ通いにも慣れて、キャバ嬢とポッキーゲームに挑戦！
生成動画のまとめ
ここまで紹介した4つのシチュエーションを 各動画生成AIサービス で動画化してみました。どれも力作なのでご覧ください！
初めての屋外デート（東京駅周辺）
※HailuoAI（表情豊かで身振り手振りも入り好き）/Runway-Gen3（動きは少ないが表情が自然）/LumaAI（ほとんど動かなくて怖い/気の強そうなキャバ嬢に半ギレされてるのが好き）の順
屋外キャンプデート
※Runway-Gen3（動きあまりないけど顔の表情が自然で好き）
キャバクラのクリスマスパーティ
※HailuoAI（（サンタコスのキャバ嬢にタジタジになるITエンジニアの表情が良い）/LumaAI（まさかの展開に唖然…）の順
ポッキーゲームを楽しむITエンジニア
※HailuoAI（今回の検証で一番の傑作、キャバ嬢の呆れつつも笑顔な表情が好き）/新参のKLING1.6（口にポッキー入れてほしいのに鼻の穴にいれられても喜んでる姿が情けなくて好き）
まとめ：生成AIで妄想はここまで現実に近づく
現実では絶対に実現できない「キャバクラにハマるITエンジニア」というテーマ――生成AIを活用することで、ここまでリアルに再現できました。
Stable Diffusion で静止画を作り込み、Face Rewap で顔を自然に反映し、動画生成AIで滑らかな動画に仕上げる。この技術の組み合わせが、理想の世界を実現する第一歩です。生成AIの進化は止まりませんが、画像でも動画でもやはり「どれぐらい生成AIを"コントロール"できるか」が鍵な気がしています（何となく美麗ですごい画像は子供でも簡単に生成できる時代）。興味ある方が多い場合はより詳細な生成フロー（ノウハウやTips）も共有していきたいと思います。
次のステップは 動きのあるポーズや感情表現 を取り入れること。そして動画生成AIがさらに進化すれば、AIの中だけとは言え “理想のキャバクラライフ” も完成形に近づくはずです。OpenAIのSORAも出てきたしまた来年も生成AIでのキャバクラライフは充実しそうです^^。