中国発の動画生成AI " hailuoai " キャラクターの一貫性検証

同一キャラを使い続けたい

Midjourneyにもこの課題がありましたが、今は --cref パラメーターで解決出来ます。

AI動画生成 hailuoai の公式Discordでも、一貫性がテーマになって議論されています。

結論

完全なる一貫性は不可能。

ただし

近いキャラを使い続けることは可能。
(うーむ)
キャラだけでなくて、背景の世界も、一貫性を持たせる事が出来る。

一貫性を持たせる方法

Discord にて発表されていた内容の意訳です。
キャラを詳細に指定する。
人種、年齢、性別、髪型、髪の色、顔つき、、、
服装も細かくとことん。

同じ事を背景でも行います。

そして、プロンプトを次の構造で作ります。

1.キャラクター指定 (人種、年齢、性別など) とにかく細かく
2.キャラクターの衣装 とにかく細かく
3.世界観、背景、とにかく細かく
4.カメラワーク
5.シーンの説明 シナリオですね

一貫性を持たせるには、次からは、「4」と「5」だけを変えていきます。
「1〜3」は変わらない。

私は、Midjourneyでプロンプトを省略してAIに考えさせる技を使っているので詳細指定は苦手ですが、やってみました。

hailuoai 検証動画1

YouTube動画のタイトルは「可愛いハートシャワー💖💕💓❤️💞」ですが、
一貫性検証のために連続して作っていた動画です。

全員が同一人物とは見えないです。
ですが似ている子はあるので、そのカットだけ繋げば、同一キャラが演じているように見えるかなと。
そのためには素材を沢山作る必要があります。
今 hailuoai は無料で使い放題ですが、有料になると素材を沢山作ると言うのが難しくなるかもです。

また、今回のテーマとは異なりますが、AI動画の女の子表情が良く出来ています。雰囲気に合った小さな顔の動きなど、表情の表現力も強いと感じます。

hailuoai 検証動画2

YouTube動画のタイトルは「かめはめ波練習風景」ですが、
こちらも一貫性検証のために連続して作っていた動画です。

素材はもっとあるのですが、似ているカットのみ集めました。
ほぼ、全員が同一人物に見えると思います。

hailuoai 新サイト

検索上位に表示されるのは旧サイトです (2024/9/20時点)
こちらがシン・サイトです。

Hailuo AI Video Generator - Reimagine Video Creation : Simple. Joyful. AI-Powered. Create stunning videos effortlessly with simple text in minutes.

公式 Discordに書かれていた情報によると、hailuoai は 6人のスタッフで作られたそうです。
そのせいか、家内制手工業みたいな感じで手作り感あります。
上のリンクですがOGP未設定でアイコンが出ません。
そっちまで手が回らないのかなと思います。

AI動画の関連リンク

AI動画サイト hailuoai 最新情報

こちらは私が、手書きHTMLで作ったサイトです。
WordPressとか使用していなくて。。
ですが、OGP設定しているのでこうやってアイコンが出ます。