見出し画像

動画生成AIの最前線💖Hunyuan-Video-LoRAで簡単トレーニング&オリジナル動画作成🎥無料・オープンソースで使い方も簡単✨リアル系もアニメ系もLoRAで自由自在!GUIツールで初心者も安心💕

どうも皆さん!お店で試着した服が、鏡の前では最高にかっこよく見えたのに、家に帰って着たら「あれ?」ってなる、錯覚マジックに弱い葉加瀬あい(ハカセアイ) です!

今回は、ComfyUIでHunyuan-Video-LoRAを使って、自分好みのキャラクター動画を簡単に作れる方法について解説します!

動画生成って、難しそう…って思いますよね?特に、好きなキャラクターの動画を作ろうとすると、専門知識が必要だったり、そもそもやり方が分からなかったり。

「自分の好きなキャラクターの動画を手軽に作れたらいいのに…」と思いませんか?

実は、Hunyuan-Video-LoRAと、あるツールを組み合わせることで、その悩みを解決できるんです!さらに、今回は初心者でも簡単にLoRAのトレーニングを行える方法も紹介します!

ということで今回お話しする内容はこんな感じです!

  • ① 無料で使える動画生成AI、Hunyuan-Video-LoRAのすごさを徹底解説!どんなキャラクターの動画が作れるの?

  • ② コマンドラインは不要!GUIで簡単操作、初心者でも安心のLoRAトレーニング方法とは?

  • ③ パッケージをダウンロード&簡単セットアップ!Hunyuan-Video-LoRAを使いこなすための手順を、わかりやすく解説!

それで、私の メンバーシップ に入門されている方は、いつものように記事内容を 動画 で見ることができます!

動画版は、こちらのURLからご覧ください!

https://note.com/ai_hakase/n/nbd96432b14f2

それから、Noteのメンバーシップ の入門者さんには 質問対応 なども行っていますので、感想や質問などありましたら、できれば Xのリプライ で教えてください!

XのDM や Noteのコメント でも構いません🙆‍♀️

※ 質疑応答の際は 『NoteのID + 質問したいNote記事のURL』 を添えてください。

https://x.com/ai_hakase_

それでは、本日もよろしくお願いします!


Hunyuan-Video-LoRAで動画生成AIモデルをトレーニングする方法

ということで、今回は Hunyuan-Video-LoRA のトレーニングのセットアップ方法について解説していきます⋯!

実は私もこちらの記事で、高速版の動画生成やLoRAの適用方法などを解説していました。


Hunyuan-Videoとは?

ここら辺についてもう少し詳しく解説すると、 Hunyuan-Video は、無料で簡単に動画を作れるオープンソースモデルです。

すごいのが、画像生成AIのような感じで、LoRAを適用して追加学習させたデータを使って動画が作れるんです⋯!

例えば、お気に入りのキャラクターの画像などを学習させると、そのキャラクターの動画が作れるようになります。

今回はその LoRAのトレーニングについて 詳しく解説しますね⋯!

Hunyuan Videoとは?

こちらの記事では、 Hunyuan Videoの動画生成方法 について解説しています。ぜひ、合わせてご覧ください⋯!


Hunyuan VideoのLoRAについて

Hunyuan VideoのLoRAには、どのようなラインナップがあるのでしょうか?

こちらの添付画像では、CivitAIにアップロードされているHunyuan LoRAの例を紹介しています。

例えば、「Rem from RE:0 for HunyuanVideo Realistic and Animated」や「Studio Ghibli Style - HunyuanVideo」など、様々なスタイルがあることがわかります⋯!

これらのモデルを使うと、一体どのような動画が作れるのでしょうか?想像するだけで、とても楽しいです⋯!

https://is.gd/QlnQKE

多彩なLoRAのご紹介

トレーニングも簡単なものがいろいろと出てきているので、画像生成AIの黎明期のSD1.5時代くらいのような豊富な LoRA が出ています。

多くのユーザーが注目する画像生成AIとLoRA

言ってしまえば、それぐらい 注目されている といった感じでしょうか⋯!

オープンソースの現状と注意点

ただし、オープンソースで規制がなく色々作れてしまう反面、 NSFW のものなどもあるので、少し注意してください!

https://is.gd/tlP9OB

LoRAを使用した動画生成の品質について

ちなみに LoRA を使って生成できる動画の品質は、とても高いので本当におすすめです!リアル系でもアニメ系でも、すごくきれいに生成できるといった雰囲気です!

動画のモデルはこちらになります。

https://civitai.com/models/1068416

トレーニング方法 について

さて、今回の本題である トレーニング方法 についてですけれども…!

一応、公式のGitHubリポジトリはこちらになります!

少し難しいのですが、基本的にはこちらからご利用いただけます。

https://tinyurl.com/278kcrq8

コマンドラインでの操作について

ただし、こちらの使い方に関しては、下記のようにコマンドラインでコマンドを入力して使用する形となります…。

そのため、プログラムなどに慣れていない方ですと、少し使いづらいかもしれません!

つまりは…GUIがなく、セットアップが面倒なようです。

GUIで簡単操作!LoRAトレーナーのご紹介

LoRAを使った画像生成モデルのトレーニング、なんだか難しそう…なんて思っていませんか?

でも、大丈夫です!今回は、 初心者の方でも簡単に LoRAのトレーニングを行える方法をご紹介します!

なんと!すべてのリポジトリ、モデル、Python、そしてGUIを含むパッケージが作成されたそうです!
これには、GUI、つまり画面操作でできるLoRAトレーナーが含まれているので、 コマンドライン操作が苦手な方でも安心 ですね!

こちらを使えば、簡単にHunyuan Videoをトレーニングできちゃいます!

きっと皆さんも使いやすいと感じるはずです⋯!今回はこちらをベースにLoRAのトレーニングを行っていきたいと思います。

ちなみに、Gradioフレームワークが採用されているため、Paperspace GradientやGoogle Colabなどからも実行できるかと思います!

パッケージのダウンロードと解凍

そうしましたら、早速ダウンロードなどをやっていきましょう。

流れとしては、パッケージをダウンロードして、そのパッケージの一部のファイルを更新するといった感じです。

パッケージのダウンロードはこちらから↓(Google Driveのリンクなので、もしかしたら今後ダウンロードリンクは変わる可能性があります)

ここから先は

3,479字 / 16画像

🎈葉加瀬のAI研究室 ~あいラボ~ 記事/動画/質問プラン

¥2,599 / 月
あと2人募集中
このメンバーシップの詳細

この記事が参加している募集

この記事が気に入ったらチップで応援してみませんか?