【世界初】誰でも無料で使えるSora並の動画生成AI「Luma AI」を徹底解説《使い方＋仕事で使える活用のコツ5選》

2024年6月16日 16:46

みなさん、こんにちは。
チャエンです！（自己紹介はこちら）

3Dモデル生成で有名だったLuma AIが、超クオリティの動画生成AI「Dream machine」を一般公開しました。
実際にSoraで公開されたプロンプトを入力しても、そこそこのクオリティを出せるのがすごいですね。a16zを筆頭にシリーズBで$43Mを調達済みで、アプリも200万ユーザーほどで伸びてる会社が制作しています。

【世界初：Sora並の動画生成AIが誰でも無料で使える】

3Dモデル生成で有名だったLuma AIが超クオリティの動画生成AIを一般公開

しかも、月間30枚は無料で生成可能。

実際にSoraで公開されたプロンプトを入力してもそこそこのクオリティを出せる。

やはり3Dモデル発なので、クオリティが高い。… pic.twitter.com/rwWkSxwefE
— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) June 13, 2024

3Dモデル発なのでクオリティが高いにも関わらず、月間30枚は無料で生成可能です。

今回はこのLuma AIの会社概要をはじめ、新しく公開した「Dream machine」できることや使いこなすコツ、他の動画との違いを解説します💡
新しい動画生成AIを使いこなせるように、最後までぜひご覧ください！

1.Luma AIの概要

Luma AIはアメリカ・サンフランシスコ発の企業で、主に3Dモデル生成技術を提供しています。

2024年1月には、a16zを筆頭にシリーズBラウンドで4,300万ドルを調達し、Nvidia A100 GPU約3000台のコンピュートクラスターを活用して新しいAIモデルの訓練を行っています。

ユーザーがスマートフォンで撮影した画像データを元に、AIが3Dモデルを生成するサービス「GENIE」を提供していました。その後「Dream Machine」と呼ばれる動画生成AIを一般公開しました。

1-1 Luma AIの特徴

撮影画像から3Dモデルの作成：iPhoneを使って物体や製品、日常シーンを撮影するだけで、リアルな質感や照明効果を含む詳細な3Dモデルを数分で生成します。
プロフェッショナルなツールが不要：初期投資のために専用のデバイスやツールが必要ないので、誰でも簡単に高品質なモデルが手に入るのがとても魅力的です。
テキストプロンプトから3Dモデルの作成（GENIE）：テキスト指示を元に3Dモデルを生成することも可能で、10秒もかからずに4つの3Dモデルを生成します。NeRF（Neural Radiance Fields）という技術を用いて、複数の写真から三次元の状態に復元する技術を活用しています。

マルチモーダルTransformerモデルの採用：AWSとNVIDIA最新GPUで高速トレーニングされたモデルを採用しているので、スケーラブルな先進アーキテクチャを実現しています。

1-2 「Dream Machine」の機能

2024年6月12日、Luma AIは新たに「Dream Machine」と呼ばれる動画生成AIを公開しました。

高解像度の動画生成：Dream Machineは最大4Kの高解像度動画を生成することができます。非常にクリアで詳細な映像を作成することが可能です。
動きのなめらかさ：動きのなめらかさが向上しており、リアルなカメラアクションや滑らかな動きを再現することができます。例えば、ドローンが建築物を飛び回るようなシーンも自然に生成できます。
細部までリアルな描写：120秒で120フレームのビデオを作成し、細部までリアルに描写します。