動画生成AI「Runway Gen-3 Alpha」でドローン映像に挑戦

Runwayの「Gen-3 Alpha」が一般公開されました。

いろいろなYouTuberの方が解説してくれています。

特にオススメは下の２本、わかりやすいです。

その他、たくさん公開されています。

特に今回はテキストから動画を創りだす「Text to Video」なので「プロンプト」が特に大切になってきます。

そこでとてもわかりやすく「Runway Gen-3 Alpha」のプロンプトガイドを日本語で解説してくれているnoterの方がいらっしゃいました。

あと、海外の方の情報も勉強になりました。

その結果、わたしも有料プランに参加して「ドローン動画」を創ってみました。なかなか、良くできたと思ったので、
８万人メンバーがいる海外のＡＩ関連のXコミュニティ
にさっそく投稿したら、１日で削除されました。（笑）

何がよくなかったか全くわかりませんが、このコミュニティでは日本人は嫌われているかもしれないと思い、退会しました。無反応で削除されたのが不気味でした。

ということで、YouTubeに動画もアップロードしてみれるようにしましたのでご覧ください。

動画は「1080p（HD）」の画質でアップロードしてありますので、YouTube の画面下の「設定」ボタンで「画質」のところを「1080p（HD）」に変更したのち、一番右の「全画面」ボタンをクリックすれば、ネット回線の速い方は高画質表示で画像を確認することができます。

関連する情報はXに何回か投稿しています。
https://x.com/slowbreath/status/1809516715644252395
https://x.com/slowbreath/status/1809526343828402661

Drone appears in Tokyo sky ver1.0
東京上空にドローン出現
https://x.com/slowbreath/status/1809516454896890261

東京の夜の街を飛行するドローンと、それを見上げている人々の視点を映した短い動画です。

この60秒のショート動画はすべて生成AIで作成されました。Runway Gen-3 Alpha によるテキストからビデオへ。 MusicFX によって作成された 60 秒のループ。

*The main keywords in Prompt

1st clip / 10second
High angle, FPV, Wide angle, Lens flare, Hyperspeed, Emerges, Cinematic

High angle,FPV,Wide angle,Lens flare, Hyperspeed,Emerges,Cinematic. High-definition 8K footage. The year is 2030, and the neon lights of Shibuya, Tokyo, Japan, shine at night. A futuristic, ultra-small drone suddenly appears from the sky above Tokyo. The drone stops for a moment and watches the neon lights of Shibuya at night. The drone suddenly plummets and approaches the neon lights of Shibuya at night. The drone races through the night traffic of Shibuya at super high speed.

Prompt

2nd clip / 10second
High angle,FPV,Wide angle,Lens flare, Hyperspeed,Emerges,Cinematic.

High angle,FPV,Wide angle,Lens flare, Hyperspeed,Emerges,Cinematic. High-definition 8K footage. The year is 2030, and the neon lights of Shibuya, Tokyo, Japan, shine at night. The futuristic ultra-small drone itself appears. The drone moves straight ahead at high speed from a slightly elevated position above Shibuya Street. The camera position is always in the center. The camera angle is symmetrical.

Prompt

3rd clip / 5second
High angle,FPV,Wide angle,Lens flare, Hyperspeed,Emerges,Cinematic.

High angle,FPV,Wide angle,Lens flare, Hyperspeed,Emerges,Cinematic. High-definition 8K footage. The year is 2030, and the neon lights of Shibuya, Tokyo, Japan, shine at night. The futuristic miniature drone itself reappears, zooming at high speed over the streets of Shibuya, before rising and disappearing into the distance.

Prompt

4th clip / 10second
Low angle,FPV,Wide angle,Lens flare, Hyperspeed,Emerges,Cinematic.

Low angle,FPV,Wide angle,Lens flare, Hyperspeed,Emerges,Cinematic. High-definition 8K footage. The year is 2030, and the neon lights of Shibuya, Tokyo, Japan, shine at night. A futuristic ultra-small drone appears. The drone moves at high speed above Shibuya Street, looking down. The camera angle is looking straight down from the sky.The camera angle is symmetrical.

Prompt

5th clip / 10second
Close up,Slow motion,Cinematic,zoom in.

Close up,Wide angle,Diffused lighting, Slow motion,Cinematic.zoom in. High-definition 8K footage. The year is 2030, and the neon lights of Shibuya, Tokyo, Japan, shine at night. A beautiful 16-year-old model-like Japanese woman in the night streets of Shibuya looks up at the sky above Shibuya with a surprised expression. Her gaze is directed at the sky at a fairly diagonal angle. The woman has short blonde bob hair. She is wearing a pink off-the-shoulder top and denim jeans.

Prompt

6th clip / 10second
Reverse playback of 2nd clip

7th clip / 10second
Reverse playback of 1st clip

*プロンプトの主なキーワード

1st クリップ / 10秒
ハイアングル、FPV、広角、レンズフレア、ハイパースピード、エマージュ、シネマティック

2nd クリップ / 10秒
ハイアングル、FPV、広角、レンズフレア、ハイパースピード、エマージュ、シネマティック

3rd クリップ / 5秒
ハイアングル、FPV、広角、レンズフレア、ハイパースピード、エマージュ、シネマティック

4th クリップ / 10秒
ローアングル、FPV、広角、レンズフレア、ハイパースピード、エマージ、シネマティック

5th クリップ / 10秒
クローズアップ、スローモーション、シネマティック、ズームイン

6th クリップ / 10秒
2nd クリップの逆再生

7th クリップ / 10秒
1st クリップの逆再生

Settings（設定）
Generated with : Gen-3 Alpha
Seed : 2543568397
Aspect ratio : Landscape (16:9)
Resolution : 720p (1280x768)

Runway Gen-3 Alpha
https://runwayml.com/ai-tools/gen-3-alpha/

MusicFX
https://aitestkitchen.withgoogle.com/ja/tools/music-fx

Prompt of MusicFX is "TECHNO DUBSTEP, BASSES, KEYBOARDS, REALLY FAST, BASS".

Drone appears in Tokyo sky ver7.0
https://x.com/slowbreath/status/1809359762515194218