主要な動画生成AIの同一条件でのアウトプット検証 他 / Catch up on AI 2023.12.27
Pick up
Google VideoPoetと、代表的な動画生成AIの、Runway、Pika、Genmoによる動作の比較をまとめたデモ動画。
画像+プロンプトで様々な生成対象での検証が行われています。
AIによっても大きく特徴が分かれる。特性を理解してアウトプットイメージが事前に描けるようになると強い。
【各動画生成AIの動きの比較まとめ】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 26, 2023
Google VideoPoetと、代表的な動画生成AIの、Runway、Pika、Genmoによる動作の比較。
画像+プロンプトで様々な生成対象での検証。
生成AIによって個性があり、一長一短あるのが面白い。
<1/8> THX！（ @anukaakash ）pic.twitter.com/RFYIYWk3vY
Catch up on AI
AIアニメにも演出を！演出カットを入れるだけで劇的にクオリティが変わる
【AIアニメにも演出を！】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 27, 2023
AIアニメをベースに演出的なカットを入れることでの印象テスト。
一般化したAIによるvideo2videoで生成しているが、例えばキックがヒットする動きに合わせて、演出コマを差し込んでいます。
演出カットを入れるだけで劇的にクオリティが変わる。#AIアニメ #生成AI https://t.co/WMz69r32Bn
動画生成AIのカメラを自在にコントロール「MotionCtrl」
【動画生成AIのカメラを自在にコントロール】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 27, 2023
MotionCtrlはテンセントが発表した、動画生成用のカメラコントロールする技術。空間上のカメラの奇跡などを指定して、ビデオを生成可能です。
オープンソースでデモやコードも公開されています。
続く>>#AI動画 #生成AI pic.twitter.com/8lNAe7lX8N
次世代の3Dシーン構築データセット「LASA」
【次世代の3Dシーン構築データセット】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 27, 2023
LASAは、920件の実世界のシーン、スキャンと位置合わせされた10,412個の固有のCADモデルを含む大規模なデータセット。
現実世界をスキャンした際にオブジェクトを検知し、正しい姿で構造物を把握配置することが可能に。
続く>>#3Dpic.twitter.com/OV662aFBAo
スケッチから動画生成するワークフロー
【スケッチから動画生成】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 27, 2023
スケッチから高品質な動画を生成するワークフロー。
・スケッチを書く
↓
・Vizcom AI（ @Vizcom_ai ）でスケッチから画像生成
↓
・Leonardo AI（ @LeonardoAi_ ）の新しいモーション機能を利用して動画生成
その他の作例は続きから>>pic.twitter.com/HKCbcsTLgE
生成AIによるハイクオリティジャングル動画
【生成AIによるハイクオリティジャングル】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 27, 2023
Stable Video Diffusionを利用して生成された21:9の4Kシネマサイズムービー。
緑、水、鳥などとても美しい。ナレーションも相まって凄いクオリティ。
モデルはSDXLとSVDXT、生成は3090Ti（VRAM 24GB）を利用。#SVD #動画生成AIpic.twitter.com/PGolnri9mm
Midjourney v6で浮世絵を試す
【Midjourney v6で浮世絵を試す】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 27, 2023
v6になって飛躍的に性能が向上した、Midjourneyで、浮世絵が、どの程度再現されるのかテスト。結果、凄いレベルの出力が。
日本の浮世絵とサブカルチャーをかけあわせたアートがありますが、そういった浮世絵アートも再現できそうなレベル。#浮世絵 #生成AI pic.twitter.com/opud7YmFee
生成AIは新たな道具へ、手書きをリアルタイムにピクセルアートに変換
【生成AIは新たな道具へ】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 26, 2023
LCM以降、リアルタイムに生成できるAIが出現して、こういう利用の方法を見ると、絵を描く人の、新しい道具になった感がある。
ベースメントは人間のインプットというのが、見えやすくなったので、能力の拡張のためのAIというイメージがします。すごく良い！！#生成AI https://t.co/xIo6EIoFiY
高い再現度を持つ3D生成AI「GeoDream」
【高い再現度を持つ3D生成AI】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) December 26, 2023
GeoDreamは、多様性、再現度を犠牲にすることなく、一貫性のある3Dデータを生成できる手法。1024x1024のテクスチャを生成し、破綻の無い3DCGが作成可能です。
Stable-Zero123もサポートされています。
続く>>#3DCGpic.twitter.com/vIUhcgYw1g
AIのNewsやアートワーク情報を更新中⚡
X（Twitter）ではAIの最新情報を発信中🐦
この記事が気に入ったらサポートをしてみませんか？