Animate LCMで創る次世代AIアニメ 他 / Catch up on AI 2024.2.12
Pick up
ComfyUI / SD.15 / IP Adapter / SEG Masking / ControlNet / Animate LCMといった様々な技術をMIXして制作されたAIアニメ。
背景、キャラクター、動きのそれぞれのリファレンスを読み込んで見事に合わせてアニメーションにしている。
【Animate LCMで創る次世代AIアニメ】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) February 12, 2024
ComfyUI / SD.15 / IP Adapter / SEG Masking / ControlNet / Animate LCMで制作されたAIアニメ。
動き、背景、キャラそれぞれ指定されている。ワークフローが気になる！！#生成AIpic.twitter.com/jwHEaNZqwE
Catch up on AI
創作活動は生成AIで加速する。強いクリエイターにはAIは「鬼に金棒」
【創作活動は生成AIで加速する】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) February 12, 2024
引用元は完全に同意。
生成AIは周囲の強いクリエイターに話を聞くと「鬼に金棒」でしか無いというイメージ。AIを使役して創作活動の速度・質・試行回数を上げ、さらに良いものを作り上げている印象。
クリエイターの本質は作業では無いからなのかもしれない。#AI https://t.co/eApXDj4l1j
生成AIで同一人物を生成・量産「ConsiStory」
【生成AIで同一人物を生成・量産】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) February 12, 2024
ConsiStoryはNVIDIAが発表した画像生成AI。学習不要で同一キャラクターの異なる画像をプロンプトに応じて生成できる。
生成AIはすごいけど、一貫性=同じ人って難しい、それがそろそろ変わっていくのかもしれない。
続く>>#画像生成AI pic.twitter.com/bR0RQ9QZTS
ゼロショットText-to-Music「MusicMagus」
【ゼロショットText-to-Music】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) February 12, 2024
MusicMagusはゼロショットで音楽が生成可能な音楽生成モデル。
音楽の生成には、繰り返しの学習やファインチューニングが必要でしたがゼロショットでテキストから音楽を生成可能に。是非音声ONでデモを御覧ください。
続く>>#生成AI #AIpic.twitter.com/As9SKr8oB3
ゲームができるAI「R2-Play」ゲームで意思決定のマルチタスク機能と一般化機能が大幅に強化
【ゲームができるAI】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) February 12, 2024
R2-PlayはAIエージェントがゲームプレイの指示を理解できるようにし、それによって「Read-to-Play」機能をもたせたAI。
ゲームを学習に用いることで、意思決定トランスフォーマーのマルチタスク機能と一般化機能が大幅に強化。
続く>>pic.twitter.com/3OA0cflPWy
多くの人が最初に触れたAI『ドラゴンクエストIV』における人工知能
【多くの人が最初に触れたAI】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) February 12, 2024
『ドラゴンクエストIV』における人工知能が、J-STAGEに掲載。
パッケージから鮮明に蘇る「自分で動かさなくて良いのか！」となった記憶。なぜ今と思ったら、2月11日はドラクエ4の発売日だったのか！https://t.co/PZQIjw5IP2#AI #ドラクエhttps://t.co/fK6Uv2Ame4
アバターでファッションデザインCanvastique3D
【アバターでファッションデザイン】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) February 11, 2024
Canvastique3Dは、現実世界に投影したアバターに、読み取ったデザインをリアルタイムに投影。物理的なクリエイティブワークフローを拡張するデジタルツール。
すでにアルファプレリリースされています。AIとも相性が良さそう！
続く>>pic.twitter.com/osaMYLIU79
BMWがバーチャルインフルエンサーを起用
【BMWがバーチャルインフルエンサーを起用】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) February 11, 2024
採用されたのはLil MiquelaというInstagramで270万人以上フォロワーがいるバーチャルクリエイター。
AIの台頭により、本物と区別がつかない架空の人々は爆発的に増えていく。新しいメディアの転換点に今いるのかもしれない。pic.twitter.com/ymtqPvRjt8
ForgeとA1111の生成比較 - 同じパラメータでも若干異なる
【ForgeとA1111の生成比較】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) February 11, 2024
少しタイムラグがありましたが、Stable Diffusion WebUI Forgeをインストールして実験。同じモデル・プロンプトやその他パラメータなど全く同条件での生成比較。
ほぼ同じ結果ですが、ディティールでほんの少しだけ異なるのが面白い。
←Forge A1111→#画像生成AI pic.twitter.com/PXMUoOAIZu