生成AIでスケッチから現実に3DCGを創造 他 / Catch up on AI 2024.5.13
Pick up
適切に生成AIを選定利用すれば、3DCGの技術が無くてもここまでのことが可能に！
【生成AIでスケッチから現実に3DCG】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) May 13, 2024
クリエイターとしての高い能力があってこそですが、スケッチから現実世界に3DCGまで生成し設置した動画。
生成に利用されたツールは原文で紹介されています。#生成AI #3DCG #ARpic.twitter.com/aEWZjzq3GX
Catch up on AI
CGをセグメントしてAIレンダリング
【CGをセグメントしてAIレンダリング】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) May 13, 2024
Depthとかだけではなく、セグメントしてプロンプトを割り当てている。確かにこの方法だと個別にプロンプトを割り当てることができ、とても柔軟にイメージを形にできる。
とても素晴らしい発想と技術。#動画生成AI #AIアニメpic.twitter.com/WiSgbB2aqk
VRから全ての家具を削除 An Empty Room is All We Want
【VRから全ての家具を削除】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) May 13, 2024
An Empty Room is All We Wantは、家具のみを消去できるフレームワーク。若干不自然なところはあるものの、今までやりたくてもできなかったが、クリアになった。
続く>>#画像生成AI #AIhttps://t.co/d8D7d6enfp
参照画像を簡単に利用 AnifusionでIPAdapter
【参照画像を簡単に利用】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) May 13, 2024
Anifusion (ANIFUSION DOT AI)でIP Adapterが搭載。非常に簡単にリファレンス画像を読み込んで画像生成できる。インペイントモードにも対応しているため着せ替えも可能。#画像生成AI #AI https://t.co/x2H6tUBgCs
自由自在なヘビ型ロボ MIRRAX-150
【自由自在なヘビ型ロボ】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) May 13, 2024
MIRRAX-150はマンチェスター大学の研究者によって開発された検査や探索の作業を行うために作られたロボット。
LiDARを使用して3Dポイント クラウドをマッピングなど様々な機能を搭載。#ロボットpic.twitter.com/cPLKr7YcrL
3DCG x 生成AIレンダリング
【3DCG x 生成AIレンダリング】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) May 13, 2024
素晴らしい精度の生成AIレンダリング。こういった技術が一般化することで映像表現の可能性は更に広がっていく。
シンプルに線だけではなくて、Depthやその他ガイドも利用しているみたい。#3DCG #AI #3Dレンダリングpic.twitter.com/bXS1RJL5Yx
テキストを検出し視覚化 VimTS
【テキストを検出し視覚化】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) May 12, 2024
VimTSは画像や動画から、テキスト情報を抽出できるフレームワーク。かなり細かい文字も多数の文字も検出できている。
ライセンスはGNU General Public License。
続く>>#AI #検出器pic.twitter.com/fyNe2U10YT
Adobe Neo x 生成AI
【Adobe Neo x 生成AI】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) May 12, 2024
Adobeが発表した3DCGを簡易的に制作できるProject Neoを利用した作品例。
簡単に3Dモデリングを行い、生成AIでテクスチャや背景を生成。#3DCG #生成AI #Adobepic.twitter.com/etr6dlURy4
わずか20ドルでスマートグラスを
【わずか20ドルでスマートグラスを】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) May 12, 2024
Open Glass AIは、どんなメガネもAIスマートグラスに変えられるオープンソース。
生活を記録し、人の名前を覚えたり、カロリーを計算したり、ライブ翻訳したり、その他多くの機能が搭載。
続く>>#AI #スマートグラスpic.twitter.com/ff6lPPnGBT