ChatGPTはいずれビデオも解析可能に 他 / Catch up on AI 2023.11.1
Pick up
現在GPT-4Vはかなりの精度で画像を読み込むことが可能ですが、GPT-4Vを用いて、動画の理解ができるような研究が進んでいる。将来的にはChatGPTもビデオを理解し様々な回答をしてくれるようになる可能性が高い。
ChatGPTはいずれビデオも解析可能になる！?
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 1, 2023
MM-VIDは、GPT-4Vを用いて、長時間の動画や、1時間のコンテンツ内の推論、複数のエピソードにまたがるストーリーの把握といった複雑なタスクがもたらす課題に対処するように設計！https://t.co/eKB8sWv4x5#生成AI #AI #GPT4V pic.twitter.com/7tUoOZerLx
Catch up on AI
国内でも生成AIに大手が参入
国内でも生成AIに大手が参入。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 1, 2023
NTTは、来年3月からLLM「tsuzumi」を投入。ソフトバンクも24年にパラメーター数は3500億の国内最大級の生成AI開発。
続く>>#生成AI #LLM #国産生成AI
トランジション付きの長時間の動画生成に対応した「SEINE」
トランジション付きの長時間の動画生成に対応した「SEINE」
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 1, 2023
長尺の動画だとどうしても破綻してしまうが、トランジションを付けて生成することで、短尺を組み合わせて長尺にするという新しい考え方の生成AI。https://t.co/MEoKOeYBc2#生成AI #AI #AI動画pic.twitter.com/IKB9yO3dHn
自然言語でレイアウトが生成され、コーディングが自動で行われコードが出力される「patterns」
自然言語でレイアウトが生成され、コーディングが自動で行われコードが出力される「patterns」。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 1, 2023
局所的なデザインにはなりますがサイト制作者にとっては非常に有益。
続く>>#生成AI #WEBデザイン #AIpic.twitter.com/TPdFfx13ZW
非常に高品質な3D生成モデル「Rodin Gen-1」
中国の開発スタジオ @DeemosTech が発表した、非常に高品質な3D生成モデル「Rodin Gen-1」。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 1, 2023
テキストから3Dを生成できるがテクスチャも造形もかなりのレベル。#生成AI #AI #RobinGen1pic.twitter.com/oHDa3fWH2q
LCMを利用して、プロンプトを毎回送らずに、リアルタイムで生成
LCMを利用して、プロンプトを毎回送らずに、リアルタイムで生成する「Real-Time Latent Consistency Model-Text to Image」。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 1, 2023
テキストを打ち込むとリアルタイムに画像が生成されていく。恐らく全ての画像生成AIで取り入れられそうな技術。#生成AI #LCM #AIpic.twitter.com/CqdTtU4KCV
DALL-E3に、weird（奇妙）につづいて、stylizeも再現可能
DALL-E3に、weird（奇妙）につづいて、stylizeも再現可能に！
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 1, 2023
stylizeとは、どれだけプロンプトに準拠するか？という値。画像はstylize0〜1000までで段階的に生成したもの。#DALLE3 #生成AI #AI https://t.co/q3yH1HCUbn
3D生成AIに新しい可能性。3D生成の新しい手法「Classifier Score Distillation（CSD）」
3D生成AIに新しい可能性。3D生成の新しい手法「Classifier Score Distillation（CSD）」。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) November 1, 2023
CSD方法の有効性は、形状生成、テクスチャ合成、形状編集など、さまざまなテキストから3Dタスクにおいて確認されているとのことです！https://t.co/unVSMutAyQ#生成AI #AI #3D pic.twitter.com/gwj40LvWoW