動く物体を検知してセグメントできる「FlowSAM」 他 / Catch up on AI 2024.4.22
Pick up
動画の中から、動きがあるもののみを検知して、セグメントできるフレームワーク。的確にかつある一定の閾値の動きのあるもののみ検出している。
Moving Object Segmentation:All You Need Is SAM (and Flow)
Project：https://robots.ox.ac.uk/~vgg/research/flowsam/
arXiv：https://arxiv.org/abs/2404.12389
Code：https://github.com/Jyxarthur/flowsam
【動く物体を検知してセグメント】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 22, 2024
FlowSAMは、SAM + Optical Flowで、動画内の移動する物体を検出してセグメントできるフレームワーク。
単一の負数の物体それぞれに対応。精度も非常に高い！
続く>>#AI #SAM pic.twitter.com/NXHOGtlzwF
Catch up on AI
生成AIに最適なUI/UXとは
【生成AIに最適なUI/UXとは】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 22, 2024
ダイナミックセッティングコンポーネント。とても直感的で、アニメーションも心地が良い、生成AI用のユーザーインターフェイス。
こういう細かいところで、使い勝手が決まる。生成AI時代の再考のUIはどんなものか考える。#生成AI #AIpic.twitter.com/yc6C4FJcog
思ってたけど創れなかったを現実に
【思ってたけど創れなかったを現実に】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 22, 2024
この動画はOpenAIのSoraで制作。こうしたアイデアだけで終わってしまったものを具現化され、世の中に大量にコンテンツが溢れ出す。
Soraの登場はコンテンツのあり方は大きく変わる転換点となりそう。#生成AI #AIpic.twitter.com/mQUtCPhfm6
YOLOv8による道路の異常を検出
【道路の異常を検出】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 22, 2024
YOLOv8 による道路の穴の検出が凄まじい精度。これはもうレベル的にも実用レベルかもしれない。
労働力が減る中、インフラは広大なのでこうした技術が発展しないと支えきれないかもしれない。#YOLO #AIpic.twitter.com/tEt0yucHPD
リアルタイム生成AIのUX
【リアルタイム生成AIのUX】@getimg_aiは、リアルタイム生成AIは数多くありますが、プロンプトを入力するタイミングと画像が切り替わるタイミングが絶妙な生成AI。
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 22, 2024
リアルタイム性を維持しながら、中間フレームのような生成結果が良いのかもしれない。#生成AI #AI pic.twitter.com/I5LmlQZrw6
生成AI時代の働き方 偏っても独裁で良い
【生成AI時代は偏っても独裁で良い】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 22, 2024
テロップが全部刺さる。1人の天才+AIが組織を凌駕する時代がくるかもしれないという話。数名の天才の集団が世界を変えるかもしれない。
この内容はうすうす感じており、胎動も感じる。特に日本ではまだチャンスがある気がしている。#生成AI #経営 #起業 https://t.co/X9a7y7I2m2
Sakana AIが提案した「進化的モデルマージ」を活用 EvoSDXL-JP
【推論速度が10倍】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 22, 2024
EvoSDXL-JPは、Sakana AIが提案した「進化的モデルマージ」を活用した画像生成AIモデル。
既存の日本語モデルに比べ、推論速度が10倍も高速に。デモは現在503。期待の画像モデル。復活したら試してみたい！#生成AI #AI https://t.co/ajdDJZHkxo
生成AIで同一のキャラクターを創る
【生成AIで同一のキャラクターを創る】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 22, 2024
Leonardo AI （@LeonardoAi_）スタイル リファレンステスト。キャラクター性に多少のズレはあるものの、画像一枚からという事を考えるとこの精度は素晴らしい。
課題だったことは少しずつ改善されていく。#生成AI #AIpic.twitter.com/LoWeXB2lAx
生成AIでリアルな岩のステージ
【生成AIでリアルな岩のステージ】
— 田中義弘 | taziku CEO / AI × Creative (@taziku_co) April 22, 2024
Photoshopで描いた岩を、Krea aiで生成、Magnificでアップスケール、 3daistudioで3D化。それらを組み合わせてリアルな岩の3Dステージを制作。
クオリティが素晴らしく、ワークフローもシンプルなため再現性も高い。#生成AI #3DCGpic.twitter.com/KVcD5105fG