芸術系AI（2023年4月アーカイブ）
はじめに
芸術AIの情報2023年4月分アーカイブです
芸術系AI注目情報（2023年4月29日～2023年4月2日）
#DeepFloydIF
2023年4月29日
ついに画像生成AI「DeepFloyd IF」が公開された！
— 小猫遊りょう（たかにゃし・りょう） (@jaguring1) April 28, 2023
テキストをよりよく理解し（テキストエンコーダにはT5 XXLを使用）、テキストを画像中に描画可能。
まずは研究用ライセンスでの公開で、フィードバックを取り入れ、より寛容なライセンスでの公開に移行する予定とのことhttps://t.co/11PzxXD2nx pic.twitter.com/GLNjkfcYRp
#アニメーション
2023年4月29日
AI
— 852話 (@8co28) April 28, 2023
youtubeの作業用BGMありがちなアニメーション
（曲は動画編集で使えるmiss you） pic.twitter.com/mL1XClGH4k
#写真の色変更
2023年4月29日
【新時代の画像編集AI】
— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) April 27, 2023
ピンポイントで写真の色を変えれるAI画像・動画編集「Pixelcut」が超面白い
ズボン、服、髪の毛、靴とピンポイントで色を変えれて映え写真を自由に作れる
Metaの新AI「SAM」によりできた新機能
・背景変更
・写真の物体削除
・短編動画自動生成
など機能盛り沢山
↓解説 pic.twitter.com/qTal03mXnq
#ControlNet
2023年4月29日
ようやく記事完成したと思ったら、漫画からスクリーントーンを除去して線画を読み込める新プリプロセッサー「lineart_anime_denoise」が追加されたらしいですわ😇😇 #controlnet https://t.co/4PfeEvFMkN pic.twitter.com/FmwuNTOaOS
— 賢木イオ＠スタジオ真榊 (@studiomasakaki) April 27, 2023
#音楽からダンス
2023年4月29日
Finally!
— Yohei (@yoheinakajima) April 27, 2023
AI model that analyzes music and creates realistic dances 🕺💃🕺💃
wen AI dance battle?https://t.co/BDpeXaxtK7 pic.twitter.com/7i2bhUnKzl
#リアルタイムオブジェクト認識
2023年4月29日
これ、AIが完全にエージェント化しててやばいすね
— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) April 27, 2023
GPT-4とwhisper活用+カメラでリアルタイムにオブジェクト認識させて様々な質疑応答を可能にしてる⚡️
動画内では「このジュースは何カロリー？」って質問にもソースを提示した上で答えてくれたり。pic.twitter.com/84v3j9hX3d
#AskAnything
2023年4月26日
【必読】動画の中身について質疑応答できる『Ask-Anything』がすごかった⚡
— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) April 24, 2023
・再生中の動画について質問→回答を生成
・GPT,miniGPT4,StableLMを活用
・動画に関する回答から一般論の生成まで可能
またすごいの出てきましたね
GPT活用ってことは動画に関係ない一般論の生成もできるってことか🤔 pic.twitter.com/Xzy4jQhvL2
#Nijijourney
2023年4月26日
新しくNijijourneyに搭載された背景特化スタイルの「scenic style」を試してみてる。
— KAJI | 梶谷健人 (@kajikent) April 25, 2023
画像はそれぞれ一旦「Shinjuku」「Shibuya」「New York」「Paris」とだけ入れてみた結果なんだけど、どことなく新海誠っぽい笑 pic.twitter.com/ZeCBCRPPf6
#スマホで動画編集
2023年4月26日
【速報】
— チャエン | 重要AIニュースを毎日発信⚡️ (@masahirochaen) April 25, 2023
最強のAI動画編集「Runway」が遂にiOSアプリをリリース（今まではPC版のみ）
実際に使ってみたが、スマホでAIによる文章動画編集はヤバい
UIも最高で超楽しい
制限あるが基本無料利用可
Text to Video機能も今後使える
やっぱりスマホで簡単にAIを使えるのがAI普及の鍵となる
解説↓ pic.twitter.com/JQjAOxpg49
#構図指定方法
2023年4月26日
構図指定や、特定のアイテムを特定の画角と位置で置きたい場合。プロンプトで出そうとすると相当難しいけれども、欲しいアイテムを個別に低解像度でしゅつりょくしたらあとは雑コラ作ってi2iすると、わりと思い通りの表現がいけた。 pic.twitter.com/IhzksPFnNA
— こぴぺ(AIイラスト) (@co_pipe_AIArt) April 24, 2023
#動画
2023年4月26日
AIキャラクターなのに、これだけの動画を出されると実在感ハンパないな。 https://t.co/or3O9Zr0PQ
— MuRo (@MuRo_CG) April 23, 2023
#Anything3D
2023年4月23日
既存の3D生成AI（4つ）とMeta AIの出したsegment anything model(SAM)を組み合わせて画像上の色々なオブジェクトを3次元化できるAnything-3Dが発表。
— bioshok(INFJ) (@bioshok3) April 21, 2023
下図は最初にSAMをかませて画像から犬を抽出し、後はここ半年Dreamfusionあたりから使われている3D合成の発展版の3DFuseを使用した例。 https://t.co/zP98qbf24h pic.twitter.com/bQ1BRJ1CiF
#テキストからアニメ
2023年4月23日
Gen2でテキストからのみ生成したアニメらしい。こういう系の動画生成見てるとこの技術がどこまで到達するのか、いつまで3DCGが必要とされるのかふと頭をよぎる https://t.co/zDiRyC1yie
— Hirokazu Yokohara (@Yokohara_h) April 21, 2023
#ControlNet
2023年4月23日
「ええ～、アプデったってそんなに変わらんでござろう～？」と思って触ってなかったControlNet1.1触ってみたけど。実装されたAnimeLineartの自動着色が1.0のscribble着色と比較してかなり精度が上がってますね。これはなかなか使い物になってきましたわ。 pic.twitter.com/8jvoavVcaX
— あぶぶ＠健全 (@abubu_newnanka) April 21, 2023
#動画生成テスト
2023年4月23日
AIで動画生成テスト5。以前作ったリアル系のCG動画をイラスト風に変換。今回はi2iを多段階で処理してみた。元動画が低画質なので不要な揺れが出てる気がする pic.twitter.com/ezjPAy6vxA
— Hirokazu Yokohara (@Yokohara_h) April 21, 2023
#あの頃Lora
2023年4月23日
「あの頃Lora」作った話｜852話 @8co28 #note https://t.co/h2i5MG5fOA
— 852話 (@8co28) April 21, 2023
#レトロ美少女
2023年4月23日
AI
— 852話 (@8co28) April 21, 2023
90年代～2000年初頭周辺までの「あの頃」の所謂美少女萌え絵が出せるLoraを配布します。
このLoraはAI出力画像によって作成されており、既存の著作物は学習に使用していません。
少々癖があり破綻しやすいです、promptは適当にALT参考にしてください。https://t.co/48CRQzc728 pic.twitter.com/PwaVVuJ8at
#リアルタイムお絵かき
2023年4月19日
お絵描きをリアルタイムで画像生成する
— しょーてぃー / Experience Designer & Prompt Designer (@shoty_k2) April 18, 2023
このスクリプト作った人、MADだな笑(リスペクト)
お絵描きに集中できるか不安になってきた笑
🔗 https://t.co/fJ2yeCjd0Rpic.twitter.com/1ZbbfBwK6D https://t.co/9Hf2dMAj64
#Invideo .io
2023年4月19日
テキストから動画を生成するInVideo AIが来週ついにローンチ
— しょーてぃー / Experience Designer & Prompt Designer (@shoty_k2) April 18, 2023
触ってみたい...
🔗先行登録https://t.co/tWeg7fMrf4pic.twitter.com/oeCgOqLGrI https://t.co/UPyxsyhAEY
#DINOv2
2023年4月18日
【速報】Meta AIが高性能なコンピュータビジョンモデルをトレーニングする新しい手法『DINOv2』をリリースを発表👁
— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) April 17, 2023
ファインチューニング不要で、さまざまなコンピュータビジョンのタスクに活用できる。… pic.twitter.com/NtwaGbQ7mL
#Stablediffusion
2023年4月17日
The combination of #stablediffusion and #controlnet could potentially revolutionize the entire manga and anime industry. ✨ model: https://t.co/UERQoxOPFa + #ControlNet v1.1 Control anything v3 with anime lineart 🥳 #colab please try it 🐣https://t.co/NTydgKORpP pic.twitter.com/aQFdgDuoq9
— camenduru (@camenduru) April 14, 2023
#AnimatedDrawings
2023年4月17日
無料でキャラクターイラスト1枚からぬるぬる動くアニメーションを作成するAI「Animated Drawings」をMeta AIがリリースhttps://t.co/2huNDUnGFw
— GIGAZINE(ギガジン) (@gigazine) April 14, 2023
#DreamPose
2023年4月14日
単一画像をインプットすると細部まで高品質な動画を生成する『DreamPose』という技術が公開🔍
— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) April 13, 2023
・画像をポーズモデルに合成→動画を生成する
・Stable Diffusion活用
・複数画像をインプットすると精度向上
結構スムーズに動いてる感じあります
ECサイトとかVR空間でめちゃ活用できそう💡 pic.twitter.com/kVGuPohyl0
#text2video
2023年4月14日
けさ見た論文ｗ
— forasteran (@forasteran) April 12, 2023
"Follow Your Pose"＝Pose-Guided Video Diffusion！
例示の動画からポーズ挙動をガイドにtext2video生成できる奴
試した(上:例示→下:生成)
🕺🕺🕺 Follow Your Pose 💃💃💃
Pose-Guided Text-to-Video Generation using Pose-Free Videos (Mon, 3 Apr 2023)https://t.co/AQz4oT8ry8 pic.twitter.com/Cr6gAnIYqr
#棒人形でスライド
2023年4月12日
画像生成AIで、手書きの棒人間の絵を
— 武地 実 @Gatebox × ChatGPTクラファン (@takechi0209) April 11, 2023
イラストに変換してもらって企画書に使う実験。
ド下手な棒人間もちゃんと認識してくれて、そのままイラストにもしてくれた。
これは資料作成する全ての企画、営業職が助かるやつ！ pic.twitter.com/3RRBtAFazn
#WonderDynamics
2023年4月10日
すげええええぇえぇえ！！！こんな動画をAIが作ってくれる時代！！！🤯🔥🙀✨🌟🎉@WonderDynamics pic.twitter.com/CFSMrAwKXO
— オレンジ/メタバース撮影技術者 (@orange_3134) April 7, 2023
#Plask .ai
2023年4月10日
これは革新的
— チャエン| Web3.0×海外テック×AI (@masahirochaen) April 7, 2023
3Dのマネキンを自由に動かして、好きなポーズで画像を生成できる「https://t.co/7Zg0N2FyYD」が面白い
しかもリアルな人だけでなくアニメ画像にも対応
ポーズを決めて、プロンプトを打てば瞬時に画像を作れる
これは画像生成の幅が広がる
無料で使えて最高 pic.twitter.com/fRxQexe0jd
#SegmentationAnything
2023年4月10日
Meta AIのSegment Anythingのデモを触ってみてるが、意味わからないくらいセグメンテーションの精度高いな…。
— KAJI | 梶谷健人 (@kajikent) April 7, 2023
マネキンの腕の時計や建物の窓一つ一つまで細かく識別。
これがLightroomなどの画像編集ツールに載ってくるとレタッチめちゃくちゃ楽になりそう。 pic.twitter.com/s40lbLSm50
#Nijijourney
2023年4月7日
#nijijourney 出力なのですが流石の既視感に学習画像そのまま出てるんじゃないか？という危機感を覚えたのでCCさくら有識者の方この画像「モロ元画像あるよ」みたいな絵があったら教えていただけませんかpromptは「1990sの同人便箋 --ar 2:3 --niji 5」のみです。 pic.twitter.com/kjCqV1lxrY
— 852話 (@8co28) April 6, 2023
#MetaAI
2023年4月7日
Reading @MetaAI's Segment-Anything, and I believe today is one of the "GPT-3 moments" in computer vision. It has learned the *general* concept of what an "object" is, even for unknown objects, unfamiliar scenes (e.g. underwater & cell microscopy), and ambiguous cases.
— Jim Fan (@DrJimFan) April 5, 2023
I still… pic.twitter.com/lFWoYAxDmw
#1枚画像から別視点の画像
2023年4月5日
zero-1-to-3https://t.co/MCWpHM565y
— 中鉢 (@Chubachi) April 4, 2023
１枚画像から別視点の画像が作れるらしい。
えぇ、これすごい、すごくない…？ pic.twitter.com/7PuXqDAxeD
#NijijourneyV5
2023年4月5日
AIイラスト生成サービス「niji・journey」がついにV5モデルを公開！https://t.co/9xPV26GGcw
— やまかず (@Yamkaz) April 4, 2023
#ControlNet
2023年4月5日
ControlNetを使って手軽にGIFアニメを制作できるWebUI拡張機能が公開https://t.co/3huAoRdS9E pic.twitter.com/WMFp3iLPpT
— やまかず (@Yamkaz) April 4, 2023
#Midjourney
2023年4月3日
【悲報】画像生成AI『Midjourney』が無料トライアル停止を発表
— 木内翔大｜AI時代に乗り遅れない為の必見情報を毎日配信📣 (@shota7180) April 2, 2023
・1年で1300万人のメンバーを獲得､急成長
・異常な需要と､トライアルの悪用がトライアル停止の理由と説明
・フェイクかどうかの見分けが付かずハラスメントやプロパガンダの温床となる可能性を懸念か
そうなるよなあ... pic.twitter.com/VSGUcbL9eu
#fliki .ai
2023年4月2日
動画生成AI「https://t.co/appKlfcbLO」が便利すぎてど肝を抜かれた
— チャエン| Web3.0×海外テック×AI (@masahirochaen) April 1, 2023
・無料利用可
・AI画像生成
・日本語対応
・URL to Vieo
・Text to Video
・Twitter to Video
・豊富な画像・動画テンプレ
と機能が多すぎ
生成動画の編集自由度も高い
日本語読み上げも可能で使い勝手No.1動画AI
後日解説予定 pic.twitter.com/YoMsrpv0nT
#AIイラスト
2023年4月2日
ここまでかわいらしくて
— YANO Tomoaki@20230612SEAD35in広島OS2-5 (@yanotomoaki) April 1, 2023
スッキリした絵が描けると
さすがにヤバい https://t.co/fpdYUjfxZ5
#アートに作者は不要か
2023年4月2日
日本経済新聞TheStyle2023年4月2日#AIアート を考える指針となる良記事
— YANO Tomoaki@20230612SEAD35in広島OS2-5 (@yanotomoaki) April 1, 2023
著作権を問い直す良い機会だと私は思う https://t.co/KZ753IDdVJ pic.twitter.com/cZ6dC0aYxm
本noteは私の備忘録ですが、自由に読んでください サポートは、興味を持ったnote投稿の購読に使用させていただきます