見出し画像

Weekly Report 2024/10/02 (wed)

takio koizumi

個人的に気になったニュースや自主制作などの週報メモです。


自主制作 / 記事

Elemental Anima #0155

先日、江の島観光で行った江島神社や江の島岩屋からインスピレーションを受けて制作しました。ちょうど去年”Elemental Anima #0103"でウミガメをモチーフにした繋がりもあります。江島神社の奥津宮にあった"八方睨みの亀"がとても印象に残ったのもありモチーフに採用しました。全体の構図は、江島神社の社紋をベースにしています。江ノ島全体の地形、高低差、寺、灯台、洞窟、更に至る所にゼルダのトライフォースの様な社紋がありオープンワールドゲームのマップの様な感じでとても興味深かったです。データセットを沢山集める事ができ、文化や歴史も学習できるので旅行は良いですね。HAL(AI)に旅行の想い出を学習してもらい作品を制作するのは楽しいです。

作業BGM：Nintendo『ゼルダの伝説 ブレス オブ ザ ワイルド オリジナルサウンドトラック』

[データセット] 江島神社 / 江の島岩屋

[お知らせ] AIファッションイベント『NFFT2025_SS AI Fashion Movie 展』

ご興味がありましたら是非！

[ニュース] AI関連

[ComfyUI] 東京ComfyUI 交流イベント 簡易レポート

ComfyUIの交流イベントに行ってきました。周りでComfyUIについて話せる仲間が少なかったので、ワークフローの組み方など様々な議論が出来て最高に楽しかったです。開発者の方とは、同じノードベースのHoudiniの機能を紹介しました。隣の席の方がCivitAIに所属し"Open Model Initiative"のモデル制作リーダーをされている方でした。自分が今一番期待しているプロジェクトに関わる方だったので"データセットの重要性"や"オープンソース文化・歴史"、"今後の展望や裏話"などかなり熱いディスカッションが出来ました。次回がありましたらまた参加したいと思います。ComfyUI最高！

[動画] PIKA - PIKA 1.5

ここにきて動画生成サービスPIKAが1.5にバージョンアップして、かなり面白い表現になりました。特に後半のMelt、Expolotionなどはクオリティも高く、性癖も強めなのでPikaを触ってみたいと思いました。性癖での戦い方は良いですし、PVの作り方もうまいですね。動画生成サービスの勢力図が少し変わりそうです。

[動画] Kling AI - Lip Sync etc. 

リップシンク機能が追加されてAPIもウェイトリストなしで使えるようになりました。モーションブラシも対応していますし、今の所一番使い勝手がいいですね。

[動画] Luma AI - Dream Machine v1.6 Hyper fast video generation

生成速度が上がりました。結構時間がかかってたので、シンプルにありがたいアップデートですね。文面が完全にRunwayに対抗してる感じが"敵対的(GAN)"で素晴らしいですね。そろそろ動画系もCogX含めて"拡散(Diffusion)"の時期にはいって欲しいです。

[動画] Runway - 3D animations with Gen-3 Alpha

今週は大きなアップデートはありませんでしたが、シンプルで良い活用例ですね。

[LLM] OpenAI - DevDay

個人的には画像を用いたファインチューニング機能が気になりますね。クオリティチェックとプロンプト生成の仕組みを考えているので、こちらの情報は追ってみたいと思います。
モデル蒸留とAdvanced VoiceでHAL(AI)と会話できるようにしていきたいですね。

[企業] Meta Connect 2024

凄い情報量でしたね。Meta AIやLlama 3.2も嬉しいですが、Ray-Ban Meta smart glassesが一番気になりました。重さなども含めて一回試してみたいです。電脳コイルの世界にまた一歩近づいた感じでワクワクします。

[LLM] Dify.AI - Dify v0.9.0

Difyでチャットツールなどを制作する機会が増えたので、アップデートが重要になってきました。バグが無くなってるといいなぁ。

[画像] Flux.1 Dev - ControlNet Outpainting

Fluxのアウトペインティングワークフローも組もうと思っていたので、助かります。

[画像] Magnific ai - Mystic v2

Magnific aiはとんでもないレベルまできてますね。ローカル環境でここまで再現したい・・・。Fluxのアップスケーラーも出てきているので色々チャレンジしてみようと思います。

[3DGS] DaVinci Resolve - Irrealix Brings Gaussian Splatting

自分もたまに活用するIrrealix Brings Gaussian SplattingがAEだけではなく、DaVinci Resolveにも対応しました。

[3DGS] Chaos V-Ray 7 to support Gaussian Splatting

遂にV-Rayで3DGSをサポートし始めてきましたね。CG制作のワークフローが変わってくる感じがしてます。

[LLM] Ai2 - Molmo

GPT-4oやGoogleのGemini 1.5 Pro並みの性能を持ちつつ、サイズが小さいマルチモーダルモデル。ComfyUIにLLMを組み込む必要が出てきて、ちょうど今のニーズにピッタリなモデルなので嬉しいです。

[ComfyUI] ComfyUI - Molmo

そして、一瞬でMolmoに対応したComfyUIのカスタムノードが出ていたので、これは即試したいと思います。プロンプト自動生成+Flux+クオリティチェックワークフローをこれで一旦構築します。

[3D] Meta - Flex3D

Metaさん、こちらもあわよくばオープンソースにしていただけれると大変ありがたいです。

[音楽] Udio Lyric Editor

プロンプトから生成した歌詞に対して追加・編集など調整し楽曲を生成可能になりました。

[ComfyUI] cg-controller

赤いノードを一つのフローティングパネルに集約するカスタムノードです。最近出来るだけ簡素に使い易いワークフローの構築が求められるので、このアイデアは面白いですね。試してみようと思います。

[LLM] AMD - AMD-Llama-135m

AMDがかなり小さいLLMを公開しました。NPUもありますし、遂にAIモデル制作にも乗り出しましたね。Intelは出してたりしないんでしょうか？

[動画] Tencent - LVCD コード公開

先週紹介した線画の自動着彩フレームワークのコードが公開されました。

[記事] NVIDIA GeForce RTX 5090のスペックがリーク。CUDAコア21760と32GBのGDDR7搭載でTDPが600Wのモンスタースペックに

リーク情報にはなりますが、Fluxの影響でVRAMの消費もかなり上がったので、本当だったら嬉しいですね！消費電力はもう少し下がって欲しいですが、発売されたらすぐ購入したいです。

[記事] AI開発規制法案 カリフォルニア州知事が署名拒否で成立せず

かなり注目していた法案でしたが成立しなかったんですね。

[政府] 公正取引委員会 - 「生成AIを巡る競争」に関する情報・意見の募集について

しっかりと意見を送りたいと思います。

[記事] さくらネット､NVIDIA製GPUを追加調達　68億円で800個

日本で一番GPUを持ってるんじゃないでしょうか。

[ニュース] CG・ゲーム・リアルタイムエンジン関連

[Epic] Unreal Fest Seattle 2024 | Opening Session

Unreal Engine 5.5 Preview 1

[Epic] Unreal Fest Seattle 2024 | Unreal Engine 5.5 Preview 1

[Unity] Lattice Modifier for Unity


いいなと思ったら応援しよう！