![見出し画像](https://assets.st-note.com/production/uploads/images/123910318/rectangle_large_type_2_400b01ce464dcf70271eb39e8abf9966.png?width=1200)
画像生成AI忘備録 12月第一週
※11月の収集し忘れた情報も含みます。
新技術
MagicAnimate
TikTokを運営するByteDanceが公開した、用意したモーション動画をコントロールネット「DancePose」で変換して一枚の写真から動かす技術です。
Animate Anyoneとはまた違う技術でもあります。
うわぁぁ、サンプル動かしたら、モナリザが走り始めてる。キモい! #MagicAnimate pic.twitter.com/WQ89CQ6zbD
— あるふ (@alfredplpl) December 5, 2023
huggingface上では性能の高いGPUがなくても体験することができます。
抹茶もなかさんによる論文の翻訳&解説
Magic Animate簡易論文解説書きました!https://t.co/fvj3OMpnEA
— 抹茶もなか (@GianMattya) December 6, 2023
X-Adapter
SD1系のLoRAやコントロールネットを再トレーニングすることなく変換可能な技術。これによりSD1系の高性能なコントロールネットをSDXLに対応させたりすることが期待されています。
【神プラグイン現る】
— saip (@_saip_) December 6, 2023
ヤバすぎる…
すべてのSD1.5を過去にする「X-Adapter」が革命的
今まではSD1.5⇔SDXLでLoRAやControlNetに互換性がなかった
そのため高品質なSDXLへなかなか移行できなかった
しかし、追加トレーニングなしでモデルをSDXL対応へアップグレードできるアダプターが発表… https://t.co/SeDMNN0Chz
新規SDXLモデル
animagine-xl-2.0
Linaqruf氏がファインチューニングしたanimagineの改良版V2が公開。
CounterfeitXL
Counterfeitシリーズで有名なrqdwdw氏(X名:NahidaDiffusion)のCounterfeitXL V2が公開。
blue_pencil-XL V2.0
ぶるぺんさんが公開中のblue_pencil-XLのメジャーアップデートされV2.0が公開。
blue_pencil-XL-v2.0.0です! #SDXL
— ぶるぺん/blue.pen5805 (@blue_pen5805) December 1, 2023
v1.0.0 より無難な感じにしたので多分簡単になったんじゃないか!?
代償に実写風が出しにくくなりました。この世界は難しい
Civitai: https://t.co/WlYmN6asCn pic.twitter.com/pTNKMHP8T3
kawaii_pencil-XL
同ぶるぺん氏の新作モデルも公開。顔が特徴的なモデル。
kawaii_pencil-XL
— ぶるぺん/blue.pen5805 (@blue_pen5805) December 4, 2023
かわいいねhttps://t.co/FIZO2BfEcG pic.twitter.com/aY7g0d46Dc
DuplicationXL
あいきみ氏公開の3つの有名モデルをベースにマージしたモデル。
3つのアニメスタイルのモデルをベースにいろいろマージした #SDXL のモデル「DuplicationXL」をアップしました。#AIart
— あいきみ (@AiWithYou1) December 6, 2023
それぞれのタグとかクオリティとかが効くと思います(多分)
CounterfeitXL
Animagine XL
Anime Illust Diffusion XL
+ etc....https://t.co/nU7Zk2SfUN pic.twitter.com/3EVy7XtWzh
SD2系モデル
stabilityai/sd-turbo
SDXL turboと同系列の高速化技術を使用したSD2系モデル
unaestheticXL
あいきみさんよりSDXL用negative TIが公開。
#SDXL 用のNegative TIをアップしました~
— あいきみ (@AiWithYou1) December 1, 2023
(多分)アニメ・イラスト系です。
モデルの相性もあるので好みのやつを使ってください(定期)
unaestheticXL_hk1https://t.co/SpRuPuiD1y pic.twitter.com/ZdqX53KvsE
NovelAI
ねむさんによるNovelAI V3のqualityタグに関する検証した記事も公開されています。
クオリティ系プロンプトの構成 https://t.co/m2NybiZsrW
— ねむ (@nemhiyo) December 2, 2023
NovelAIのプロンプトを3パターン紹介しつつほかのプロンプトを追加して作例検証した記事です✨
見出しイラストに使ったプロンプトは、作例の一番上のものにgorgeous sofa,Chinadress,bun,flower,night,starを追加して作りました。#ねむプロ pic.twitter.com/m2LnYIFwx0
こちらはNovelAIの各設定について検証です。
NovelAIの各設定についての検証 https://t.co/yRPj3kbFDT
— ねむ (@nemhiyo) December 7, 2023
パラメーターの設定をいじるとどのように変化するのかを画像付きで分かりやすいようにまとめました。NovelAIの絵に変化を取り入れたい方は是非トライしてみてください✨
stable Diffusion WebUI
へむろっくさんがいつも使っているstable Diffusion WebUIの設定に関する記事。あまり話題に上がることがないネガティブTIなども紹介されています。
花笠さんによるdiscodeを利用したstableDiffusionサーバーの構築方法に関する記事。
音楽生成AI
まにまにさんによる音楽生成AIの「Suno」についての記事。実際に使ってみてどのようにことを感じたか、将来「Ai音楽で泣ける日は来るのか」について語られています。
法律
北京のインターネット裁判所の一審判決でAI生成画像に著作権が認められました。判決を全文日本語訳した方がいたのでご紹介します。
パラメータをすべて一致させれば同じ画像が生成できることで自分がその画像を作ったことが証明できることなど、生成AIならではの性質が有利に働いた部分があるようです。
生成AI(Stable Diffusion)による生成画像の著作物性を認めた北京インターネット裁判所の判決文全文を日本語訳してみました。以下のリンク記載の記事を参考いただけますと幸いです。
— ジャック・ランラン (@Jack_Almania) December 4, 2023
※翻訳に誤りなどありましたら忌憚なくご意見いただけますと重ねて幸いです。https://t.co/YavrlRj8n7 https://t.co/gX6COFfjQ6
柿沼弁護士による日本で裁判が行われた際の論点
ChatGPT4による要約はこちら(監修を得た厳密なものではありません)
日本でAI(人工知能)を使ったときに起こる著作権の問題についての裁判では、主に以下のようなことが重要です。
原告(訴える人)がAIを使って作品を作った場合:
その作品に本当に著作権があるかどうかを見る必要があります。
被告(訴えられた人)がAIを使った場合:
画像を作るAIの場合: 被告がAIで原告の作品に似た画像を作ったとき、それが著作権を侵害しているかどうかを考えます。これは、作られた画像が元の作品にどれだけ似ているか、また元の作品にどれだけ頼って作られたかで判断されます。
言葉を扱うAI(LLM)の場合: ここでは、被告が原告の作品を使ってAIに何かを教えたり、情報を集めたりしたとき、その行為が特定の法律の範囲内で許されるかどうかを考えます。
簡単に言うと、AIを使った著作権の問題では、AIがどのように使われたか(原告によってか被告によってか)、作られた作品が元の作品にどれだけ似ているか、そして特定の法律がその状況に適用されるかどうかが大事なポイントです。
中国の裁判所がAI生成物に著作物性を認める判断を下したことで話題になっていますね。
— 柿沼 太一 (@tka0120) December 6, 2023
判断内容を詳細に紹介しておられる方がいて、大変勉強になりました(リンクは後ほど)。
今後、日本でAIと著作権侵害問題が裁判になる場合の争点は、私が思いつく限り以下のようなものかなと。
1…
柿沼弁護士によるAIにおける依拠性のお話
ChatGPT4による要約はこちら(監修を得た厳密なものではありません)
この文章は、AI(人工知能)が作るものが、他の人が作った作品にどれくらい似ていてもいいか、という問題について考えています。ここで大切なのは「依拠性」という言葉です。依拠性とは、AIが人間の作ったものをどれだけ参考にしているか、ということです。
文章では、二つのパターンがあります。
パターン1:AIが学習するときに使った作品(例えば、絵や文章)と、そのAIが後で作るものが、別の人によって使われる場合です。この場合、AIが作ったものを使う人が、AIが元にした作品を知らないかもしれません。そうすると、その人の行動に「依拠性」があるかどうかが問題になります。ただし、もしAIを使う人が、AIが何を学んだかを知っていれば、依拠性があると言えるでしょう。
パターン2:AIを使って何かを作る人が、AIが何を学んだかを知っている場合です。ここでは、その人はAIが使った作品を知っているので、依拠性があると言えます。
要するに、AIが人の作ったものをどれだけ参考にしているか、そしてそれを使う人がそれをどれだけ知っているか、ということが重要なんです。それによって、AIが作ったものが元の作品にどれだけ「依存」しているかが決まります。AIが作ったものが元の作品に似ているだけで「依拠性」があるとは思っていません。
AIと著作権侵害の論点において「依拠性」が議論されることがある。
— 柿沼 太一 (@tka0120) December 3, 2023
主としてパターン1とパターン2の場合だが、これまで「難問」として議論されてきたのはパターン1(ただし依拠性を認める論者が多数)。… pic.twitter.com/Qr65nvd7Zj