ダンスと舞踊譜と生成AI（その1）
昨年から生成AIと舞踊譜を使ってダンスの振付作成を試してきた。テキストベース生成AIで舞踊譜を生成、それを動きに変換してロボットなどで踊らせようと考えている。
実家こたつ #大晦日ハッカソン
— まつした (@yskmjp) December 31, 2023
ChatGPTにテーマを与え、5モーションの組み合わせで舞踊譜を作らせ、toioを踊らせることできた〜。
基本構造できたので、あとはChatGPT演劇の動きにしたり、ダンスとして複雑化させたりやりたいけど、本日はここまで。 pic.twitter.com/etwZPLqoaY
Soraでダンス動画を作る
新たにOpenAIのサービスとしてプロンプトから動画を生成できるSoraがリリースされたので、舞踊譜から振付動画を作ることを試してみた。
使う舞踊譜としては「無駄な時間の記録」で公開されているスコアを利用した。
増田美佳 「あたたかな顔」
生成AIと舞踊譜とダンス
— まつした (@yskmjp) December 14, 2024
OpenAIのSoraで舞踊譜から振付を作る試み。
スコアを元にダンスを立ち上げるプロジェクト
「無駄な時間の記録」https://t.co/qMRw0sWfv4
公開されているスコアのうち増田美佳 「あたたかな顔」一句目「てのひらをしたへ向ければ我が下あり」で作った振付。 pic.twitter.com/m3awR46VDK
オリジナルのスコアは以下
https://kamimuramegumi.info/wp/wp-content/uploads/masuda_2021.pdf
岡田智代 「記憶の壁」
生成AIと舞踊譜とダンス
— まつした (@yskmjp) December 14, 2024
岡田智代 「記憶の壁」のステップ1をやりたいのだが付箋触ってくれない…
指示書系のスコアはノウハウが必要そう。ChatGPT初期の複数条件を守らせるプロンプトを工夫してたの思い出す…https://t.co/qMRw0sWfv4 https://t.co/XBOojb36B3 pic.twitter.com/a4i0CgVels
オリジナルのスコアは以下
http://kamimuramegumi.info/wp/wp-content/uploads/okada_score.pdf
たくみちゃん 「たくみちゃんの動く城」
生成AIと舞踊譜とダンス
— まつした (@yskmjp) December 14, 2024
たくみちゃん 「たくみちゃんの動く城」のスコアの最初のシーン「老人のように腰を曲げ、つま先立ちになる。重心は右足／左足を小刻みに行き来する。」
具体の動作指示だが、複数の指示を同時に成立させるためには自然言語のみでは難しくプロンプトの工夫が必要そう。 https://t.co/XBOojb36B3 pic.twitter.com/p0KYGBAQST
オリジナルのスコアは以下
神村恵 「記録の時間な無駄」
生成AIと舞踊譜とダンス
— まつした (@yskmjp) December 14, 2024
神村恵 「記録の時間な無駄」のAパートを3箇所のルート、3つのテキストに簡略化してやってみたけど、やはり複数の指示を合成するのが難しい。 https://t.co/XBOojb36B3 pic.twitter.com/yiYi7s1mk3
オリジナルのスコアは以下
http://kamimuramegumi.info/wp/wp-content/uploads/kamimura_score.pdf
具体性の高い舞踊譜の方が、意図を反映した振付が作られると考えていたが、実際は指示を無視する事象が多発した。
これはAIでテキスト生成する場合もしばしば見られる現象で、プロンプトの工夫で意図したアウトプットを得るための手法が多数開発されている。振付においてもプロンプトの工夫でより意図を反映させることが出来ると思われるので、色々と試してみたい。
今年観たAIとダンスの試み
2024年に見たAIとダンスを組み合わせた作品
高橋春香「GPT48」
ChatGPTに48ステップの振付を作らせて踊る試み。来場者にはプロンプトが公開されていて、実際の舞踊譜を見ることができたのが面白かった。
KAAT×山田うん×池上高志「まだここ通ってない」
自立制御されたドローとダンサーが相互作用で影響しあいながら舞台上を動く。
次回につづく
いいなと思ったら応援しよう！
