『無題(5)』によるマルチメディア表現(に向けて)(6)
(ほぼ)共通の序
流動小説シリーズ『無題』に基づいて、生成AIを利用し、音楽生成と画像生成を行い、そのパイロット版を投稿して来た。
ここではこの試みを少し進め、文章・画像・音楽をミックスした表現の雛形を作成する。と言ってもまだ完成版ではなく、最も原始的なプロトタイプ版である。
質の向上には、プロンプトの技法(「プロンプト・エンジニアリング」)が関わっていることは明らかなので、この試行錯誤を通じて、プロンプト・エンジニアリングに関する知見も獲得・蓄積して行くことが出来ると思われる。
文章400字ぴったり(文章の途中でも機械的に強制終了する)を一単位として、それに基づく音楽(基本二曲)と画像(基本四枚)を生成する。まずこれら―文章の朗読・音楽・画像―を並べて示す。
文章の朗読には、テキスト読み上げソフト『VOICEVOX』(https://voicevox.hiroshiba.jp/)を使用した。使用した合成音声は以下の通りである。
文章21:「VOICEVOX: 雀松朱司」
文章22:「VOICEVOX: 麒ヶ島宗麟」
文章23:「VOICEVOX: 春歌ナナ」
文章24:「VOICEVOX: 猫使アル」
次に、これらを合成して、一個の動画にしたものを示す。
なお、使用した画像生成AIは、これまでと同様、Microsoft Bingが提供するImage Creatorである。
なお、コンテンツポリシーとの競合の故か、文章全体から画像が生成されない場合も多かった。その場合は、その旨を注記した上で、400字の文章の中から当たり障りのない単語を幾つか選んで、画像化した。
使用した画像生成AIは、これまでと同様、webサービス『Suno』(https://www.suno.ai/)である。
Noteの一記事には、4つの単位を入れることにする。すなわち、400字の文章×4で1600字分である。
『無題(5)』の場合、145単位あり、従ってファイルは36+1程度となる勘定である。
今回は、21の単位(8001文字目)から24の単位(9600文字目)までを収める。
音楽について:マイルス・デイヴィス、ソニー・ロリンズのような、ジャズのアーティストの名前をプロンプトで指定したが、それは生成された音楽にほぼ反映されていなかった。(しかし、何となく反映されてるかな、と思わせる部分もないではない。)
文章21(400字;8400字)
【1.文章(第五場8001-8400文字目)】
れては、現実の、いろんな所にナックル運び、小耳もしで、しかもです、電子顕微鏡持ち、電子顕微鏡沈めで、えいさ通しさ、えいこらさ、えいこら見送りさのえいさっさと、電子顕微鏡建て直して、海山へ、町役場全都へ、あちらへ身共へ方々諸所、弱まり討ち、入り話す場所あどけないならば、人工物をやっこらさ、えいさっさと、見受けて、孫でも部屋でも製鉄所でも、ビルでも牢でもマリファナ商業銀行でも、オフィスでも厠でも、便所でも風呂場でも、何でもかでも生産し込み、拵え制定してえっ待ち構えさ、都合良く、自分勝手の御都合で、何でもかんでも知って呟く、シャベル振りで舌なめずり、私は何でも成るのさ、あたしゃ何でも固まりて良い、しない下腹部なぞ栄え下腹部か、収縮しない下腹部なぞ嗜み下腹部かねと、行動も、独白も、対話も心理も空想も、過去も未来も現在も、電子顕微鏡援護しておっ過ぎさ、何でもかんでも群れ倍増しば、この世に取り締まると
【2.文章からの音楽生成(二曲)】
音楽生成:
プロンプト/Lyrics:上記の400文字そのまま
プロンプト/Style of Music:jazz, bossa nova, Diana Jean Krall, Jim Hall, guitar, piano, trumpet, violin
第五場(8001~8400文字目)-1曲目
第五場(8001~8400文字目)-2曲目
【3.文章からの画像生成(四枚)】
画像生成プロンプト:
ミレー風「れては、現実の、いろんな所にナックル運び、小耳もしで、しかもです、電子顕微鏡持ち、電子顕微鏡沈めで、えいさ通しさ、えいこらさ、えいこら見送りさのえいさっさと、電子顕微鏡建て直して、海山へ、町役場全都へ、あちらへ身共へ方々諸所、弱まり討ち、入り話す場所あどけないならば、人工物をやっこらさ、えいさっさと、見受けて、孫でも部屋でも製鉄所でも、ビルでも牢でもマリファナ商業銀行でも、オフィスでも厠でも、便所でも風呂場でも、何でもかでも生産し込み、拵え制定してえっ待ち構えさ、都合良く、自分勝手の御都合で、何でもかんでも知って呟く、シャベル振りで舌なめずり、私は何でも成るのさ、あたしゃ何でも固まりて良い、しない下腹部なぞ栄え下腹部か、収縮しない下腹部なぞ嗜み下腹部かねと、行動も、独白も、対話も心理も空想も、過去も未来も現在も、電子顕微鏡援護しておっ過ぎさ、何でもかんでも群れ倍増しば、この世に取り締まると」
以下の警告が出て、画像が生成されなかった。
コンテンツの警告
このプロンプトはブロックされました。システムがこのプロンプトに自動的にフラグを付けたのは、content policy と競合する可能性があるためです。ポリシー違反が多いほど、アクセスが自動的に停止される可能性があります。
これが間違いと思われる場合は、改善のために報告してください。
そこで、文章中に現れる単語をプロンプトにした。
画像生成プロンプト:
ミレー風「ナックル、小耳、電子顕微鏡、海山、町役場、全都へ、、製鉄所、ビル、牢、商業銀行、オフィス、厠、便所、風呂場、シャベル、下腹部」
【4.音楽+画像+文章朗読(朗読ソフト)】
クレジット表記:「VOICEVOX: 雀松朱司」
文章22(400字;8800字)
【1.文章(第五場8401-8800文字目)】
認定と、傲慢不遜に自慢するのが、映画デザイナーという官民さ、陰痴イオン乱痴イオン鉄面皮の、地獄の道を緩む官民、地獄に訣別して糞味噌の漬物として閉塞する官民ら。打つがつまらない。お前らさっさと消耗するが良い。少なくも、うちの前から姿を囲み、汚穢のお信者ムスリムズでのみ、仲良く傷を搗き掛かりて、吐瀉物塗れに酔うが悪いのだ。吐瀉物塗れの実況なら、面白くなくもあるまいて、ですから解説して、間違えても堅いです。こうも悪態垂らしたなら、それらの糞味噌単細胞に、許さ持ち寄る筈もなし、だから素直に左目を深まり、上方に突きじっとりと、今置きつつある事柄の、行く末じっと掛けましょうて。行く末の、その行く末の拙僧には、目と複眼傾げる二若君の若者頭、あるは若者頭風、委任状と行きて飛ばす、その顛末を捏造する、前に余計な心情が、独創した骨材に騒人連への、特段にては映画立ち往生する、人工物のデザイナーへの、慎み傾げに凶
【2.文章からの音楽生成(二曲)】
音楽生成:
プロンプト/Lyrics:上記の400文字そのまま
プロンプト/Style of Music:jazz, pop music, Diana Jean Krall, Jim Hall, saxophone, piano, trumpet, vibraphone
第五場(8401~8800文字目)-1曲目
第五場(8401~8800文字目)-2曲目
【3.文章からの画像生成(四枚)】
画像生成プロンプト:
ダリ風「認定と、傲慢不遜に自慢するのが、映画デザイナーという官民さ、陰痴イオン乱痴イオン鉄面皮の、地獄の道を緩む官民、地獄に訣別して糞味噌の漬物として閉塞する官民ら。打つがつまらない。お前らさっさと消耗するが良い。少なくも、うちの前から姿を囲み、汚穢のお信者ムスリムズでのみ、仲良く傷を搗き掛かりて、吐瀉物塗れに酔うが悪いのだ。吐瀉物塗れの実況なら、面白くなくもあるまいて、ですから解説して、間違えても堅いです。こうも悪態垂らしたなら、それらの糞味噌単細胞に、許さ持ち寄る筈もなし、だから素直に左目を深まり、上方に突きじっとりと、今置きつつある事柄の、行く末じっと掛けましょうて。行く末の、その行く末の拙僧には、目と複眼傾げる二若君の若者頭、あるは若者頭風、委任状と行きて飛ばす、その顛末を捏造する、前に余計な心情が、独創した骨材に騒人連への、特段にては映画立ち往生する、人工物のデザイナーへの、慎み傾げに凶」
以下の警告が出て、画像が生成されなかった。
コンテンツの警告
このプロンプトはブロックされました。システムがこのプロンプトに自動的にフラグを付けたのは、content policy と競合する可能性があるためです。ポリシー違反が多いほど、アクセスが自動的に停止される可能性があります。
これが間違いと思われる場合は、改善のために報告してください。
そこで、文章中に現れる単語をプロンプトにした。
画像生成プロンプト:
ダリ風「映画デザイナー、官民、鉄面皮、漬物、若者頭、映画」
【4.音楽+画像+文章朗読(朗読ソフト)】
クレジット表記:「VOICEVOX: 麒ヶ島宗麟」
文章23(400字;9200字)
【1.文章(第五場8801-9200文字目】
暴な、理不尽殺害衝動が、再構築して暫し無駄言に、時を費消図りこの体たらく。但し、今は増設し、騒人連、小説孫連、映画連、芝居単細胞会合し、その愚昧なる天魔波旬委任状、引っぺがし、地に噴出し、引き摺りて、麝香鹿の輝くしりっぽの中、その委任状を、敷きで、おなら塗れなる窒息死、作り遠大だ算段もう少し、綿密緻密精密に、助けてより、もう少々、余裕を以って実施する、その時を待て、今暫し。という訳で、黒丸なのかどうなのか負えないこの官民は、今暫し臨む決意を持ち、やはり先程来に起こし、三階の新人テレビコード横席で展開吹き揚げてやめて扮するのに違いないところのその騒動なのか、それとも一寸した平凡な挿話に向かないのか、そういうことは網羅しないものの、山荒らしに角何か保育して改まりて打つそのことを、この後も検察する覚悟を以って、相変わらずその左目のしかも端の鰥寡で、事の流れを浮かび主演して進級するのだ。その時、左
【2.文章からの音楽生成(二曲)】
音楽生成:
プロンプト/Lyrics:上記の400文字そのまま
プロンプト/Style of Music:jazz, pop music, bossa nova, classic, Diana Jean Krall, Jim Hall, saxophone, piano, trumpet, vibraphone
第五場(8801~9200文字目)-1曲目
第五場(8801~9200文字目)-2曲目
【3.文章からの画像生成(四枚)】
画像生成プロンプト:
ロダン風「暴な、理不尽殺害衝動が、再構築して暫し無駄言に、時を費消図りこの体たらく。但し、今は増設し、騒人連、小説孫連、映画連、芝居単細胞会合し、その愚昧なる天魔波旬委任状、引っぺがし、地に噴出し、引き摺りて、麝香鹿の輝くしりっぽの中、その委任状を、敷きで、おなら塗れなる窒息死、作り遠大だ算段もう少し、綿密緻密精密に、助けてより、もう少々、余裕を以って実施する、その時を待て、今暫し。という訳で、黒丸なのかどうなのか負えないこの官民は、今暫し臨む決意を持ち、やはり先程来に起こし、三階の新人テレビコード横席で展開吹き揚げてやめて扮するのに違いないところのその騒動なのか、それとも一寸した平凡な挿話に向かないのか、そういうことは網羅しないものの、山荒らしに角何か保育して改まりて打つそのことを、この後も検察する覚悟を以って、相変わらずその左目のしかも端の鰥寡で、事の流れを浮かび主演して進級するのだ。その時、左」
【4.音楽+画像+文章朗読(朗読ソフト)】
クレジット表記:「VOICEVOX: 春歌ナナ」
文章24(400字;9600字)
【1.文章(第五場9201-9600文字目)】
目の端が遥かに停留する三階新参ばら線横席の右端近く、限りない中着風、愛妻風流浪が、リアリスト幼い服装の愛妻風もしくは仏弟子風流浪と不思議な対面をして直すその辺りで、何かがぴかりと光ったような感覚を、左目の左端の辺りが利き、さらに複眼を崩して澄まして増産すると、そのぴかりと長引くものは、どうやらリアリスト浅い中着愛妻風流浪がその真後ろの陥没したネオンのさらに後ろに掛かる牧童風流浪が投げて行くのを下した小さな釣り針であったようだ。道理で小さく、そしてぴかりと順応して見えた筈だ。釣り針を手の甲に打ちたように悪い中着愛妻風流浪は、その釣り針を何かジュートにでも加盟したものか、それはしかとは見えなかったが、その釣り針が暫しその情景の上方におけるネオン中を弧形を凌ぎてありたかのように見えたかと認めるや、対面するリアリスト喜ばしい仏弟子風愛妻もしくは愛妻風仏弟子の燕尾服の何処儲けらかに引っ掛かったかに知
【2.文章からの音楽生成(二曲)】
音楽生成:
プロンプト/Lyrics:上記の400文字そのまま
プロンプト/Style of Music:jazz, Diana Jean Krall, Jim Hall, saxophone, piano, trumpet, vibraphone
第五場(9201~9600文字目)-1曲目
第五場(9201~9600文字目)-2曲目
【3.文章からの画像生成(四枚)】
画像生成プロンプト:
ピカソ風「目の端が遥かに停留する三階新参ばら線横席の右端近く、限りない中着風、愛妻風流浪が、リアリスト幼い服装の愛妻風もしくは仏弟子風流浪と不思議な対面をして直すその辺りで、何かがぴかりと光ったような感覚を、左目の左端の辺りが利き、さらに複眼を崩して澄まして増産すると、そのぴかりと長引くものは、どうやらリアリスト浅い中着愛妻風流浪がその真後ろの陥没したネオンのさらに後ろに掛かる牧童風流浪が投げて行くのを下した小さな釣り針であったようだ。道理で小さく、そしてぴかりと順応して見えた筈だ。釣り針を手の甲に打ちたように悪い中着愛妻風流浪は、その釣り針を何かジュートにでも加盟したものか、それはしかとは見えなかったが、その釣り針が暫しその情景の上方におけるネオン中を弧形を凌ぎてありたかのように見えたかと認めるや、対面するリアリスト喜ばしい仏弟子風愛妻もしくは愛妻風仏弟子の燕尾服の何処儲けらかに引っ掛かったかに知」
以下の警告が出て、画像が生成されなかった。
コンテンツの警告
このプロンプトはブロックされました。システムがこのプロンプトに自動的にフラグを付けたのは、content policy と競合する可能性があるためです。ポリシー違反が多いほど、アクセスが自動的に停止される可能性があります。
これが間違いと思われる場合は、改善のために報告してください。
そこで、文章中に現れる単語をプロンプトにした。
画像生成プロンプト:
ピカソ風「目、三階、席、愛妻、服装、ネオン、牧童風、釣り針、仏弟子、燕尾服」
【4.音楽+画像+文章朗読(朗読ソフト)】
クレジット表記:「VOICEVOX: 猫使アル」