歌が苦手な人間はAIシンガーになれるのか?①【ACE studio編】
はじめに
みなさんこんにちは、秋良です
普段私はutauというジャンルで創作活動をしています。詳細は省きますが、自分の声を録音→その音声データを切り貼りして機械に歌わせる…みたいなことをして遊んでいます。utauの説明や音源の作り方はご自身で調べてね!
ところで、みなさんはAIシンガーというのを知っていますか。商業ソフトならsynthesizerVのAIとかそういうの。utau音源はAI音源ではありません
実はAI歌声合成音声って自分でも作れるのです。ENUNUとかdiffsingerとか。夢がありますね…
ACE studioもAI歌声合成音声の一つ。今回は歌がマジで苦手な人間がACE studioカスタムシンガーを作ったという日記を書いていきます。
ACE studioの詳しい説明などはとーごアさんの記事を読みましょう。というか私の日記は読まなくても大丈夫です。
↑ とーごアさんの記事 これを読めば何とかなります
【隙あらば自語り】
私は歌うのが本当に苦手です。声が特段いいわけではないですし。カラオケもほぼ行かない人生を送ってきたし(陰キャ)(年に一度行くか行かないかのレベル)
utauはその分良いです。歌ではなく呪文(?)を唱えて録音して、あとは歌えるようにラベリングすれば自分の声で歌ってくれますから。自分のキモい声でもエンジンやMIXや子音速度をいじれば歌もいい感じに聞こえるから不思議です。
なので私はutau録音が好きでした。そして生歌収録が必要なAIシンガー作りには手を出さないだろうと思っていました。が、いろいろあって現在私は「Diffsinger」なるものの制作を進めています。いや、今は前段階の歌声DB制作に必要な歌を録音してるといった感じですね。
Diffsinger、どうやらAIピッチを使うのではなくピッチ手書きが主流で、歌声DBに使う歌声データの補正とかも特に必要が無いらしいです(うろ覚え)これなら私もワンチャンいけるんじゃないか、と思い挑戦しています。挫折したら笑ってやってください。
私は夏前に童謡を数曲録音して放置していました。暑くて録音する気力が無く、収録再開は秋だな…と思っていた時です。こんなツイートが目に入りました。
このツイートを見たのは深夜でしたが、すぐACE studioを契約してカスタムシンガーを作っていました。理由としては、Diffsingerを作る前に実際私の声がAI音源になったらどんな声になるのか確認したかったからです。童謡録音しといてよかった~~~~
ACEカスタムシンガーを作った
作りました。童謡数曲、UTAU原音データを大量に学習させました。
ノイズ除去もたいしてしてません。本当に勢いだけで作ってます。
果たして歌声は…!? ↓↓
↑ レウィ/絶え間なく藍色/ACE cover
なんか…へにょへにょしてる!!!!!!!!!
AIシンガーになることはできました!ただデータが少ない+歌がうまくないせいでなんか頼りない印象ですね…!これはACEの性能が悪いのではなく、私が音痴のせいです。すまない!!!!!!
UTAU原音も混ぜてますが、たぶん声良い人・元から歌が上手い人はUTAU原音だけの学習でも歌上手いカスタムシンガーが作れるんじゃないでしょうか。なにもわからん…!!!
こんなもんか~~まあDiffsinger前のテストには十分だな、と満足しました。鍵垢などでカバーを限定公開し、あとはソフトを触らず放置してました。
ACEstudioはサブスク制です。私は1カ月だけ契約してすぐ解約しました。解約しても既定の期間はシンガーを使えますが、まあもういいだろうと思ってた矢先にフォロワーさんから連絡がきました。
それが例のとーごアさんです(上記note参照)。とごアさんもカスタムシンガーを作っていました。とごアさんは歌が上手いのでカスタムシンガーもめちゃくちゃ歌がうまいです。
↑ 【とーごイ洋志】絶対的少年値【ACE Studio custom voice COVER】
すごい…
私たちはお互いのカスタムシンガーを交換しました。私のシンガー(レウィ)は歌上手くないですよ…と言って渡したのですが、数日後とごアさんからレウィの新作カバーを聴かせていただきました。それがこちらです。
↑ 【レウィ】メアの教育【ACE Studioカスタムシンガーカバー】
だ、誰……………???????????????????
詳細を聞くと、とごイさんのボーカルスタイル100%にした上で調声したらこうなったとか。
ACE studioは自分のAIシンガーを作れるだけじゃなく、他のシンガーの声質やボーカルスタイル(歌い方、歌い癖?)も細かく混ぜられるらしいです。
はえ~~~~~~~~~!!!!!(びっくり)
最初魔法がかかったのかと思いました。私のボーカルスタイルとは天地の差です。歌上手い人ってすげ~~~~!!!
感想
歌が苦手でもデータさえあればAIシンガーにはなれた(一時的に)
ただ学習内容によっては頼りない音源になる
でも他の人の歌い方を試すことができるのは楽しい
自分の声で一瞬でも歌上手い感覚を味わえたのは楽しかったです!これだけでもやった価値あった~~~~
ACEはサブスク安くて月額3000円、決してお安い値段じゃないので私は1カ月で解約しました。機会があればまた契約して再学習したいなと思います。
またACEでは永久スロットという概念があり、永遠に音源を残すなら4万と10万のプランがあるらしいです。10万円は多言語対応付きで、AIシンガーになるだけならいい値段なのかもしれない…と思いました(麻痺)
最後に、ACEのレウィを使ってくれたとーごアさんに感謝申し上げます。あとボーカルスタイル貸してくださったことにも感謝です。
次回はdiffsinger制作日記でお会いしましょう(予定未定)ここまで読んでくださりありがとうございました!
この記事が気に入ったらサポートをしてみませんか?