自分の声をVOICEROID・結月ゆかりに変換する技術がさらに進化してた！ 完全再現されたイントネーションに「これ革命だろ」「あなたは神か？」の声
今回紹介するのは、ヒホさんが投稿した『ディープラーニングの力で誰でもゆかりさんの声になれる声変換技術を作ってみた』という動画です。
投稿者メッセージ（動画説明文より）
「誰でも」「高品質に」ゆかりさんの声になれる声変換技術を作りました。
また一歩、結月ゆかりになるという夢に近づけた気がします。
誰でもボイスロイド・結月ゆかりになれる日がまた一歩近づきました。自分が話した声を結月ゆかりに変換する技術をヒホさんが進化させました。変換精度はかなり高く、いろいろな応用ができそうです。
最近の声変換技術は、変換元と変換後の音声データを用意し、ディープラーニングを使う方法が主流です。この場合、音声データをたくさん用意すれば変換の品質はよくなりますが、録音に手間がかかります。
そこで、ヒホさんは声を直接変換するのではなく、音高と音素という要素に分解して、そこから再合成する手法をとりました。
動画では実際の変換例が紹介されています。左耳は変換前、右耳は変換後の音声が聞こえてきます。話す間合いやイントネーションはほぼ再現されています。変換前は男性の音声なのにもかかわらず、ちゃんと結月ゆかりさんのかわいらしさが出るのが楽しいところです。
動画の冒頭では、ヒホさんの声が、だんだん結月ゆかりになっていく様子が紹介されています。その技術の高さにコメント欄は「すごい」「進化したなあ…」「まじかよやっべぇな」と驚愕を隠せません。ぜひ動画で実感してください。ニコニコ動画で視聴できます。
視聴者コメント
ふぁっ！？
普通に凄い技術だなぁ
あなたは神か？
イントネーションいいな
ここまできたのか、すごすぎる
文／高橋ホイコ