やってみよう!

プログラミングとかでぃーぷらーにんぐとかVRとか気になったものをやってみる予定

美少女になりたい!!

きっかけ

きっかけは確かそう、twitterでふと流れてきたVtuberについてのツイートだった。

Vtuber?ああ、あのキズナアイとか輝夜 月とかの...あんま興味ないや」

なんて思ってたら 「え?Skypeとかでもイケるの?」というところから興味をもって

このマグロナっていうおっさんめっちゃかわいい!やだっ ガチ恋しちゃう/// ってなりました。

youtube.com

自分で作ればいいじゃない(おめめぐるぐる)

マグロナちゃんが恋声ってアプリを使ってると聞いて早速ダウンロード。

同じ設定で喋ってみても、色々変えてみてもあんな可愛い声出ないんだけど、どういうこと?

わざわざwineインストールして文字化けと戦いながら一生懸命インストールしたのにこの仕打ちっ!

もういいや・・作ろ

ということで、しばらく美少女声になるためにボイスチェンジャーを作りたいと思います。

文系プログラマでもなんとかなるよね?多分...

手順とか

とりあえず、ボイスチェンジャーってどうやって作るの?って調べてみると

aidiary.hatenablog.com

blog.hiroshiba.jp

tam5917.hatenablog.com

メルケプストラムについてのまとめ - 備忘録

なるほど。わからん。

わからんけど、声のデータから声の高さ・アクセント(基本周波数?ピッチ?)と声質(スペクトル包絡?フォルマント?メルケプストラム?)が抽出できて、それをイジれば声が変えれるらしい。

とりあえず、ここができれば恋声みたいなボイスチェンジャーは作れそう!

あとはでぃーぷらーにんぐでいい感じに設定すれば美少女声になれる?

 美少女声ロードマップ

  • 開発環境を整える(dokcerで)
  • wavファイルから声質変換して別のwavファイルに書き出す
  • wavファイルから声質変換してスピーカーで流す
  • マイクからリアルタイムに声質変換してスピーカーで流す
  • パラメータをスライダーとかで簡単にいじれるようにする(ここまでで一旦ボイスチェンジャー完成)
  • ディープラーニングでいい感じにする

ディープラーニングの部分が雑だけど、声に関してはこんな感じで調べながら作っていこうと思います。

※ 執筆時点で上から3つ目までできていて、リアルタイム変換でめっちゃハマってます。 順次投稿していくので、python詳しいマン居たらアドバイスもらえると助かります。

受肉ロードマップ?

あと、動きに関してはLive2DとFaceRigを使うとして、 絵の部分に関しては

make.girls.moe

https://makegirlsmoe.github.io/assets/pdf/technical_report.pdf

  • Vroidで3Dモデル作成

vroid.pixiv.net

この中から色々試してみて作ろうかと思います。