NEUTRINOは、STUDIO NEUTRINOが提供する、最新の歌声生成AIを搭載した歌声シンセサイザー(AI Singing Voice Generator)です。フリーウェアとして公開されており、楽譜から発声タイミングや音の高さ、声質、かすれ具合などをAIが推定し、そのデータをもとにvocoderで音声を合成します。

主な機能

実際のボーカリストの歌唱データから特徴を抽出しているため、声質だけでなく歌いまわしや癖まで再現でき、歌詞とメロディーを入力するだけで歌わせられます。第二世代「Muon」でDiffusionモデルを採用し、生成のたびに音声が変わるため、複数のテイクから選べるようになりました。現行の第三世代「Tau」では、安定性・自然性・歌唱表現の再現度が向上しています。歌声ライブラリは東北ずん子、東北きりたん、ずんだもん、四国めたん、琴葉茜・葵、めろう、ナクモなど17名のキャラクターが公開されています。

入力はMusicXML形式で、DAWからメロディーをMIDIで書き出し、MuseScoreなどの楽譜作成ソフトで変換して用意できます。これまで操作はコマンドライン中心でしたが、GUIで操作できる「Neutrino Orbit」のWeb版αテストが始まっています。

料金と注意点

一般的な音楽制作・オーディオ制作の範囲なら無料でダウンロード・利用でき、商用・非商用を問わず使える歌声ライブラリも多数あります。ソフトをシステムに組み込む場合や、制作した音声をアプリ内で使う場合は別途許諾が必要です。処理負荷が高く、快適に使うにはPassmark score 10000以上のCPUやGPU、またはオンライン版の利用が推奨されています。学習には声優・演者の許諾を得て収録した音声や、大学などの公的機関が公開する音声データのみを使っています。