Microsoftが開発したMITライセンスのオープンソース音声モデル群です。音声合成(TTS)と音声認識(ASR)の双方に対応します。TTSは最大4人の話者を設定し、最長90分の会話音声を1パスで生成します。話者ごとの声質の一貫性と自然な発話交代を維持する点が特徴です。ASRは最長60分の長尺音声を一括処理し、話者情報、タイムスタンプ、発話内容を含む構造化データを出力します。カスタムホットワードの指定も可能です。長尺ポッドキャストの音声を生成したい制作担当者や、長時間の会議録音から話者別の書き起こしデータを取得したい開発者に適しています。
長い音声の文字起こしを1回の処理で済ませたい場合に頼れるモデル群です。VibeVoice-ASRは60分の音声を一括で処理し、話者・タイムスタンプ・発話内容を整理した形で出力します。ホットワードの指定にも対応します。
編集部レビューの全文 >

