sync.は、synchronicity labsが提供する、動画内の人物の口元を新しい音声に合わせて生成し直すAIリップシンク(ビジュアル吹き替え)のサービスです。

主な機能

動画をアップロードし、声をクローンする・新しく生成する・元の音声を使うのいずれかで音声を用意すると、口の動きを合わせた動画ができあがります。リップシンクモデルsync-3のほか、lipsync-2-proやreact-1が用意されています。顔の前に物がある場面、複数の顔、複数のカメラアングル、暗い照明、速いカメラの動き、早口のセリフといった崩れやすい条件や、4K ProResの素材も対象にしています。生成した動画にはsync.独自の透かし技術が入り、動画がsync.で加工されたかどうかを検証する機能もあります。

使い方の選択肢

Webのリップシンクスタジオ(lite、assistant、advancedのモード)、APIとSDK、Adobe Premiere Proプラグイン、ComfyUIノードから使えます。翻訳した音声に口元を合わせる多言語の吹き替え、撮り直しを減らすセリフの差し替え、自社アプリへの組み込みに向いています。

料金

無料枠は月3回の生成・最長20秒までです。有料は月額の基本料に動画1秒あたりの従量料金を足す仕組みで、Hobbyistは月$5+$0.05/秒、透かしなしで5分までの動画を作れるCreatorは月$19+$0.05/秒です。Growth(月$49)とScale(月$249)にはチーム用ワークスペースと従量料金の割引が付きます。

注意点

サイトは英語のみで、デモで示されている言語に日本語は含まれていないため、日本語での口元合わせは試用で確かめる必要があります。秒単位の従量課金なので、長尺の動画では費用が膨らみます。