OrcaDub 1.0は、エンドツーエンドで韻律を考慮した吹き替え・動画翻訳モデルです。ソース動画を入力すると、ターゲット言語の吹き替え動画を、元の話者のクローン音声で生成します。発話の強調、ポーズ、イントネーションなどの表現と単語レベルのタイミングを維持します。28言語の任意の方向に対応し、複数話者の映像では話者ごとに個別の声をクローン、背景音楽と環境音を保持し、吹き替えを元の映像に単語レベルで合わせます。無料のWeb StudioおよびOpenAI互換APIからアクセス可能です。
OrcaDub 1.0は、エンドツーエンドでプロソディ(韻律)を考慮した吹き替え・動画翻訳モデルで、2026年7月に公開されました。ソース動画を入力すると、元の話者のクローン音声で、対象言語の吹き替え動画を生成します。強調、間、イントネーションといった話し方(デリバリー)を保持し、単語レベルのタイミングをソースに合わせるため、吹き替えは元の位置に収まります。このモデルは、クリエイター向けパブリッシ…
28言語、任意の方向。マルチスピーカービデオ、各スピーカーごとの声のクローン。背景音楽と雰囲気の保持。オプションの歌詞翻訳。ソースのタイミングに対する単語レベルのアライメント。ラウドネス正規化出力(EBU R128)。
言語: 28、任意の方向。 入力: 動画アップロードまたはURL(YouTube、TikTok、直接リンク)。 出力: 吹き替えmp4、ラウドネス正規化済み。 アクセス: ウェブスタジオおよびOpenAI互換API、モデルID orca/dub。 透かし: 無料の吹き替えではオン、APIの透かしスイッチでジョブごとに制御可能。 ソース動画に焼き付けられた透かしや字幕の消去は、別途有料のアドオンです。
話者が大きく重なると、分離やクローンの品質が低下する可能性があります。歌唱は明示的な切り替えの下でサポートされており、音声よりも困難なままです。非常に密度の高い会話は、同期を維持するために圧縮される場合があります。各行はStudioで修正可能です。文化固有の言葉遊びは、直訳ではなく意味に合わせて調整されることがあります。
OrcaDubは、APIコールごとではなく、吹き替え動画の1分ごとに料金を請求します。1分あたり0.60ドルで、開始された分単位で課金され、端数は切り上げられます。各ワークスペースには10分の無料分が含まれており、無料の吹き替えには小さな透かしが付き、各無料吹き替えは1クリップあたり最大2分に制限されています。透かしの除去と字幕の除去は、分単位の価格に加えてオプションのアドオンであり、開始された分単位で課金され、ソースビデオの短辺によって価格が決まります。現在の解像度ごとの料金は、OrcaDubの料金ページに記載されています。
OrcaDubには2つのアクセス方法があります。無料のWeb Studioでは、動画のアップロードまたはURLを受け付け、ダビングを実行し、エクスポート前に任意のラインの再翻訳、再タイミング、再ボイスが可能です。OpenAI互換のAPIは、OrcaRouterを介して同じモデルをID orca/dubとして公開しており、ジョブごとに出力に透かしのオン/オフを切り替えることができます。
デフォルトでは、音声クローンはアップロードされた動画内の音声を対象に動作します。プロジェクトのワークフローでは、保存済みのキャラクター音声を再利用することも可能です。無料版の吹き替えには透かしが入ります。APIの出力は、透かしスイッチを介した透かし追加に対応しています。権利を有していないコンテンツの吹き替えや、話者の同意なしに音声をクローンすることは利用規約に違反し、アカウント停止の対象となります。
import os
from openai import OpenAI
client = OpenAI(
base_url="https://api.orcarouter.ai/v1",
api_key=os.environ["ORCAROUTER_API_KEY"],
)
response = client.chat.completions.create(
model="orca/dub",
messages=[{"role": "user", "content": "Hello"}],
)
print(response.choices[0].message.content)| 1分あたり | $0.6000 |
| 通貨 | USD |
| APIコール単位ではなく、出力の開始した1分単位で課金されます | |
今週の開発者の声
@misc{orcarouter_dub,
title = {OrcaDub 1.0 API},
author = {OrcaDub},
year = {2026},
howpublished = {OrcaRouter},
url = {https://www.orcarouter.ai/models/orca/dub}
}OrcaDub. (2026). OrcaDub 1.0 API. OrcaRouter. https://www.orcarouter.ai/models/orca/dub