動画翻訳VEED Dubbing について
86言語に、各話者の声のまま吹き替え。口の動きも描き直します。
POST /jobs/createTask でモデル名に veed/dubbing/video-translate を指定すれば呼び出せます。$0.144から。
はじめに
VEED Dubbing は VEED の吹き替え API の標準版です。話しているクリップを video_url で送り、target_language を選ぶと、各話者の声をクローンし、翻訳された言葉に合わせて唇を動かしたうえで、その言語で返されます。
主な特長
唇は新しい言語に合わせて動く
口の周りは、映っている話者ごとに描き直されます。私たちのワインセラーのテストでは、女性と男性の両方がスペイン語に合わせて同期し直されました。樽、グラス、照明は変わりませんでした。
聞き分けられる声のまま
この切り替えはありません。話者はすべて、クリップそのものから声をクローンされるので、別の声サンプルがなくても、吹き替えは各話者の声色を保ちます。
意味を保つ翻訳
私たちのテストでは、女性が「一人でセラーに連れて行かれた」と話す台詞が「a solas」として返されました。直訳で起きがちな性別の取り違えを避けています。
リクエストパラメーター
| パラメーター | 必須 | 説明 |
|---|---|---|
keyterms | いいえ | 文字起こしで使いたい表記をモデルに伝えるための、人名や専門用語です。 |
source_language | いいえ | 動画で話されている言語。自動判定。音楽や強いなまり、長い間があるときは指定してください。 auto · af · ar · as · ast · az · be · bg · bn · bs · ca · ceb · cs · cy · da · de · el · en · es · et · fa · fi · fil · fr · ga · gl · gu · ha · he · hi · hr · hu · hy · id · is · it · ja · jv · ka · kk · kn · ko · ky · lb · ln · lt · lv · mi · mk · ml · mn · mr · ms · mt · my · ne · nl · no · ny · oc · or · pa · pl · ps · pt · ro · ru · sd · sk · sl · so · sr · sv · sw · ta · te · tg · th · tl · tr · uk · ur · uz · vi · yo · yue · zh · デフォルト: auto |
target_language | はい | 吹き替え先の言語。動画の言語とは別の言語にしてください。 af · ar · as · ast · az · be · bg · bn · bs · ca · ceb · cs · cy · da · de · el · en · es · et · fa · fi · fil · fr · ga · gl · gu · ha · he · hi · hr · hu · hy · id · is · it · ja · jv · ka · kk · kn · ko · ky · lb · ln · lt · lv · mi · mk · ml · mn · mr · ms · mt · my · ne · nl · no · ny · oc · or · pa · pl · ps · pt · ro · ru · sd · sk · sl · so · sr · sv · sw · ta · te · tg · th · tl · tr · uk · ur · uz · vi · yo · yue · zh |
video_url | はい | 加工する動画。 |
料金
料金は米ドル表示です。API は専用の米ドル残高を使用します。サイトのクレジットは API で使えず、API 残高との相互振替もできません。 タスクの受理時に、見積もりの上限額を API 残高から確保します。完了後は実際の使用量で精算し、確保額を超える請求はせず、差額を解放します。タスクが失敗した場合は確保額を解放します。
| オプション | USD /秒 |
|---|---|
| 標準 | $0.144 |
実行前に同じリクエスト本文を POST /jobs/quote に送ると、想定料金と上限額を米ドルで確認できます。見積もりではタスクの実行も課金も行いません。
活用シーン
一人のクリエイターが複数の言語で
一度収録したテイクを、狙う市場ごとに公開できます。どのバージョンでも唇は合っています。
生成したシーンのローカライズ
動画モデルで作ったキャラクターを、視聴者の言語に吹き替えて、口の動きを説得力のあるまま保ちます。
プロンプトガイドと上級者向けのコツ
顔が見えるようにする
カメラのほうを向いた、よく照らされた顔が、最も明瞭なリップシンクになります。広いショットや顔が隠れた映像でも新しい音声は付きますが、口の周りに見える変化はほとんどありません。
名前には翻訳ではなくキーワードを使う
キーワードは、文字起こしが名前やブランドを聞き取る助けになりますが、用語と翻訳のペアではありません。各用語は、クリップで話されているとおりに書いてください。
アクセントが必要ですか？
この版は基本の言語への吹き替えです。地域のアクセントや声の類似度の調整は、VEED Dubbing Pro にあります。
API クイックスタート
VEED Dubbing API を 3 ステップで呼び出す
- API キーを作成する. PopNow にログインし、API コンソールでキーを作成します。キーは sk-popnow- で始まり、API 呼び出しには専用の米ドル残高を使用します。
- リクエストを送る. POST /jobs/createTask に、model を veed/dubbing/video-translate、input をパラメーター表どおりにして送ります。レスポンスですぐにタスク ID が返ります。
- 結果を受け取る. タスク ID で GET /jobs/recordInfo をポーリングするか、callBackUrl を渡せば結果がそこへ送られます。タスクが成功したら出力リンクからダウンロードします。
# 1. Create the task. Keep the Idempotency-Key if you retry after a network error.
export IDEMPOTENCY_KEY="$(uuidgen)"
curl -X POST https://api.popnow.ai/api/v1/jobs/createTask \
-H "Authorization: Bearer $POPNOW_API_KEY" \
-H "Content-Type: application/json" \
-H "Idempotency-Key: $IDEMPOTENCY_KEY" \
-d '{
"model": "veed/dubbing/video-translate",
"input": {
"video_url": "https://media.popnow.ai/effects/flower-bloom-1abd6efb.mp4",
"target_language": "af",
"source_language": "auto"
}
}'
# 2. Copy data.taskId from the response, then poll until state is succeeded, failed, canceled or expired.
TASK_ID="TASK_ID_FROM_RESPONSE"
curl "https://api.popnow.ai/api/v1/jobs/recordInfo?taskId=$TASK_ID" \
-H "Authorization: Bearer $POPNOW_API_KEY"プロンプトとリンクはご自身のものに置き換えてください。API タブにレスポンス、ポーリング、コールバックのリファレンスがあります。
VEED Dubbing API についての質問
VEED Dubbing API の料金はいくらですか？
VEED Dubbingは$0.144/秒です。API は専用の米ドル残高を使用します。サイトのクレジットは API で使えず、API 残高との相互振替もできません。 タスクの受理時に、見積もりの上限額を API 残高から確保します。完了後は実際の使用量で精算し、確保額を超える請求はせず、差額を解放します。タスクが失敗した場合は確保額を解放します。
API でのVEED Dubbingのモデル名は？
POST /jobs/createTask の model フィールドに 動画翻訳は veed/dubbing/video-translate を指定します。
映像は変わりますか？
口の周囲だけが変わります。各フレームのほかの部分は送信時のままで、フレームサイズも維持されます。出力は毎秒 25 フレームです。
コードを書かずにVEED Dubbingを試せますか？
API キーなしで、API の米ドル残高を使って Playground から VEED Dubbing を実行できます。各実行は対応するコードとともに開発者の履歴に記録されます。
