動画翻訳VEED Dubbing Pro について
アクセント・声の一致・リップシンクに対応したスタジオ級の吹き替え。
POST /jobs/createTask でモデル名に veed/dubbing-pro/video-translate を指定すれば呼び出せます。$0.24から。
はじめに
VEED Dubbing Pro は VEED の吹き替えのスタジオ向け版です。クリップ内の発話を翻訳し、話者ごとに本人の声のクローンから音声を当て直し、地域のアクセントを選べるようにし、新しいセリフが実際に話されているように見えるよう唇を描き直します。
主な特長
言語だけでなくアクセントも
es の代わりに es-MX、en の代わりに en-GB を送ります。二人の会話をメキシコ・スペイン語で吹き替えたテストは、第三者の文字起こし担当者によってメキシコ・スペイン語と認識されました。
声の近さを調整するダイヤル
voice_clone_strength は 0〜10 です。既定の 7 では各話者を聞き分けられます。元の声にほぼ近づけたい場合は 10 に、セリフをネイティブらしく響かせたい場合は 0 に近づけてください。
複数の話者向けに作られている
VEED は、インタビュー、パネル、二人司会の形式にこの版を勧めています。私たちの対話テストでは、二人の話者がそれぞれ別の声を保ち、各自の唇の動きを得ました。
リクエストパラメーター
| パラメーター | 必須 | 説明 |
|---|---|---|
keyterms | いいえ | 文字起こしで使いたい表記をモデルに伝えるための、人名や専門用語です。 |
source_language | いいえ | 動画で話されている言語。自動判定。音楽や強いなまり、長い間があるときは指定してください。 auto · af · ak · am · ar · as · az · be · bg · bo · bs · ca · ceb · cmn · cs · cy · da · de · dgo · el · en · es · et · eu · fa · fi · fil · fr · gl · gu · ha · he · hi · hr · hu · hy · id · is · it · ja · jv · ka · ki · kk · kn · ko · ky · lg · lt · lv · mk · ml · mn · mr · ms · my · ne · nl · no · nso · pa · pl · pt · rn · ro · ru · rw · sd · sk · sl · sq · ss · st · su · sv · sw · ta · te · tg · th · tn · tr · ts · ug · uk · ur · uz · ve · vi · war · wo · yo · yue · zh · zu · デフォルト: auto |
target_language | はい | 吹き替え先の言語。動画の言語とは別の言語にしてください。 af · ak · am · ar · ar-EG · as · az · be · bg · bo · bs · ca · ceb · cmn · cs · cy · da · de · dgo · el · en · en-AU · en-CA · en-GB · en-US · es · es-AR · es-CL · es-ES · es-MX · et · eu · fa · fi · fil · fr · fr-CA · fr-FR · gl · gu · ha · he · hi · hr · hu · hy · id · is · it · ja · jv · ka · ki · kk · kn · ko · ky · lg · lt · lv · mk · ml · mn · mr · ms · my · ne · nl · no · nso · pa · pl · pt · pt-BR · pt-PT · rn · ro · ru · rw · sd · sk · sl · sq · ss · st · su · sv · sw · ta · te · tg · th · tn · tr · ts · ug · uk · ur · uz · ve · vi · war · wo · yo · yue · zh · zh-TW · zu |
video_url | はい | 加工する動画。 |
voice_clone_strength | いいえ | 吹き替えを元の声にどれだけ近づけるか（0〜10）。高いほど声となまりを残し、低いほどネイティブに聞こえます。 ≥ 0 · ≤ 10 · デフォルト: 7 |
料金
料金は米ドル表示です。API は専用の米ドル残高を使用します。サイトのクレジットは API で使えず、API 残高との相互振替もできません。 タスクの受理時に、見積もりの上限額を API 残高から確保します。完了後は実際の使用量で精算し、確保額を超える請求はせず、差額を解放します。タスクが失敗した場合は確保額を解放します。
| オプション | USD /秒 |
|---|---|
| 標準 | $0.24 |
実行前に同じリクエスト本文を POST /jobs/quote に送ると、想定料金と上限額を米ドルで確認できます。見積もりではタスクの実行も課金も行いません。
活用シーン
一つの元素材から地域ごとのリリース
同じ映像から、スペイン向けとメキシコ向けのバージョンを切り出し、それぞれ視聴者が期待するアクセントを付けます。
司会者が複数いる番組
カメラで撮ったポッドキャストやパネルを新しい市場に届けつつ、ホストそれぞれが本人らしく聞こえるままにします。
プロンプトガイドと上級者向けのコツ
視聴者が話すアクセントを選ぶ
地域コードは、その言語に変種がある場合にだけ意味があります。ドイツ語や日本語では基本コードだけがあり、地域タグは無視されます。
既定の強さから始める
最初のテイクは 7 で実行してください。吹き替えに元のアクセントが強く残りすぎるなら一、二段階下げ、話者が本人らしく聞こえなくなったら上げてください。
顔を照らす
口の一致は口が見えることに依存します。顔がはっきり写るクローズアップやミディアムショットが、最も強い効果を生みます。
API クイックスタート
VEED Dubbing Pro API を 3 ステップで呼び出す
- API キーを作成する. PopNow にログインし、API コンソールでキーを作成します。キーは sk-popnow- で始まり、API 呼び出しには専用の米ドル残高を使用します。
- リクエストを送る. POST /jobs/createTask に、model を veed/dubbing-pro/video-translate、input をパラメーター表どおりにして送ります。レスポンスですぐにタスク ID が返ります。
- 結果を受け取る. タスク ID で GET /jobs/recordInfo をポーリングするか、callBackUrl を渡せば結果がそこへ送られます。タスクが成功したら出力リンクからダウンロードします。
# 1. Create the task. Keep the Idempotency-Key if you retry after a network error.
export IDEMPOTENCY_KEY="$(uuidgen)"
curl -X POST https://api.popnow.ai/api/v1/jobs/createTask \
-H "Authorization: Bearer $POPNOW_API_KEY" \
-H "Content-Type: application/json" \
-H "Idempotency-Key: $IDEMPOTENCY_KEY" \
-d '{
"model": "veed/dubbing-pro/video-translate",
"input": {
"video_url": "https://media.popnow.ai/effects/flower-bloom-1abd6efb.mp4",
"target_language": "af",
"source_language": "auto"
}
}'
# 2. Copy data.taskId from the response, then poll until state is succeeded, failed, canceled or expired.
TASK_ID="TASK_ID_FROM_RESPONSE"
curl "https://api.popnow.ai/api/v1/jobs/recordInfo?taskId=$TASK_ID" \
-H "Authorization: Bearer $POPNOW_API_KEY"プロンプトとリンクはご自身のものに置き換えてください。API タブにレスポンス、ポーリング、コールバックのリファレンスがあります。
VEED Dubbing Pro API についての質問
VEED Dubbing Pro API の料金はいくらですか？
VEED Dubbing Proは$0.24/秒です。API は専用の米ドル残高を使用します。サイトのクレジットは API で使えず、API 残高との相互振替もできません。 タスクの受理時に、見積もりの上限額を API 残高から確保します。完了後は実際の使用量で精算し、確保額を超える請求はせず、差額を解放します。タスクが失敗した場合は確保額を解放します。
API でのVEED Dubbing Proのモデル名は？
POST /jobs/createTask の model フィールドに 動画翻訳は veed/dubbing-pro/video-translate を指定します。
どの地域のアクセントに対応していますか？
英語はアメリカ、イギリス、オーストラリア、カナダ、スペイン語はスペイン、メキシコ、アルゼンチン、チリ、フランス語はフランスとカナダ、ポルトガル語はブラジルとポルトガルに対応しています。そのほか、エジプトのアラビア語と、台湾向けの表記を使う中国語にも対応しています。地域を含まないコードを指定すると、基本言語が選ばれます。
コードを書かずにVEED Dubbing Proを試せますか？
API キーなしで、API の米ドル残高を使って Playground から VEED Dubbing Pro を実行できます。各実行は対応するコードとともに開発者の履歴に記録されます。
