от VEED

Озвучка на 86 языков голосом каждого говорящего, губы перерисованы

veed/dubbing/video-translate
  • Переводчик видео

О модели VEED Dubbing

Озвучка на 86 языков голосом каждого говорящего, губы перерисованы.

Вызывайте его по имени модели veed/dubbing/video-translate через POST /jobs/createTask, от 0,144 $.

Введение

VEED Dubbing — стандартный уровень API дубляжа VEED. Отправьте говорящий клип в video_url, выберите target_language, и он вернётся на этом языке: голос каждого говорящего клонирован, а губы двигаются под переведённые слова.

Ключевые возможности

Губы следуют за новым языком

Область рта перерисовывается для каждого видимого говорящего. В нашем тесте в винном погребе и женщина, и мужчина были пересинхронизированы под испанский, тогда как бочки, бокал и свет остались нетронутыми.

Голоса, которые остаются узнаваемыми

Отдельного переключателя для этого нет: каждый говорящий клонируется из самого клипа, поэтому дубляж сохраняет тембр без отдельного образца голоса.

Перевод, который сохраняет смысл

В нашем тесте фраза, в которой женщина говорит, что спустилась в погреб одна, вернулась как "a solas", что позволяет избежать ошибки в роде, которую может допустить дословный перевод.

Параметры запроса

ПараметрОбязательныйОписание
keytermsНетИмена и термины, которые помогают модели использовать нужное написание в расшифровке.
source_languageНетЯзык речи в ролике. Определяется автоматически; выберите вручную при музыке, сильном акценте или длинных паузах. auto · af · ar · as · ast · az · be · bg · bn · bs · ca · ceb · cs · cy · da · de · el · en · es · et · fa · fi · fil · fr · ga · gl · gu · ha · he · hi · hr · hu · hy · id · is · it · ja · jv · ka · kk · kn · ko · ky · lb · ln · lt · lv · mi · mk · ml · mn · mr · ms · mt · my · ne · nl · no · ny · oc · or · pa · pl · ps · pt · ro · ru · sd · sk · sl · so · sr · sv · sw · ta · te · tg · th · tl · tr · uk · ur · uz · vi · yo · yue · zh · По умолчанию: auto
target_languageДаЯзык озвучки. Должен отличаться от языка ролика. af · ar · as · ast · az · be · bg · bn · bs · ca · ceb · cs · cy · da · de · el · en · es · et · fa · fi · fil · fr · ga · gl · gu · ha · he · hi · hr · hu · hy · id · is · it · ja · jv · ka · kk · kn · ko · ky · lb · ln · lt · lv · mi · mk · ml · mn · mr · ms · mt · my · ne · nl · no · ny · oc · or · pa · pl · ps · pt · ro · ru · sd · sk · sl · so · sr · sv · sw · ta · te · tg · th · tl · tr · uk · ur · uz · vi · yo · yue · zh
video_urlДаРолик, с которым работаем.

Цены

Цены указаны в USD. API использует отдельный баланс в долларах США. Кредиты сайта нельзя тратить в API или переводить на баланс API. Перевод с баланса API в кредиты сайта также недоступен. При принятии задачи мы резервируем максимальную сумму расчёта на балансе API. После завершения списываем плату за фактическое использование, не превышая резерв, и освобождаем остаток. Если задача завершается ошибкой, резерв освобождается.

ВариантUSD за секунду
Стандарт0,144 $

До запуска отправьте то же тело запроса в POST /jobs/quote, чтобы узнать ожидаемую и максимальную стоимость в USD. Расчёт не запускает задачу и не списывает деньги.

Сценарии использования

Один автор, несколько языков

Запишите один раз и публикуйте дубль для каждого нужного рынка, с губами, которые совпадают с каждой версией.

Локализация сгенерированных сцен

Озвучьте персонажей из видеомодели на язык вашей аудитории и сохраните убедительное движение губ.

Руководство по промптам и советы

Держите лица в кадре

Хорошо освещённые лица, повёрнутые к камере, дают самую чёткую синхронизацию губ. Широкие планы и закрытые лица тоже получают новый звук, но вокруг рта видимых изменений немного.

Keyterms — для имён, а не для переводов

Keyterms помогают транскрипции распознать имя или бренд; это не пары «термин — перевод». Записывайте каждый термин так, как он произносится в клипе.

Нужен акцент?

Этот уровень дублирует на базовые языки. Региональные акценты и управление сходством голоса доступны в VEED Dubbing Pro.

Быстрый старт API

Вызов API VEED Dubbing в три шага

  1. Создайте API-ключ. Войдите в PopNow и создайте ключ в консоли API. Ключи начинаются с sk-popnow-. Вызовы используют отдельный баланс в долларах США.
  2. Отправьте запрос. Отправьте POST /jobs/createTask с model veed/dubbing/video-translate и объектом input по таблице параметров. В ответе сразу придёт ID задачи.
  3. Получите результат. Опрашивайте GET /jobs/recordInfo по ID задачи или передайте callBackUrl — мы отправим результат туда. Когда задача выполнится, скачайте файлы по ссылкам.
# 1. Create the task. Keep the Idempotency-Key if you retry after a network error.
export IDEMPOTENCY_KEY="$(uuidgen)"
curl -X POST https://api.popnow.ai/api/v1/jobs/createTask \
  -H "Authorization: Bearer $POPNOW_API_KEY" \
  -H "Content-Type: application/json" \
  -H "Idempotency-Key: $IDEMPOTENCY_KEY" \
  -d '{
  "model": "veed/dubbing/video-translate",
  "input": {
    "video_url": "https://media.popnow.ai/effects/flower-bloom-1abd6efb.mp4",
    "target_language": "af",
    "source_language": "auto"
  }
}'

# 2. Copy data.taskId from the response, then poll until state is succeeded, failed, canceled or expired.
TASK_ID="TASK_ID_FROM_RESPONSE"
curl "https://api.popnow.ai/api/v1/jobs/recordInfo?taskId=$TASK_ID" \
  -H "Authorization: Bearer $POPNOW_API_KEY"

Замените промпт и ссылки на свои. Справка по ответу, опросу статуса и callback есть на вкладке API.

Вопросы об API VEED Dubbing

Сколько стоит API VEED Dubbing?

VEED Dubbing стоит 0,144 $ за секунду. API использует отдельный баланс в долларах США. Кредиты сайта нельзя тратить в API или переводить на баланс API. Перевод с баланса API в кредиты сайта также недоступен. При принятии задачи мы резервируем максимальную сумму расчёта на балансе API. После завершения списываем плату за фактическое использование, не превышая резерв, и освобождаем остаток. Если задача завершается ошибкой, резерв освобождается.

Какое имя модели у VEED Dubbing в API?

Укажите veed/dubbing/video-translate — Переводчик видео в поле model запроса POST /jobs/createTask.

Меняется ли изображение?

Только вокруг рта. Всё остальное в каждом кадре остаётся таким, как вы отправили. Размер кадра сохраняется. Частота выходного видео — 25 кадров в секунду.

Можно попробовать VEED Dubbing без кода?

Запускайте VEED Dubbing в Playground с баланса API в USD без API-ключа. Каждый запуск сохраняется в истории разработчика с соответствующим кодом.

Все модели VEED Dubbing

Ещё о VEED Dubbing