Фото в видео нейросеть: как превратить снимок в видео, три модели на одном фото

Чтобы превратить фото в видео нейросетью, откройте инструмент «Фото в видео», загрузите снимок как первый кадр, напишите одно предложение о том, что должно двигаться, выберите видеомодель и нажмите «Создать». Примерно через минуту вы получите 5-секундный клип, который начинается точно с вашего фото.

Мы проверили это на одном портрете и одном промпте, прогнав их через три разные видеомодели, чтобы было видно, что меняется при смене модели: движение, лица, звук, скорость и цена.

Шаг 1: выберите фото, которое хорошо оживёт

Первый кадр видео — это ваше фото, поэтому именно оно определяет большую часть результата. Лучше всего работают такие снимки:

• Один понятный объект, крупно в кадре, с видимым лицом.
• Резкое и хорошо освещённое. Размытость на фото становится размытостью в видео.
• Место для движения. Человек, который идёт, имеет куда идти; человек, прижатый к краю кадра, — нет.

Вот фото, которое мы использовали. Это портрет женщины на улице в золотой час, а за ней размытый город:

Шаг 2: напишите одно предложение о движении

Фото описывать не нужно: модель его уже видит. Вы описываете, что должно происходить. Мы использовали один и тот же промпт для всех трёх моделей:

Формула простая: кто что делает, как двигаются ткань или волосы, что делает камера. Оставьте одно действие. «Медленно идёт вперёд и улыбается» модели даётся легко; «идёт, потом танцует, потом машет рукой» — там лица начинают плыть.

Шаг 3: выберите модель, три результата

Все три клипа по 5 секунд, созданы из одного фото с одним промптом.

MiniMax H3

Она поворачивается, улыбается и идёт к камере, волосы и куртка двигаются так, как просил промпт. Звуковая дорожка следует строке «natural city street sound» из промпта. Стоимость: 185 кредитов.

Kling 3.0

Kling дал самое спокойное и естественное выражение: маленькую расслабленную улыбку, а не широкую, и самую тонкую проработку кожи из трёх. Звук по умолчанию выключен, поэтому этот клип без звука. Стоимость: 336 кредитов.

Seedance 2.0 Fast

Самый быстрый из трёх и самая маленькая картинка (480p). Движение мягче, чем у двух других. Это хорошая модель, чтобы попробовать пять идей, прежде чем тратить больше на лучшую. Стоимость: 225 кредитов.

Рядом

Во всех трёх случаях её лицо, волосы и куртка оставались близкими к фото на протяжении всего клипа. Этого и ждут от модели «изображение в видео»: она двигает ваше фото, а не заменяет его.

Шаг 4: скачайте, продлите или используйте эффект

Клип готов к скачиванию. Если хочется длиннее, продлите видео с его последнего кадра. Если не хочется писать промпт вовсе, видеоэффекты — это версии идей вроде подъёма на воздушном шаре, танца или объятия, запускаемые в один тап. Нужно только добавить фото.

Промпты, которые работают

• Ходьба. «Она медленно идёт к камере, ветер качает её волосы.»
• Портрет. «Он поднимает глаза, улыбается и слегка кивает. Камера медленно приближается.»
• Питомец. «Собака встряхивает головой и виляет хвостом, камера неподвижна.»
• Товар. «Камера медленно обходит кружку, из чашки поднимается пар.»
• Пейзаж. «По небу плывут облака, по озеру расходится рябь.»

Частые проблемы

• Лицо меняется. Сократите промпт до одного действия и попробуйте то же фото на второй модели.
• Почти ничего не двигается. Добавьте движение камеры («медленное приближение») и движение тела или ткани («её шарф развевается»).
• Концовка выглядит странно. Просите 5 секунд, а не 10: большинство моделей стабильнее всего в первых пяти.
• Нужен звук. Включите аудио, когда модель его предлагает, и опишите звук в промпте («дождь по стеклу»).

Если один и тот же персонаж должен появиться во многих клипах, создайте его один раз в Персонажах и каждый раз используйте как исходное фото.