Top.Mail.Ru
Поющее фото: нейросеть заставит фото петь вашу песню

Поющее фото: нейросеть, которая заставит фото петь вашу песню

Дайте ClipChat фото и готовый трек. Человек с фото становится певцом: губы идут за настоящим вокалом из вашего аудио, а такие сцены ставятся туда, где песне нужно исполнение в кадре. Вокруг них строится остальной клип.

Загрузите трек → добавьте фото → выберите поющие сцены → рендер
Загрузить трек
Бесплатно и без аккаунта: письменная трактовка песни, два визуальных мира и шесть карточек сцен с таймкодами, примерно за минуту. Это текст и раскадровка. Поющие сцены уже видео, для них нужны аккаунт и кредиты.
Pipeline

От фото до поющей сцены

Шесть шагов, и план вы утверждаете до того, как отрендерится хоть одно видео.

01
Загрузите песню
MP3 или WAV, от 10 секунд до 10 минут, файлом. Вокал из этого файла и будет исполнять певец.
02
Добавьте фото
Достаточно одного чёткого фото лица. Это можете быть вы, участник группы или придуманный вами персонаж. Берите фото, на которое у вас есть права.
03
Получите лист персонажа
ClipChat собирает по фото лист с пяти ракурсов. Это опора, которая удерживает одно и то же лицо, когда камера двигается или меняется место.
04
Посмотрите, где будет пение
План сцен отмечает сцены исполнения, обычно на припевах и хуках, и сюжетные сцены для остального. Поющую сцену можно перенести в другую часть песни.
05
Заставьте фото петь
Откройте сцену исполнения и запустите липсинк. Оживить можно само загруженное изображение или сгенерированный кадр с тем же человеком в месте действия сцены.
06
Доведите клип до конца
Поющие и сюжетные сцены собираются под ваше исходное аудио. Любую сцену можно переделать, не трогая остальные.
Difference

ClipChat и приложения для оживления фото

Приложения для оживления фотоClipChat
ДлинаКороткий ролик, часто на несколько секунд, где поёт одно лицо.Поющие сцены внутри целого клипа на трек длиной до 10 минут.
ЗвукЧаще всего популярный звук из библиотеки приложения.Ваш собственный трек. Певец исполняет вокал, который записан в вашем файле.
КадрОдно и то же обрезанное лицо анфас на весь ролик.Тот же человек в разных местах и ракурсах, его удерживает лист с пяти ракурсов.
КонтрольОдно нажатие, один результат. Если он не подошёл, начинаете сначала.План сцен, который вы сначала утверждаете, а потом переделываете сцены по одной.
Скорость и ценаБыстро и дёшево. Для короткого шуточного ролика это лучший выбор.Медленнее и с оплатой за каждую сцену. Сделано для релиза, а не для мема.
FAQ

Что обычно спрашивают

Как заставить фото петь с помощью нейросети?

Загрузите в ClipChat свой трек и фото. В плане сцен откройте сцену исполнения и запустите липсинк. Лицо с фото оживает так, что губы идут за вокалом из вашего аудио в этом месте песни.

Можно ли сделать поющее фото бесплатно?

Предварительный просмотр бесплатный и без аккаунта: трактовка песни и шесть карточек сцен. Поющие сцены уже видео, они стоят кредитов. Новый аккаунт получает небольшой разовый запас кредитов, его хватает, чтобы проверить несколько коротких сцен. Для целого клипа нужен платный тариф.

Можно взять свою песню?

Да, только так это и работает. ClipChat нужен ваш аудиофайл. Библиотеки звуков здесь нет, и музыку он не генерирует.

Можно ли взять фото другого человека?

Только если у вас есть право использовать его изображение. За фото и треки, которые вы загружаете, отвечаете вы. Не загружайте фото людей, которые на это не соглашались.

Лицо останется одним и тем же во всех сценах?

Для этого и нужен лист персонажа с пяти ракурсов. Он собирается один раз по вашему фото и служит визуальным образцом для каждой сцены, поэтому певец остаётся узнаваемым в разных местах и с разных ракурсов.

Какого качества получится видео?

По умолчанию 480p, для черновиков. Можно выбрать 720p и 1080p, в том числе для отдельных сцен. Доступны и вертикаль 9:16, и горизонталь 16:9.

Honesty

Чего он не делает

Почему хватает одного фото

У большинства людей, которые выпускают музыку, нет съёмочной группы, зато есть фото. Мы сделали лист персонажа, чтобы одно фото могло вытянуть целый клип: одно и то же лицо на припеве, в сюжетных сценах, в последнем кадре. В поющих сценах звучит вокал из вашего трека, потому что певец, который открывает рот под чужой звук, это уже не ваш клип.

Загрузите трек и фото и посмотрите поющие сцены в плане

Загрузить трек