Как оживить фото? | Набор нейросетей для оживления и создания видео
Оживление фото раньше был сложным процессом, который требовал наличие навыков использования сложнейших программ. Но теперь, в эпоху развития нейросетей, каждый может оживить фото за несколько секунд.
У нас уже была одна статья по оживлению фото. С тех пор прошло достаточно времени и появились новые нейросети: от самых дешевых до достаточно дорогих. Настало время провести новый эксперимент.
В данной статье мы будем делать оживленные фото через Kling, Seedance и Wan. Начнем мы с самого дешевого метода. В конце подведем итоги и выявим лучшую нейросеть для оживления фото по версии нашей редакции.
Содержание:
Как оживить фото? | Исходные данные для эксперимента
Выбираем фото для оживления
Для нашего теста с оживлением фото мы будем использовать три нейросети, две из них разных версий: Seedance V 1.0 Lite, Seedance V 1.0 Pro, Kling 2.1 Master, Kling 2.5 Turbo, Wan 2.5. На момент написания статьи эти нейросети - флагманские.
Все эти инструменты есть в Нейрон Боте, как и в прошлой статье - оживлять фото будем там.
Для проведения эксперимента возьмем такую фото с соотношением сторон 16:9:
Теперь переведем фото в цвет через Nano Banana и вот какой результат мы получим:
Данная фотография выбрана не случайно - на ней много людей и разных деталей, посмотрим, смогут ли нейросети "оживить" это фото.
Формулируем запрос к нейросети
Для того, чтобы нейросеть оживила наше фото, она должна понять: а что собственно мы от нее хотим? Для этого нам надо написать промпт - запрос в нейросеть, где мы должны все это описать. Чем детальнее промпт - тем лучше результат.
Не надо отправлять в нейросеть фото и писать ей: оживи фото.
Скорее всего, вы просто потратите генерацию в пустую, а результат будет мягко говоря не очень. Советы по написанию промптов вы можете найти в нашем телеграм канале.
Для оживления фото мы напишем самый элементарный запрос, без JSON-промптинга и прочих ухищрений. Но стоит отметить, что лучше всего нейросеть понимает запросы на английском языке, поэтому нам надо перевести наш запрос на английский. Вот запрос на русском языке:
На фото - танк, который застрял в грязи, рядом с которыми находятся четыре человека. Сюжет видео: два человека пытаются его откопать танк из грязи. Они должны копать и вываливать грязь с лопаты на землю. Камера - статична, не двигается.
Переводим запрос на английский:
The photo shows a tank that is stuck in the mud, next to which there are four people. The plot of the video: two people are trying to dig a tank out of the mud. They have to dig and dump the dirt from the shovel onto the ground. The camera is static, not moving
С данным промптом и фото мы будем делать запрос к нейросети для оживления фото. Чтож, поехали!
Оживление фото через Seedance V 1.0 Lite
Начнем нашу подборку оживлений фото с Seedance V 1.0 Lite. Это самая дешевая нейросеть, представленная в Нейрон Боте. А промо подписки за 29 рублей хватит на 10 оживлений фото в этой нейросети
Для теста мы выбираем самое маленькое качество - 480p и длительность в 5 секунд. Это самый дешевый вариант - 5 токенов.
Инструкция по оживлению фото через Seedance V 1.0:
Примечание: в Seedance формат видео подстраивается под формат стартового кадра для оживления.
А вот и результат нашего оживления через Seedance V 1.0 Lite:
Итоги: общая картинка получилась очень круто, но мне лично не понравилось, как грунт ссыпается с лопаты :( Однако, стоит отметить, что для непритязательного пользователя данный результат достаточно крутой, особенно за такую разумную плату. Идеально для футажей видео монтажа (только качество побольше надо выбрать). И физика воды под ногами понравилась, за это лайк.
Плюсы данной нейросети:
- Цена. Данное оживление фото обошлось нам в 5 токенов (10-12 рублей, если без промо подписки).
- Скорость работы. Данное видео было создано меньше, чем за минуту.
- Можно генерировать видео длиной до 10 секунд и качеством до 1080p.
Минусы данной нейросети:
- Нельзя прикреплять конечный кадр. Несмотря на это, склеить длинное видео из множества коротких можно, взяв конечный кадр первого видео как начальный кадр второго, однако если вам нужно, чтобы видео закончилось конкретным кадром - такое сделать не получится.
- Видео создается без звука. Для оживления фото зачастую это не критично.
Резюме: по соотношению цена качество - пока круто, но физика немного хромает. Посмотрим, что сделает версия Seedance V 1.0 Pro.
Оживление фото через Seedance V 1.0 Pro
Продолжим нашу подборку оживлений фото с нейросетью Seedance V 1.0 Pro. Эта нейросеть чуть дороже, чем ее более быстрая Lite версия, но не критично. А промо подписки за 29 рублей в Нейрон Боте хватит на 7 оживлений фото в этой нейросети.
Для теста мы выбираем самое маленькое качество - 480p и длительность в 5 секунд. Стоимость оживления фото - 7 токенов.
Инструкция по оживлению фото через Seedance V 1.0 Lite уже была ваше. Отличие этой версии - выбираем версию Pro, все остальное точно так же. И вот какой результат мы получили:
Итоги: Первое слово - ВАУ. Однако видно, конечно, что видео сделано через нейросеть: неестественно отбрасывается грязь и стоит лопата без опоры, хе-хе. Однако то, как человек зачерпывает грязь и отбрасывает ее - заслуживает уважение, физика среды в версии Pro гораздо лучше. А лопату можно поправить, если сделать запрос еще раз:)
Плюсы данной нейросети:
- Цена. Данное оживление фото обошлось нам в 7 токенов (14-17 рублей, если без промо подписки).
- Скорость работы. Данное видео было создано меньше, чем за минуту.
- Можно генерировать видео длиной до 10 секунд и качеством до 1080p.
- Хорошо проработана физика среды.
Минусы данной нейросети:
- Нельзя прикреплять конечный кадр. Не критично.
- Видео создается без звука. Не критично
Резюме: со второй попытки версия Pro, я думаю, выдала бы идеальное оживление фото. В данном видео мне не понравилось неестественное положение лопаты и это надо поправить промптом. Но для чистоты эксперимента я делаю все за одну попытку, поэтому оставим, как есть.
Ну, а теперь у нас на очереди - Kling двух версий: 2.1 Master и 2.5 Turbo
Оживление фото через Kling 2.5 Turbo
После Seedance V 1.0 Pro перейдем оживлять то же самое фото через Kling 2.5 Turbo. Это нейросеть среднего ценового сегмента. Она также представлена в Нейрон Боте. А промо подписки за 29 рублей хватит всего на 2 оживления фото в этой нейросети.
Для теста мы также выбираем длительность в 5 секунд. Негатив-промпт пропускаем, степень соответствия выбираем 0.5 - пусть нейросеть не так сильно будет загнана в рамки промпта при оживлении фото.
Инструкция по оживлению фото через Kling 2.5 Turbo:
Примечание: в Kling формат видео подстраивается под формат стартового кадра при оживлении фото.
А вот и результат нашего оживления через Kling 2.5 Turbo:
Итоги: В целом, к физике процессов докопаться не могу, все максимально хорошо детализировано и мне лично ничего в глаза не бросается. Результат оживления фото понравился. Единственный минус - как-то трясет камеру.
Плюсы данной нейросети:
- Цена. Данное оживление фото обошлось нам в 20 токенов (40-45 рублей, если без промо подписки).
Да, это дороже, чем Seedance, но уже сразу в 1080p качестве (2K). Seedance в качестве 1080р обошелся бы в 32 токена за Pro версию и в 20 токенов за Lite. Kling в хорошем качестве выходит дешевле. - Хорошо проработана физика среды.
- Можно написать негатив-промпт. То, что вы не хотите, чтобы было на видео. Например, я бы тут написал "трясущаяся камера".
- Можно регулировать степень соответствия и давать нейросети маневр для креатива при оживлении фото.
Минусы данной нейросети:
- Нельзя прикреплять конечный кадр. Не критично.
- Видео создается без звука. Не критично
- Нельзя выбрать низкое качество для теста промпта. В Seedance тестить очень удобно: выбрал низкое качество (ниже качество - дешевле и быстрее), проверил промпт и доделал его как надо, а затем уже создал дорогую генерацию в хорошем качестве, сэкономив пару десятков рублей. Мелочь, а приятно.
Резюме: если нужна генерация в качестве 1080p - Kling 2.5 Turbo будет самым дешевым методом оживления фото в нашем рейтинге. Результат он выдал идеальный, сложно докопаться, но можно.
Чтож, теперь давайте проверим версию 2.1 Master
Оживление фото через Kling 2.1 Master
Теперь перейдем оживлять то же самое фото через Kling 2.1 Master. Это нейросеть высокого ценового сегмента. Она также представлена в Нейрон Боте. Промо подписки за 29 рублей не хватит, но хватит той, которая за 59 рублей - она дает 100 токенов, а стоимость генерации - 75 токенов.
Для теста мы также выбираем длительность в 5 секунд. Негатив-промпт пропускаем, степень соответствия выбираем 0.5 - пусть нейросеть не так сильно будет загнана в рамки промпта при оживлении фото.
Инструкция по оживлению фото через Kling 2.1 Master точно такая же, как и для Kling 2.5 Turbo. Разница - нажимаем на другую кнопку при выборе версии нейросети.
Вот, что получилось после оживления фото:
Итог: Отправляю, как есть, одна попытка на генерацию. Я в шоке! Но физика среды тут хорошая, артефактов нет, а остальное....
Данное видео получилось очень плохим. Либо надо переделать промпт, но сами видите: лица плывут, какие-то непонятные артефакты. Хотя это самая дорогая и качественная версия.
Вообще, версия 2.1 Master должна была сделать очень хорошее видео, но тут что-то пошло не так. Таким образом, я наглядно вам показал, что дорого - не значит качественно и круто. Для оживления фото Kling 2.1 Master я бы не использовал больше. Ну или, делал бы это очень аккуратно.
Стоимость данного видео вышла в 75 токенов - это примерно 150-160 рублей.
Плюсы и минусы, резюме делать не буду - пропало настроение😂😂😂. Делайте выводы сами. Но скажу лишь, что это нейросеть очень хорошая, но для других задач. Для оживления фото - не очень, как мы увидели.
Далее у нас на очереди нейросеть от компании Alibaba - Wan 2.5
Оживление фото через Wan 2.5
После Kling обоих версий идем оживлять фото через Wan 2.5. Это нейросеть среднего ценового сегмента. Она уже представлена в Нейрон Боте. А промо подписки за 29 рублей хватит всего на 1 оживление фото в этой нейросети.
Для теста мы также выбираем длительность в 5 секунд. Негатив-промпт пропускаем, качество - 720p, обычная генерация - без нейросетевого улучшения промта.
Wan 2.5 делает видео сразу со звуком
Инструкция по оживлению фото через Wan 2.5:
А вот и результат нашего оживления фото через Wan 2.5:
Итоги: со звуком - прикольно! Идеально попадают под лопату главного героя, но остальные остаются бесшумными. В целом, это не критично. Физика процессов - достойная. Камера стоит на месте. Оживление фото получилось хорошим, меня все устраивает, в целом. А вас?
Плюсы данной нейросети:
- Хорошо проработана физика среды.
- Можно написать негатив-промпт. То, что вы не хотите, чтобы было на видео. Например, я бы тут написал "трясущаяся камера".
- Можно выбрать улучшенный промптинг. Идеально для новичков, но используйте эту функцию с осторожностью.
- Звуковое окружение - нейросеть генерирует видео со звуком. Можно создать прямую речь. А в режиме текст в видео можно добавить свой звук
Минусы:
- Довольно дорого - данное видео вышло в 30 токенов (60-70 рублей) за качество 720p и длительность 5 секунд
- Нельзя прикрепить конечный кадр. Не критично, но все же
Резюме: если нужно оживить фото со звуком - Wan 2.5 будет хорошей альтернативой VEO 3.1, цена у них одинаковая (Эта нейросеть также есть в Нейрон Боте, мы обозревали ее в первой части)
Общие итоги
Подводя общие итоги нашего эксперимента с оживлением фото хочется сказать, что эта задача кратно упростилась в наше время. Теперь оживить фото вы можете за считанные минуты (если не секунды) и результат будет всяко лучше, чем это могли сделать раньше, еще буквально пару лет назад. Интересно вернуться к этой статье спустя пару лет и сравнить, как далеко нейросети шагнули вперед.
Ну и не забывайте - на момент написания этой статьи попробовать эти и другие нейросети вы можете от 29 рублей в Нейрон Бот: