Нейросеть Sora для генерации видео и оживления картинок без регистрации и VPN
Нейросеть Sora от Open AI предназначена для генерации видео по промтам (текстовым описаниям) и для оживления фотографий (картинок), отправленных пользователем. Среди расширенных функций нейросети следует выделить возможность стилизации ранее сгенерированных видео и их зацикливание (опция Loop). В этой статье мы разберем возможности Sora и расскажем, как получить к ней доступ без оплаты тарифа PRO за $200.
Список функций нейросети Sora:
- Генерация видео по промту.
- Генерация видео по стартовому изображению (референсу), оживление фотографий.
- Генерация видео по промту и стартовому изображению.
- Поддержка промежуточных кадров и промежуточных промтов (существует возможность планирования сюжета генерируемого видео).
- Продление ранее сгенерированных в Sora видеороликов.
- Стилизация ранее сгенерированных видео по текстовому описанию (промту).
- Генерация видео с финальным кадром (частный случай использования промежуточных кадров).
- Поддержка шаблонов (можно выбрать заранее подготовленный стиль анимации или создать свой собственный, подобная функция есть в Pika Ai): Ballon world, Stop motion, Archival, Film noir, Cardboard & Papercraft.
Способы получения доступа к нейросети Sora Ai:
- На официальном сайте sora.com (без VPN или прокси с IP адресом в США не будет работать + заграничная карта для оплаты подписки + $200 за месячный доступ к PRO-аккаунту). На момент написания статьи возможность регистрации новых аккаунтов была закрыта.
- Через Telegram-бота @yes_ai_bot (не требуется регистрация, оплата производится только за созданные генерации без покупки подписки, нет водяного знака на видео, расширенные опции, некоторые функции еще в разработке).
На сайте sora.com есть два варианта подписки:
- PRO (за $200 в месяц) — дается 10 000 кредитов, можно скачивать видео без водяного знака, можно генерировать видео, на которых присутствуют люди, максимальная длительность видео 20 секунд, максимальный размер видео 1080p (Full HD).
- Starter (за $20 в месяц) — дается 1000 кредитов, нельзя генерировать видео, на которых находятся люди, максимальная длительность видео 5 секунд, максимальный размер видео 720p. Тариф может подойти лишь для общего ознакомления с Сорой.
Пара слов о достоинствах и недостатках нейросети Sora Ai
Мы выскажем свое мнение на основании сравнения возможностей нейросети Sora Ai и ее конкурентов, вышедших на несколько месяцев раньше и уже успевших обзавестись обновлениями (Kling Ai, Pika Art, Luma).
В конце статьи мы привели еще несколько примеров видео, созданных в нейросети Sora AI 👇
Громкий анонс и глубокий провал?
Когда компания Open Ai анонсировала запуск Sora, были продемонстрированы видеоролики, в которых степень "правдоподобности" анимации была достаточно высока, но "боевая" версия оказалась не так проста. Для получения достойных результатов вам потребуется немалая сумма денег и десятки тестов.
Пояснение от автора: первую версию Sora не следует судить строго, в скором времени большинство ее недостатков будет устранено. Очевидно, что компания Open Ai очень торопилась с запуском, так как конкуренты уже начали активный захват рынка.
Что в Sora сделано хорошо?
- Следует отметить достаточно высокую скорость генерации видео (если у вас не закончились кредиты, которые входят в тариф).
- Достаточно хорошо получаются видеоролики, созданные по текстовому описанию (без начального кадра).
- Широкий функционал (один из лучших на рынке).
- Стилизация ранее сгенерированных видео по текстовому описанию (промту) тоже работает неплохо.
- Достаточно высокий показатель согласованности кадров.
- Способность запоминать образ, одежду и лица позволяет Соре сохранять их на протяжении всего видео.
- Сохранение целостности фоновых объектов при движении объектов переднего плана.
👍 С помощью Sora можно с легкостью создавать юмористический контент, так как нейросеть часто делает забавные анимации...
Список недостатков Sora:
- Низкая степень согласованности исходной картинки с видеорядом (если используется референс), возможен даже "разрыв" контекста (первые кадры будут содержать исходную картинку, но потом анимация пойдет "своей дорогой"). В Kling Ai анимация по референсу работает лучше.
- Нейросеть достаточно плохо прислушивается к тому, что написано в промте, многих вариантов анимации пока не знает. Трудно назвать это полноценным недостатком, т.к. другие нейросети этим тоже грешат. Некоторые токены в промтах применимы лишь к определенным изображениям, если используется референс, то же самое касается и шаблонов (ролей).
- Сравнительно высокая стоимость. За $200 вы получаете 10 000 кредитов, которых хватит на создание 500 видеороликов (если установлены минимальные настройки и длительность). Когда кредиты, заложенные в тариф, закончатся, генерации будут выполняться в порядке живой очереди. Стоимость 1 кредита примерно равна 2 руб., т.е. самый простой и короткий ролик обойдется в 40 рублей (без учета расходов на комиссии и пр.). Стоимость видео длительностью 10 секунд при разрешении Full HD с соотношением сторон 16:9 составит около 1200 рублей ~12$.
- Проблема всех нейросетей для анимации картинок коснулась и Sora - иногда в видео вы будете получать статический кадр, если она не "придумает", как заставить присутствующие объекты, животных или людей исполнять задуманное.
- Слишком строгий фильтр контента. Сора часто видит NSFW там, где его нет, но это точно доработают в ближайшее время. Запрещено генерировать видео по промтам, в которых упоминаются известные личности.
Еще раз обращаем внимание на то, что первая версия Sora не "закопала" конкурентов, но у нее есть большой потенциал, если учесть, что старт был достойным.
Стоит ли платить за полную версию Sora $200 в месяц?
Это можно считать вполне адекватной инвестицией, если вы являетесь профессионалом в области контент-мейкинга или маркетинге, но, если ваша цель заключается в создании исключительно развлекательного контента, то стоит подумать об альтернативных вариантах доступа к нейросети Sora. Сейчас расскажем об этом чуть подробнее.
Важная рекомендация: если вы впервые используете Sora, то выбирайте минимальное разрешение 480p для тестирования промтов и функций, чтобы не тратить кредиты.
Как создать видео в Sora через бота в Telegram?
Для начала перечислим возможности "Соры" в @yes_ai_bot, которые доступны уже сейчас:
- создание видео по текстовому описанию;
- генерация видео по стартовому кадру (референсу);
- генерация видео по текстовому описанию и стартовому кадру;
- поддержка всех шаблонов анимации из официальной версии Sora (Воздушные шары, Ручная работа, Старая пленка, Нуарный стиль, Оригами);
- выбор соотношения сторон (1:1, 16:9, 9:16);
- выбор разрешения (480p, 720p, 1080p);
- выбор длительности видео (5, 10, 15, 20 секунд).
Шаблоны анимации для Sora — это промты (роли), которые применяются при генерации видео вместе с написанным текстовым описанием пользователя. Вы можете создать собственные роли, но перед этим придется провести множество тестов каждого токена, т.к. многие слов Сора просто игнорирует.
Все дополнительные возможности нейросети Sora будут добавлены в Yes Ai bot в скором времени, об этом сообщим в новостях на нашем канале в Телеграм @yes_ai_official (рекомендуем следить за обновлениями).
Как подать задание на генерацию видео в нейросети Sora в Yes Ai Bot
- запустите @yes_ai_bot в мессенджере Telegram;
- в нижнем меню выберите пункт "Нейросеть: ... [изменить]";
- в появившемся списке нажмите кнопку "Yes Video"...
Есть два варианта подачи заданий:
- Отправьте боту текстовое описание того, что Сора должна сгенерировать (поддерживается любой язык ввода, в т.ч. русский).
- Отправьте боту картинку или фотографию, которую хотите оживить.
...выберите нейросеть "Sora" в появившемся списке.
Далее вам будет доступна возможность выбора параметров анимации: соотношение сторон, размер видео, "Эффекты" — шаблон стиля (крайне плохо работает, если вы используете стартовую картинку в качестве референса), длительность (от 5 до 20 секунд).
Вам останется запустить задание и дождаться результата.
Стоимость генерации видео в нейросети Sora зависит от выбранных настроек. Выбранный эффект и длина промта не влияют на стоимость.
Важным преимуществом генерации видео через Yes Ai Bot является то, что полученные ролики можно улучшить, например, сделать апскейл или увеличить количество кадров в секунду (FPS). Кстати, вы можете сэкономить на генерациях в Sora как раз за счет того, что даже видео с небольшим разрешением 480p можно увеличить (сделать апскейл) до 1080p (Full HD) — эта опция также работает через нейросети (не Sora). Об этом рассказано в отдельной статье...
Примеры видеороликов, созданных в нейросети Sora
В этой части статьи мы покажем примеры видео из "Соры", которые сгенерированы по простым промтам и референсам, ибо только так можно оценить базовые характеристики нейросети. Эксперименты со сложными промтами и шаблонами (ролями) рекомендуем провести самостоятельно.
...как говорилось ранее, генерации по текстовому описанию в Sora работают очень хорошо.
...попытка куда-то посмотреть у девушки действительно была, но промт не совсем сработал.
...промт не был понят нейросетью, мы сделали более 10 попыток.
...это пример того, как Sora оборвала анимацию референса: на первых кадрах видно исходник, но нейросеть не смогла сделать качественный переход.
Если вам интересны дополнительные возможности нейросетей для работы с видео, рекомендуем прочесть эту статью...
Потрясающе! Иду тестить! Благодарю за полезную статью.
Очень полезная статья. Особенно информация, что есть возможность попробовать создавать видео в телеграмме. Меня интересует контент о создании видео в нейросетях, и я собираю информацию о таких ресурсах. Спасибо!
Проект агонь, венчурные инвестиции не планируете привлекать на масштабирование?)
И я уверен, что функции еще будут пополняться, потому что сейчас в принципе нейросети становятся незаменимыми в некоторых случаях, по крайней мере так считают многие. Еще бы сократить недостатки, вообще отлично было бы
Хорошая, ей только и пользуюсь
Громкий анонс и глубокий провал?
- Я бы не сказала, что это провал, особенно после того как почти все нейроблогеры в один голос говорят, что это без преувеличение лучшая модель для создания видео, тем более единственная которая может создать видео длинной до минуты. Нужно пробовать, вот возьму про подписку и будем тестить, пока мой фаворит это конечно Ген-3 с его безлимитной подпиской, безлимит очень решает в генерациях не ограничивая тебя количеством этих самых генераций и позволяя добиться именно желаемого результата.