Нейросеть дня «Runway»: генерируйте и редактируйте видео (часть 2)

Вчера я делал обзор нейросети для генерации видео от Runway, сегодня поговорим про другие инструменты, которые они предлагают.

Давайте взглянем, что же ещё умеет Runway, кроме генерации кривоватых видео:

1. Удаление фона на видео (Green Screen) — выделяете любой объект на видео и удаляете остальное, затем этот объект можно вставить в другое окружение или выбрать цвет фона. Неплохо справляется с движениями объекта (тестировал на видео с катанием на скейтборде, снятым на телефон).
2. Удаление объектов с видео (Inpainting) — выделяете лишний объект и нейросеть удаляет его с видео. Плохо справляется с тенями.
   
3. Изменение цветовой гаммы видео (Text to Color Grade) — описываете, в какой цвет или стиль перекрасить видео и получаете цветокоррекцию.
   
4. Замедление видео (Super-Slow Motion) — загружаете видео и выбираете, насколько его надо замедлить. Нейросеть дорисовывает кадры, если кадровой частоты не хватает для плавности.
   
5. Замазывание лиц на видео (Blur Faces) — нейросеть сама находит и блюрит лица, от вас требуется только загрузить и потом скачать видео.
   
6. Разделение видео на сцены (Scene Detection) — инструмент сам нарезает ваше видео на смысловые фрагменты, отталкиваясь от смены камеры, объектов и ракурса.
   
7. Склеивание нескольких изображений в видео (Frame Interpolation) — загружаете изображения, выбираете продолжительность и получаете слайдшоу на стероидах.
   

На самом деле, возможностей больше. Помимо видео, есть ещё генерация изображений, но работает она хуже любой другой популярной модели (не достойна обзора). А также обработка аудио (всё-таки придётся делать третий обзор).

Большая часть этого добра пока доступна бесплатно с ограничениями по качеству (720p). Подписка за $12 в месяц снимает большую часть ограничений и даёт 125 секунд генерации видео, за $28 можно получить 450 секунд и полный фарш.

-----

Авторские обзоры ИИ-инструментов несколько раз в неделю. Удобнее читать в Telegram — https://t.me/universe_ai