Topaz Labs: как улучшить качество фото и видео с помощью нейросети

Реставрируем плёночные фотографии и увеличиваем изображение без потери качества.

Topaz Labs выпускает ИИ-инструменты для обработки визуального контента. Можно настраивать фокус на размытых фотографиях, убирать шум, менять освещение и повышать детализацию на видео.

О том, как это делать бесплатно, 一 рассказали в тексте.

Перейдите на официальный сайт площадки и авторизируйтесь. Сделать это можно через почту, аккаунт в Google или Apple.

Затем вернитесь на главную страницу и кликните на «Web apps». Все приложения в этом разделе работают в браузере, скачивать ничего не нужно.

Каждый пользователь в месяц получает 10 кредитов на обработку изображений и 20 一 на обработку видео.

Одна обработка фотографии стоит один кредит. Улучшение видео обойдётся в 4–12 кредитов в зависимости от стоимости.

Платные тарифы стоят от $14 до $49 в месяц. Ограничений на обработку изображений нет ни в одном из них, главная разница 一 возможность использовать сгенерированный контент в коммерческих целях.

У инструмента есть три модели:

Выбрать подходящую модель можно в меню в левой части экрана. Там же можно настроить параметры резкости («Sharpen») и удаления шума («Denoise»). По умолчанию эти параметры настроены на значение 50 из 100 возможных.

Для эксперимента возьмём три фотографии животных разной степени размытости. Резкость и шум оставим по умолчанию.

Самый точный результат показала модель «Out of focus».

В меню в левой части экрана инструмент можно настроить:

В обоих случаях шум удалось убрать. При этом, если оставить параметр «Recover details» на нуле, то ИИ сделает текстуры максимально гладкими и безжизненными. Особенно это заметно на коже, которая выглядит «отфотошопленной». Если поднять значение «Recover details», то ИИ «восстановит» текстуры. Шум при этом не вернётся.

На официальном сайте Topaz Labs разработчики описывают инструмент так:«Add lost detail to faces» («Добавьте лицу утраченные детали»). Настроить можно два параметра:

Проверять инструмент будем на селфи знаменитостей, снятое на MET Gala в 2022 году.

Настройка освещения сработала удачно: снимок стал светлее, но это не выглядит как результат обычной обработки, где на фотографии увеличили яркость. Ощущение, будто в сам автобус на момент съёмки добавили дополнительные источники света.

Что касается «улучшения» лица, то судить можно по актрисе Эмме Стоун 一 именно она попала на первый план фотографии. Кажется, что ИИ просто убрал мимические морщины на лбу девушки и понизил контрастность.

В этом инструменте нейросеть предлагает довериться настройкам по умолчанию: модель сама понимает, как улучшить освещение. Чтобы это проверить, протестируем функцию на двух кадрах. На первом освещение минимальное, а второй снимок вышел чересчур засвеченным от прожекторов.

С тёмным кадром нейросеть справилась лучше, а вот засвеченный снимок практически не изменился.

Параметры работы инструмента можно настроить в меню в левой части экрана:

Для эксперимента снова обратимся к фото котёнка. Настройки: ограничивать зону работы не будем («Selection» на «Everything»), «Motion blur», сила обработки на 50.

Сам кот выглядит мультяшнее, чем на оригинальном изображении. При этом подушки и диван на фоне обзавелись видимой текстурой.

Работает и с фото, и с видео. Протестируем оба варианта.

У инструмента три модели на выбор:

Также в Topaz можно настроить «Upscale factor», то есть масштабирование. Можно не увеличивать кадр и выбрать «1х», также доступно увеличение в два и четыре раза.

«Preserve face» 一 отвечает за «сохранение» исходных черт лица. Если включить ползунок, то нейросеть максимально сохранит оригинал.

Чтобы проверить, как нейросеть обработает лица, возьмём для теста фотографию из личного архива. Для моделей Low Resolution V2 и CGI возьмём скриншоты с главной страницы vc.ru.

Нейросеть убрала шум, поправила резкость, увеличила само изображение. Лица вышли узнаваемыми.

Есть четыре модели:

Чтобы выбрать подходящую модель, можно обработать не всё видео, а только первые 5 секунд. Для этого нажмите на кнопку «Preview».