«Сбер» представил обновлённую версию нейросети Kandinsky для генерации изображений по текстовому запросу
Она умеет также смешивать несколько картинок или создавать изображение на основе другого.
- Kandinsky 2.1 — улучшенная версия одноимённой нейросети, которую «Сбер» представил в июне 2022 года. Это уже не первое обновление, версию Kandinsky 2.0 показали в ноябре 2022-го.
- Воспользоваться ею можно на сайте, при помощи команды «Запусти художника» на «умных» устройствах Sber, в приложении «Салют», на платформах ML Space и Fusion Brain, а также в Telegram-боте.
- Модель дополнительно обучили на 170 млн пар «текст — изображение», а затем дообучали на отдельно собранном датасете из 2 млн пар изображений. В Kandinsky 2.0 было 2 млрд параметров, в Kandinsky 2.1 — 3,3 млрд.
- Нейросеть также усовершенствовали за счёт новой обученной модели автоэнкодера (автокодировщик; нейросеть, которая сначала кодирует входные данные, а потом декодирует их в другом виде — прим. vc.ru), которая используется в том числе в качестве декодера векторных представлений изображений. Это улучшило генерацию изображений в высоком разрешении — лиц и других сложных объектов.
- Kandinsky 2.1 может создавать изображения по текстовому описанию. Также она умеет изменять их по текстовому запросу, смешивать несколько рисунков, дорисовывать недостающие части, генерировать изображения, похожие на заданное и другое. Кроме этого, она использует для генерации специальное представление картинки от CLIP — классификатора изображений от OpenAI.
- Нейросеть понимает запросы на 101 языке — включая русский и английский. Обучали модель исследователи Sber AI и учёные из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и SberDevices.
По запросу «Парусник в бушующем океане, стиль Ивана Айвазовского, масло»
По запросу «Пользователь vc.ru читает новости, аниме»
А вот так ИИ рисует сам Сбер
У меня вот так получилось. Где у них руки?
Это только подтверждает насколько нейросеть крутая, как тонко она чувствует это дерьмо
Побаловался с сеткой. Мне кажется достойный результат.
Я бы так точно не нарисовал.
С этим срочно нужно что-то делать©️
Сберыч как всегда, раньше он заставлял стоять в очереди в своих отделениях, а теперь заставляет стоять в очереди за изображениями. Хоть что-то не меняется никогда.
Уровень обслуживания, кстати, тоже на уровне. Спасибо ещё нах..й не послал.