{"id":9280,"title":"\u0422\u0435\u043b\u0435\u043f\u043e\u0440\u0442\u0430\u0446\u0438\u044f \u0440\u0435\u043a\u043b\u0430\u043c\u043d\u044b\u0445 \u043a\u0430\u043c\u043f\u0430\u043d\u0438\u0439 \u0438\u0437 \u00ab\u042f\u043d\u0434\u0435\u043a\u0441\u0430\u00bb \u0432 Google","url":"\/redirect?component=advertising&id=9280&url=https:\/\/vc.ru\/promo\/321806-kak-ne-zamorachivatsya-s-reklamnoy-kampaniey-i-bystro-nastroit-ee-v-google-obyasnyaem-v-5-50-i-500-slovah&placeBit=1&hash=99a73b9041aba100376a41bce39d118cf714c283ce1c8288a963bcb51cdcdade","isPaidAndBannersEnabled":false}
Будущее
DTF

Google представила технологию, которая повышает разрешение изображений до 16 раз без потери качества Статьи редакции

В основе технологии — диффузионные модели.

В блоге Google AI, посвящённом исследованиям и разработкам в области искусственного интеллекта, обнаружили демонстрацию технологии масштабирования изображений на базе диффузионных моделей.

Как работает алгоритм Google

Специалисты внутренней команды Brain Team представили два связанных алгоритма, которые генерируют фотографии высокой чёткости без потери качества.

Первый из них называется SR3 (апскейлинг посредством повторного уточнения). На вход подаётся картинка с низким разрешением, и нейросеть пытается увеличить её, добавляя шум.

Модель обучается методам искажения изображения, а затем поворачивает весь процесс вспять, постепенно удаляя шум для достижения заявленного результата.

Инженеры обнаружили, что SR3 превосходит существующие генеративные алгоритмы, такие как PULSE и FSRGAN, особенно при работе с портретами и фотографиями природы.

В компании не остановились на достигнутом и разработали ещё одну диффузионную модель под названием CDM. На этот раз нейросеть обучили миллионам изображений высокого разрешения из базы ImageNet.

Алгоритм использует каскадный подход и увеличивает фотографии в два этапа: с разрешения 32×32 -> 64×64 -> 256×256 (в 8 раз), либо с 64×64 -> 256×256 -> 1024×1024 (в 16 раз).

Google опубликовала примеры работы алгоритмов. На некоторых изображениях заметны графические артефакты, но в целом результат действительно удивляет. О коммерческом распространении технологии данных пока нет.

Изменение изображений с 32x32 до 256x256 Google
Портреты, сгенерированные из фотографий низкого разрешения Google
0
178 комментариев
Популярные
По порядку
Написать комментарий...
Максим Федоров
Ответить
575
Развернуть ветку
useless uS

Ждала комментарии на эту тему. Ваш превзошёл мои лучшие ожидания в 16 раз.

Ответить
209
Развернуть ветку
Nikita

КККККОМБО

Ответить
10
Развернуть ветку
Yury Gagarin

да неее, в 32 примерно, может больше...

Ответить
1
Развернуть ветку
Aydar Sultanov

Учитывая, что нейросеть "дорисовывает" из своего, если можно так сказать, банка "воображения", основанного на предыдущем опыте, там при каждом "увеличении" будут разные номера автомобиля и разные картинки в отражении :)

Ответить
44
Развернуть ветку
Павел Сутырин

Так, где картинки с отражениями в телевизорах?

Ответить
1
Развернуть ветку
Гордон Фримэн

Хаха, тоже сразу вспомнил этот мем

Ответить
20
Развернуть ветку
Сергей Щукин

Теперь уже не посмеёшься!

Вот так технологии убивают мемы 🤣

Ответить
16
Развернуть ветку
Mike Kosulin

Мем вышел из-под контроля.

Ответить
8
Развернуть ветку
Владимир Комов

Так из мемов рождаются технологии.

Ответить
2
Развернуть ветку
Сергей Щукин

Не совсем. Технологии, всё-таки, рождаются в головах мечтателей (пусть даже таких, как безграмотные сценаристы CSI и подобных киношек)
😉

Ответить
1
Развернуть ветку
Misha Zakarin

От этого комментария на моих глазах появился фильтр Ностальгическая слеза, и я увидел в логотипе VC лайк с мизинцем с логотипа «Цукерберг позвонит». Применил этот фильтр ещё раз — лицо Андрея Загоруйко. После третьего наложения я уже скроллил эту страницу, видя ленту ЖЖ unab0mber 😭

Ответить
9
Развернуть ветку
Sergey Nikolaevich Gerasimov

Когда-то это было круто, потом мы выросли и поняли, что это голивудский пистеш…
Теперь я не знаю что думать 🤣🤣🤣
В Голливуде ванги сидят по ходу 🤣🤙

Ответить
4
Развернуть ветку
Интимный франт

Ну неужели теперь можно будет улучшать качество фото нло, когда фоткают на мыльницу !

Ответить
111
Развернуть ветку
Georgy Uvarov

Ща только надо датасет с миллионами нло найти только

Ответить
101
Развернуть ветку
Стас Иванов

У меня есть контакты на Рен-ТВ. 
Из этого выйдет очень крутая программа

Ответить
88
Развернуть ветку
Спокойный историк

Комментарий удален по просьбе пользователя

Ответить
28
Развернуть ветку
Роман Дегтярев

Прокопенко знаете?

Ответить
1
Развернуть ветку
Стас Иванов

Можно сказать, что да.
Я махал его водителю.

Ответить
15
Развернуть ветку
Nikita

А вас показали по телеку?

Ответить
2
Развернуть ветку
Стас Иванов

Конечно, чего ж нет.
Только я, ввиду масштабов своей личности, в хронометраж не влез ни разу.

Ответить
5
Развернуть ветку
imamoto tamagochi

Копропенко

Ответить
2
Развернуть ветку
Интимный франт

Можно еще экстрасенсов с ТНТ подтянуть, у них по любому несколько сотен тысяч снимков найдется. Остальное с проекта Дом # какой то там подтянуть, среди них много инопланетян. 

Ответить
0
Развернуть ветку
Oleg

генерализация, не, не слышал?

Ответить
0
Развернуть ветку
KSA

После изобретения тиктока НЛО исчезли.

Ответить
2
Развернуть ветку
Sam Beckett

Тиктока? Ок, зумер

Ответить
2
Развернуть ветку
KSA

Фотошоп уже не тот!

Ответить
1
Развернуть ветку
Nikita

Ну как исчезли..))))

Ответить
0
Развернуть ветку
KSA

Теперь никто не смотрит на небо, все уткнулись в мобилы.

Ответить
2
Развернуть ветку
Nikita

НЛО уже среди нас!!!

Ответить
1
Развернуть ветку
Алексей Мышкин

И чем оно там у вас занимается?

Ответить
0
Развернуть ветку
Сергей Луговых

Неопознаётся и летает, полагаю.

Ответить
0
Развернуть ветку
Вадим Осадчий

Они все в тиктоке?)

Ответить
0
Развернуть ветку
KSA
Ответить
2
Развернуть ветку
Vlad Likh

Не уверен, что в ImageNet, на котором модель обучена, были летающие тарелки. Хотя...

Ответить
2
Развернуть ветку
Роман Дегтярев

Тогда вся магия испарится

Ответить
0
Развернуть ветку
Nikita

Full HD

Ответить
0
Развернуть ветку
Pavel Pavel

вызов брошен

Ответить
52
Развернуть ветку
Emil Milka

вызов принят

Ответить
139
Развернуть ветку
Интимный франт

А как установить этот алгоритм для личного пользования? Или это фейк?

Ответить
0
Развернуть ветку
Евгений Кузовкин

Достаточно лишь каждое утро принимать немного...

Ответить
49
Развернуть ветку
Винниамин Пяточков

Конечно фейк. Либо это алгоритм поиска по базе известных картинок, которые при сжатии дают результат, равный исходному.

Ответить
1
Развернуть ветку
Максим Федоров

прочтите еще раз, он дорисовывает (додумывает)
то есть не фейк, но и не то, что ВАМ сначала показалось... в новости не написано (и по ссылке тоже), что "восстанавливает", если не написано, значит ваши фантазии дали искаженный смысл :)

Ответить
0
Развернуть ветку
Anton Vlasov

сколько это по шкале ебучих шакалов?

Ответить
21
Развернуть ветку
Николай Замотаев

Over 9000

Ответить
15
Развернуть ветку
Сергей Щукин

Трамп?

Ответить
4
Развернуть ветку
Georgy Uvarov

За тобой уже выехала бригада парамедиков нейрохирургов из гугла

Ответить
2
Развернуть ветку
Сергей Щукин

Для чего?

Любопытно, какая фантазия у вас в голове 🤔😁

Ответить
1
Развернуть ветку
Николай Замотаев

Мозг на нейросетки разобрать :)

Ответить
4
Развернуть ветку
Rodeus

Serious Sam

Ответить
1
Развернуть ветку
Сергей Щукин

Same shit 😆

Ответить
0
Развернуть ветку
Николай

Бля, а ведь правда по наиболее популярному сходству будет Трамп

Ответить
0
Развернуть ветку
Дмитрий Звягин

Не мем из сериала Дальнобойщики про "Ёкарный бабай"?)

Ответить
–1
Развернуть ветку
Алексей Соловьёв

Pied Piper?

Ответить
69
Развернуть ветку
Арсен

Там разве не обратный алгоритм был? Вроде он там алгоритм сжатия без потерь придумал

Ответить
8
Развернуть ветку
Aleksandr Dubrovin

"Из центра в края"

Ответить
4
Развернуть ветку
Chr Chr
Ответить
8
Развернуть ветку
Вадим Осадчий

Ляяяя, так спешил в комменты написать ))

Ответить
9
Развернуть ветку
Роман Дегтярев

Это автор?

Ответить
0
Развернуть ветку
Николай

Это говноконтора из какого-то сериала

Ответить
–34
Развернуть ветку
Sergei spiridonov

хуя тут оскарбление чувств верующих в сериал )))) Аккуратнее, а то пойдешь на подвал супортить коробки )

Ответить
47
Развернуть ветку
Nikita

Жёстко вы его!

Ответить
4
Развернуть ветку
Sergei spiridonov

ибо нехуй ) Ричард Хендрикс не для таких дебилов создал дудочника

Ответить
8
Развернуть ветку
Вадим Осадчий

Надо было подыграть :С

Ответить
4
Развернуть ветку
Сергей Щукин

.

Ответить
0
Развернуть ветку
Pier Kampor

Сильно. Теперь есть чем чекать аватарки с форумов

Ответить
9
Развернуть ветку
Vissam Laban
Ответить
150
Развернуть ветку
Alex Petrov
Ответить
16
Развернуть ветку
Роман Дегтярев

А куда волосы делись? Убежали?

Ответить
1
Развернуть ветку
Николай

Это были шумовые искажения, а не волосы

Ответить
21
Развернуть ветку
Pier Kampor

😂😂😂😂

Ответить
2
Развернуть ветку
Антон Сциталов

Но ведь должен был быть Майкл Урбан, а не Скала(

Ответить
0
Развернуть ветку
Вадим Демидов

Так технология улучшает низкокачественные фотографии (как в чудо-фильмах, где ночное фото с уличной камеры у банкомата увеличивают в 415 раз и в отражении в зрачке видят лицо убийцы и уверенно идентифицируют его) или генерирует, т.е. додумывает что "это низкокачественное фото могло бы выглядеть вот так"?

Ответить
4
Развернуть ветку
Vlad Likh

Додумывает, конечно, откуда он по-вашему должна брать информацию, которой нет на фото?)

Ответить
71
Развернуть ветку
Georgy Uvarov

Из гугла откужа же

Ответить
70
Развернуть ветку
Vlad Likh

😂

Ответить
4
Развернуть ветку
KSA

Можно спросить у товарища майора что он хочет найти )

Ответить
4
Развернуть ветку
Denis Bystruev

Додумывает, беря за основу модели, на которых она была обучена.

То есть если у человека на щеке родимое пятно, которое полностью пропало на маленьком разрешении, на большом разрешении оно не появится.

Но зато могут появиться родимые пятна там, где их не было.

Ответить
13
Развернуть ветку
Дмитрий О

И не только родимые пятна
https://cs.pikabu.ru/images/big_size_comm/2013-07_6/13748007839543.jpg

Ответить
24
Развернуть ветку
Бабка в засаде

Бгг а прикинь реально если нейросеть на порнхабе обучить ))

Ответить
5
Развернуть ветку
Валерий Крокус

Яйцебород?

Ответить
1
Развернуть ветку
33_rublya
Ответить
31
Развернуть ветку
Denis Kiselev

Ждём нейросеть, которая по случайному набору букв восстанавливает смысл текста! 

А потом - натравливаем её на местные комменты))

Ответить
14
Развернуть ветку
Николай Замотаев

На выступления президента на новый год.

Ответить
0
Развернуть ветку
Denis Kiselev

Вы только на наши законы ее не запускайте - страшновато

Ответить
2
Развернуть ветку
Леван Какубава

Вроде был такой Олег

Ответить
0
Развернуть ветку
Al Pr

А тут шо комменты живые люди пишут? 

Ответить
0
Развернуть ветку
Denis Kiselev

Местами. С прояснениями!

Ответить
0
Развернуть ветку
- -

За сжатие!

Ответить
10
Развернуть ветку
Дарья Смолякова

очка

Ответить
3
Развернуть ветку
aero

Дупла

Ответить
0
Развернуть ветку
Культурный Макс

Комментарий удален по просьбе пользователя

Ответить
11
Развернуть ветку
Раскаяние и Мармелад

Даже если учесть что это пока прототип - технология всё равно нереально крутая. По идее такую штуку надо встраивать в камеры смартфонов что бы делать качество фоток в миллион раз лучше, ато за последние 10 лет в смартфонах кроме интерполяции ничего не придумали особо, а цифры пикселей растут как дрожжах...

Ответить
4
Развернуть ветку
Николай Замотаев

И получить по итогу то, что видео/фото со смартфона нельзя будет предъявить в суде как доказательство?

Ответить
9
Развернуть ветку
Александр Батищев

В чем проблема хранить оригинал и улучшенный снимок?

Ответить
2
Развернуть ветку
Николай Замотаев

Проблемы нет. Единственное что могу предположить - то, что без такого метода - человек снимает и знает что у него в итоге получается.
А если показывать только улучшенную версию - то нет обратной связи. Но это придирки.

Ответить
0
Развернуть ветку
Вадим Осадчий

Плюсую, это же чистая генерация рандома

Ответить
0
Развернуть ветку
Степан Позняк

Пока принимают, а ведь изображение уже нейросетями достраивается. Не такими сложными как в посте, но всё же

Ответить
0
Развернуть ветку
Николай Замотаев

а цифры пикселей растут как дрожжах
Так если оптика мелкая и пластиковая - сколько не отращивай цифры пикселей, будет то же самое мыло. Только ещё и зернистое - потому что чем меньше пиксель - тем шумнее итоговый результат.
Зато маркетинг - покупайте наших слонов - у них больше мегапикселей и они тоньше.

Ответить
2
Развернуть ветку
Rodeus

Вам имеет смысл ознакомится с тем, как работает вычислительная фотография. И насчёт пластиковых линз не очень распыляться. Потому что вы безнадежно отстали от прогресса, лет на 10 примерно.

Ответить
5
Развернуть ветку
Николай Замотаев

Признаю, про пластиковые линзы погорячился.

Ответить
0
Развернуть ветку
Rodeus

Pixelshift погугли, в некоторых проф камерах Sony уже есть. Бешенные разрешения за счет мультиэкспозиции со сдвигом матрицы. Нужно ли это кому-то у смартфонах, большой вопрос.

Ответить
0
Развернуть ветку
Bulat Ziganshin

как я понимаю, сейчас такое есть в любом топовом смартфоне. именно за счёт этого качество снимков с них так улучшилось в самые последние годы

Ответить
0
Развернуть ветку
Rodeus

Не совсем, но принцип похож. Pixelshift увеличивает разрешение, а в смартфонах делаются десятки фото вместо одного с разной экспозицией, чтобы поднять динамический диапазон фото и увеличить s/n ratio. Так работают вроде уже все современные смартфоны нормальных как минимум заметных производителей.

Ответить
0
Развернуть ветку
Анон Плиз

Вроде, смарты (а точнее, проги типа гугл.камеры) уже умеют дрожание рук использовать для улучшения детализации. То, что раньше было зашкваром и "лечилось" штативом, становится маст хэвом))

Ответить
0
Развернуть ветку
Rodeus

Да, умеют. Но в проф применении эти алгоритмы не очень канают. Потому что это все же такое реалистичное комбо под реальное фото. Для семейных альбомов же вполне пойдет.

Ответить
1
Развернуть ветку
Степан Позняк

Так ведь похожую тему и вставляют в смартфоны. Просто не на столько крутое и мощное.

Ответить
0
Развернуть ветку
Никита Хисматов

Когда "Зеленый слоник" в 4К?

Ответить
6
Развернуть ветку
Al Pr

Скоро на экранах всего мира: "я угадаю тебя по одному пикселю".

Ответить
5
Развернуть ветку
Даниил Лепетков

А как воспользоваться технологией? Она общедоступна?

Ответить
1
Развернуть ветку
Гуру Хренов

наконец то на второй странице появился дельный вопрос, который меня тоже интересует !
если вам интересно, то какие то колдуны из китая сделали еще пару лет назад похожую систему, которая явно использует AI
Она улучшает очень круто фотографии, и иногда разрешение тоже увеличивает. Называется remini и есть во всех апп сторах
Не без проблем работает конечно, но результаты иногда офигительные

https://play.google.com/store/apps/details?id=com.bigwinepot.nwdn.international&hl=en_CA&gl=US

Ответить
7
Развернуть ветку
Rodeus

Давно есть десктопные решения с AI, те же продукты Topaz как для фото, так и для видео. И последние версии Adobe Photoshop и Adobe Camera RAW могут в 4 раза поднять разрешение (x2 на сторону).

Ответить
1
Развернуть ветку
Гуру Хренов

вам надо просто попробовать remini, и Вы поймете, что Топаз (который мы тоже тестировали) - это совсем не то 

Ответить
0
Развернуть ветку
Rodeus

Возможно. Я пользуюсь другими продуктами Topaz, шумодавом в основном. Повышать разрешение пробовал из любопытства, сравнить с традиционными продуктами. Разница конечно впечатлила. А так, я занимаюсь изображениями с высокой детализацией и предпочитаю их сразу получать высокого и сверхвысокого разрешения (гигапиксельные изображения). Мой приоритет — фотореалистичное качество без оговорок. А все эти методики по повышению разрешения из малого хороши только там, где нет возможности снять нормально или переснять.

Ответить
1
Развернуть ветку
Anton Rybakov

А если потом второй раз прогнать то х4 на строну, а на третий раз х8? ))

Ответить
0
Развернуть ветку
Rodeus

Можно. Но не чудес ждать не стоит.

Ответить
0
Развернуть ветку

Комментарий удален

Развернуть ветку
Lubov Kulikova

Я наверно реально древний мамон😀 но не знала что такое имеется. Штука огонь!!! Спасибо!!! 

Ответить
0
Развернуть ветку
Кирилл Федянин

Код пока вроде не выложили, но в принципе можно упороться и воспроизвести по самой статье https://arxiv.org/pdf/2106.15282.pdf. Ну либо пару месяцев подождать.

Ответить
2
Развернуть ветку
Роман Дегтярев

О коммерческом распространении технологии данных пока нет.

Ответить
0
Развернуть ветку
Vitaly

А я всё жду когда появится инструмент, которому можно было бы скормить например несколько фото одного человека/места, а он на основе этих фото уже увеличивал бы детализацию. Иначе нередко на выходе получается уже немного другое лицо.

Ответить
4
Развернуть ветку
Bulat Ziganshin

в любом топовом смарте сейчас такое

Ответить
1
Развернуть ветку
Илья Высочинский

Google: become human

Ответить
1
Развернуть ветку
Сергей Мазур

Backend

Ответить
8
Развернуть ветку
Миша Магадан

Ну проверка тут простая, как с переводом на другой язык. Сначала ухудшаем изображение, потом улучшаем его супералгоритмом, потом сравниваем. Пусть так покажут, тогда будет что обсуждать.
Имхо при недостатке информации её взять негде, будь ты хоть трижды нейросеть. Вот из видео плохого качества сделать изображение более хорошего качества теоретически возможно.

Ответить
2
Развернуть ветку
Vlad Likh

Конечно она не восстановит никакие уникальные признаки вашего изображения. Сеть будет пытаться «дорисовать» детали на базе датасета, на котором она обучалась.

Здесь вопрос нужно ставить иначе: «насколько важны для вас эти уникальные признаки?». Если не важны, подобный подход вполне себе уместен.

Ответить
4
Развернуть ветку
Rodeus

Так и практически возможно. Коммерческие продукты на рынке уже несколько лет существуют

Ответить
2
Развернуть ветку
Александр Трофимов

Про видео - DLSS. Уже в реалтайме улучшает качество изображения так, что лучше оригинала выходит. 

Ответить
0
Развернуть ветку
Интимный франт

А в чём новинка? На https://letsenhance.io/ уже давно такое делать же можно.

Ответить
2
Развернуть ветку
Артур Дунайцев

Я вам больше скажу, я эту штуку в продукте активно использовал, а у нас было ни много ни мало пол-ярда изображений, а на печать надо было выводить с высоким dpi, а пользователи грузили чопопало. Все классно, но это сторонний сервис, который к себе на машинку не развернешь для скорости, а летсэнчанс иногда мог магию делать по минуте и падал по таймауту. Вот отсюда гугловое решение с возможностью купить лицензию и пользоваться вышло бы и дешевле и производительнее. Так что вот вам и коммерческое использование сразу

Ответить
1
Развернуть ветку
Sergey Abramov

В принципиально другом подходе и на порядок лучшем результате.

Ответить
1
Развернуть ветку
Mitya 🍀🔰⚡

Как-то странно звучит фраза "повышает разрешение без потери качества", потеря качества бывает только при уменьшении разрешения, так что это уточнение здесь как-то не к месту

Ответить
2
Развернуть ветку
aero

Без потери качества звука

Ответить
1
Развернуть ветку
Yurii Bychkov

и без ГМО

Ответить
0
Развернуть ветку
Denis Bystruev

Чудес не бывает. Очки у чувака в первом видео частично пропали, а так норм.

Ответить
1
Развернуть ветку
Вадим Осадчий

Не, ну порнушку увеличить норм.

Ответить
4
Развернуть ветку
Nathan Zachary

Где видео?

Ответить
0
Развернуть ветку
Denis Bystruev

mp4 в начале статьи. Полный адрес:

https://leonardo.osnova.io/b268202a-0bea-5416-888f-fd3cc9d4489b/-/format/mp4/

Ответить
1
Развернуть ветку
Всеволод Мирославский

Что приведено на видео не совсем корректно. Изначально брали хорошее фото, качественно сжимали (без радужных пикселей). А какой результат будет на 10/10 шакалах? Там куча 🌈 пикселей (см. Картинку с екарным бабаем) 

Ответить
0
Развернуть ветку
Александр Трофимов

А зачем брать 10 тысяч раз перекодированный и пережатый файл, если задача не в этом? 

Ответить
1
Развернуть ветку
Всеволод Мирославский

Ну хорошо. Пусть не 10 тысяч раз перекодированное. Есть и более "жизненные" ситуации. К примеру, старые сюжеты с ТВ и ютуба. Где снимали в 360, (в лучшем случае в 480) качестве. 
В большинстве случаев проще передать хороший поток, чем кодировать и декодировать данные...
А что, если эта технология дорисовывает кадр и может использоваться в качестве создания "Уникального" контента? (пиратить)

Ответить
0
Развернуть ветку
Всеволод Мирославский

Стоит прищуриться и уже острые пиксели не видать. Моет, но тем не менее качество хорошее 

Ответить
1
Развернуть ветку
Жорж Милославский
Ответить
2
Развернуть ветку
Всеволод Мирославский

Неправильная картинка. Чёткие пиксели. Мелких шумов нет. Обычно, вокруг текста оьразуется

Ответить
0
Развернуть ветку
Степан Воронцов

Ну я так понял не повышает разрешение, а дорисовывает изображение 

Ответить
2
Развернуть ветку
Qavai

Ага.

128 Кбит MP3 тоже некоторые считают за качество и не замечают разницы.

Ответить
0
Развернуть ветку
Sergey Abramov

Они не совсем так работают.

У Topaz нет генеративных моделей, они работают как сверточные модели. В статье же говорится именно про работу генеративных сетей. Результат получается на порядок интереснее и чище. Хотя и со значительной долей "фантазии" со стороны алгоритма.

Ответить
1
Развернуть ветку
Sergey Abramov

Поправлю себя немного.

Topaz у себя на сайте пишут, что тоже используют генеративные сети, хотя и с несколько другой архитектурой (соревновательные, вместо диффузионных).

Другое дело, что их результат почему-то выглядит едва ли отличимо от обычных сверточных моделей. Всё тот же звон на границах, то же усреднение смежных пикселей. Загадочно.

Ответить
1
Развернуть ветку
Rodeus

Насчет "звона", видимо скорее контрастной буферной зоны, растущей с увеличением разрешения, ге знаю как правильно это называется. "Звон" же это немного другое, там такое множественное "эхо" на контурах появляется, интерполяторы Ланцоша его дают, особенно на высоких степенях. Так вот, контрастные переходы у Топаза получаются лучше чем у обычных интерполяторов типа Сплайна, Ланцоша и пр. А поскольку Топаз параллельно и шумы умеет хорошо давить и резкость восстанавливать, даже в расфокусе и с шевеленкой, это комбо дает действительно дает лучшие результаты даже на "экстремальных" увеличениях типа x16. Но сравнивать мне больше не с чем правда. Другие увеличилки с AI я не пробовал. Даже фотошоповские.

Ответить
0
Развернуть ветку
Sergey Abramov

Вот пример работы Gigapixel с сайта Topaz. Хорошо заметно наличие ореола на всех границах. 

Артефакт подобного рода не слишком характерен для полноценных генеративных сетей. Что и вызывает скепсис. Впрочем, если где-то в цепи обработки стоит линейный фильтр, например для денойза, то возможно и такое.

Как бы то ни было, результат команды Google в их исполнении выглядит на порядок более впечатляющим, чем всё, что до этого было среди конкурирующих алгоритмов. Изображение выглядит естественным, без явных артефактов обработки. Но с периодической избыточной "фантазией" относительно объекта.

Ответить
0
Развернуть ветку
Rodeus

Мыльное мыльце, хоть и с минимумом ореолов.

Ответить
0
Развернуть ветку
Игорь Кузнецов

Показали бы 3 картинки: исходник, в низком разрешение и output.

Было бы интересно сравнить с исходником, насколько оно точно генерирует.

Ответить
1
Развернуть ветку
Sergey Abramov

Референс для одной из сетей был приведён в оригинале статьи.

Ответить
1
Развернуть ветку
Georgy Uvarov

Офигеть. Теперь текстуры можно будет аспкейлить бесконечно

Ответить
0
Развернуть ветку
Vlad Likh

Такие сетки уже используются в гейм деве, как для масштабирования, так и для создания бесшовных текстур.

Ответить
3
Развернуть ветку
Иван Драго

Но получается в основном мыло... 

Ответить
0
Развернуть ветку
Vlad Likh

Подождите немного, скоро всё будет. https://youtu.be/1F-WnarzkX8

Ответить
0
Развернуть ветку
Vlad Likh

Правильно ли я понимаю, что по сути своей (если очень упростить), это autoencoder/GAN, где изображение в низком разрешении является латентным вектором?

Ответить
1
Развернуть ветку
Sergey Ilyin

Если я правильно понял, то это второй шаг.
1/ докидываем шумов в изображение
2/ учим нейросеть выкидывать шумы
3/ После этого даём на вход интересующее нас изображение - смотрим как работает.
4/ если результат плохой - продолжаем учить нейронку

Ответить
0
Развернуть ветку
Vladimir Voloshin

Минус 160 шакалов из 10!

Ответить
1
Развернуть ветку
Іван Сахно

А есть ссылка на увеличение изображений? Или это только прототип или что-то ещё?

Ответить
1
Развернуть ветку
ITSOFT

Хорошая новость: теперь не надо будет передавать тяжелые картинки - достаточно изначально снизить качество снимка (или видео), передать облегченный вариант, а перед воспроизведением восстановить изображение почти до оригинала.

Ответить
0
Развернуть ветку
Alien Mars

ага, и после восстановления ремарку добавлять как на коробке сока из концентрата - "восстановленно гомогенизированно" ;)

Ответить
2
Развернуть ветку
ITSOFT

Согласен!

Ответить
0
Развернуть ветку
Вадим Осадчий

Где записаться?

Ответить
0
Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку
Антон Солдышев

Пегий дудочник

Ответить
0
Развернуть ветку

Комментарий удален

Развернуть ветку
Artemy

Впечатляет!

Ответить
0
Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку
Николай Кузнецов

Нужна такая же натренированная ИИ нейросетка для реставрации музыки с грамафонных и патефонных записей. 

Ответить
0
Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку
Жоомарт Абдиразаков

как я жил без этого не знаю 

Ответить
0
Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку

Комментарий удален

Развернуть ветку
Любовь Рогова

В основе технологии — диффузионные модели. Ммм.. необычно все так

Ответить
0
Развернуть ветку

Комментарий удален

Развернуть ветку
Карина Авдеева

21 век на дворе 

Ответить
0
Развернуть ветку

Комментарий удален

Развернуть ветку