OpenAI продолжает развивать свою технологическую базу. В этот разработали алгоритм, улучшающие качество изображения
Компания разместила документ о новой технологии без всяких анонсов. Это неудивительно: это определенно просто исследовательская работа, и она очень техническая рассказывающей о новой технологии.
При диффузии модель учится постепенно вычитать шум из начального изображения, полностью состоящего из шума, шаг за шагом приближая его к целевой подсказке. Этот подход позволил создать самые впечатляющие изображения ИИ на сегодняшний день, но в основном он зависит от выполнения от 10 до тысячи шагов для получения хороших результатов. Это означает, что он дорог в эксплуатации, а также настолько медленен, что приложения в реальном времени непрактичны.
Цель Consistency Models состояла в том, чтобы сделать что-то, что дало достойные результаты за один шаг вычислений или, самое большее, за два.
Если вы хотите выполнить 1500 итераций в течение минуты или двух, используя кластер графических процессоров, вы можете получить ошеломляющие результаты с помощью диффузионных моделей. Но что, если вы хотите запустить генератор изображений на чьем-то телефоне, не разряжая его батарею, или предоставить сверхбыстрые результаты, скажем, в интерфейсе живого чата? Тут вам понадобится Consistency Models.
Закономерность в исследованиях машинного обучения обычно такова: кто-то придумывает метод, кто-то другой находит способ заставить его работать лучше, а затем другие эксперементируют, непрерывно улучая результаты. Однако затем происходит новая, более эффективная техника, которая может делать то же самое значительно эффективней.
Прикольная технология, в перспективе может не только восстанавливать изображения, но и использоваться в телефонах для улучшения качества съемки.
А потом она сделает вам Луну там, где её быть не должно (вспоминая историю с Samsung).
А "улучшение" фото с камеры телефона - это отдельный бич. Собственно оно уже активно применяется во многих телефонах.