Этот ИИ-инструмент может генерировать 3D-модели за 5 секунд
В последние месяцы в области создания 3D-контента с помощью решений на базе ИИ наблюдается значительный прогресс. Компания Luma Labs недавно выпустила Genie - впечатляющее решение для создания 3D-моделей на основе текстовых описаний с помощью ИИ.
Однако одним из недостатков Genie является то, что процесс генерации может занимать около 10 минут.
Теперь новое решение под названием LGM обещает значительно сократить это время, создавая 3D-модели всего за 5 секунд. Насколько это правда? Давайте узнаем.
Еще больше полезностей - в моем телеграм-канале про нейросети и канале про генерацию изображений Миджорниум.
Что такое LGM?
LGM (Large Multi-View Gaussian Model) представляет собой новую систему, которая позволяет создавать 3D-модели высокого разрешения из простых текстовых описаний или даже отдельных изображений.
В нем используется асимметричная магистраль U-Net, а также многоракурсные диффузионные модели. Эта технологическая комбинация позволяет практически мгновенно создавать 3D-изображения, устраняя проблемы с разрешением и точностью, характерные для более ранних моделей.
Если вы хотите узнать больше о том, как работает LGM, ознакомьтесь с этим техническим документом.
Бесплатное демо (попробуйте сами)
Перейдите на страницу LGM HuggingFace и начните вводить описание 3D-объекта, который вы хотите сгенерировать. Например, я хочу сгенерировать 3D-модель плюшевого медведя.
Вот предварительный просмотр сгенерированной 3D-модели:
Эта 3D-модель выглядит просто фантастически! Все углы кажутся правильными, и, несмотря на то, что на модель можно смотреть под разными углами, она остается целостной - никаких странных искажений.
Теперь давайте попробуем создать более сложную модель и посмотрим, насколько хорошо ИИ сможет ее сгенерировать.
К сожалению, если отдельные предварительные изображения выглядели многообещающе, то полноценная 3D-модель оказалась не столь удачной.
Преобразование изображения в 3D
Помимо функции преобразования текста в 3D, LGM также поддерживает создание 3D-объектов из исходного изображения.
Созданная 3D-модель отлично сохранила свою форму и структуру, что еще раз свидетельствует о понимании формы ИИ.
Вот еще примеры со страницы проекта LGM:
Почему это важно?
- Плюсы: Этот тип технологии является потенциально революционным для 3D-моделирования. Художники получат быстрый способ мозгового штурма и создания объектов. Разработчики игр смогут оптимизировать рабочие процессы, ускоряя создание прототипов и производство.
- Минусы: Как и у любого технологического скачка, есть и минусы. Некоторые 3D-художники могут не захотеть использовать эти инструменты и отстать от прогресса. Маркетплейсы, продающие стоковые 3D-объекты, могут серьезно пострадать. Даже такие крупные компании, как Adobe и Autodesk, гиганты в области программного обеспечения для 3D-моделирования, могут столкнуться с проблемами, поскольку ИИ делает рабочие процессы более простыми и доступными.
Что дальше?
Представьте себе, как это решение на базе ИИ может изменить несколько отраслей промышленности.
- Игры: Более динамичные и детализированные игровые миры, созданные быстрее, чем когда-либо.
- Анимация: Персонажи и окружение оживают с беспрецедентной скоростью и легкостью.
- 3D-печать: Проектирование физических объектов и быстрое создание прототипов может стать доступным для гораздо большего числа людей.
- Архитектура: Более сложные проекты, визуализация и доработка которых происходит в мгновение ока.
Постоянная конкуренция
Если вы думаете, что это новая технология, то это не так. Существует несколько генераторов 3D-моделей на базе ИИ. Среди них несколько, о которых я уже рассказывал:
LumaLabs
DreamFusion 3D
- Stable Zero123
Эта конкуренция - замечательная вещь! Она стимулирует развитие инноваций и побуждает разработчиков делать свои инструменты еще лучше, быстрее и доступнее.
В целом я рад видеть еще один ИИ-инструмент, который может генерировать 3D-объекты, не имея ничего, кроме текстового описания или изображения. Я впервые вижу решение, которое может принимать исходное изображение и генерировать на выходе целостную 3D-модель достойного качества.
Несмотря на то что важно помнить о потенциальных проблемах, с которыми сталкивается эта технология, ее творческий потенциал неоспорим. LGM - это настоящий скачок вперед, и мне не терпится увидеть, как разработчики и исследователи смогут усовершенствовать свое решение, чтобы на выходе получить загружаемую 3D-модель, подобную решению Luma Lab.
Еще больше полезностей - в моем телеграм-канале про нейросети и канале про генерацию изображений Миджорниум.
Источник статьи на английском - здесь.
Комментарий удален модератором
Вся модель битая, ее в деле невозможно использовать (только как по играться). Надо все переделывать.
В общем, ещё дорабатывать нужно. Но начало положено).
Не могла не пошутить, но фраза из этого мема идеально подходит
Мне кажется можно юзать для всяких пропсов вдали, все равно никто не заметит косяков.
Согласен с вами. И мне тоже было бы интересно узнать мнение спецов, которые работают с моделированием - фигня это все, или нормальный инфтрумент.
Короче 3D генерация пока что полная хрень.
Баловаться можно, в работу, в продакшен пока нет.
Согласен, но уже хоть побаловаться можно, и не надо часами ждать рендеринга ). Разве это уже не прогресс?
Инструмент прикольный, протестирую на досуге.
Я тоже считаю, что как минимум протестировать стоит.
Леонардо тоже может генерить 3d текстуры правда качество пока ниже плинтуса
Вот в этом и нюансы, что многут, может, многие, но как? )
А как в леонардо генерация изображений?
Отстаёт чуток от миджорни, да и с приближением и отдалением объектов есть беда. Но есть плюшки с реализации похожих изображений, дорисовать и тд.
Я не успеваю за развитием ИИ, только от чипов отошел, а тут уже 3D. Пока не идеальная работа, но не удивлюсь, если уже завтра не отличу от оригинала!
Завтра, может, и отличите, но в ближайшем будущем, думаю, разовьют и это направление.
Классно конечно что есть демо версии и можно попробовать сгенерировать бесплатно, а так генерит вроде очень даже не плохо, пользоваться думаю точно можно