LegoGPT - ИИ, который собирает Лего по текстовому описанию
👀 Это один из материалов TG-канала A113, а там ещё больше любопытных фактов, интересных постов и вдохновения на стыке технологий и творчества, присоединяетесь!
Учёные из Carnegie Mellon University представили LegoGPT - нейросеть, которая по простому описанию создаёт полноценную 3D-модель из деталей Лего.
Ты пишешь, например, "акустическая гитара формы песочных часов", и LegoGPT подбирает нужные детали и предлагает, как всё это собрать. Пока доступны около 20 категорий (гитары, лодки, поезда, машины, стулья и т.д.), но возможности будут расширяться.
Как это работает? Модель построена на базе LLaMA-3.2-Instruct-1B — это вроде open-source версии ChatGPT. Её обучили на 47 000 реальных Лего-моделей и 28 000 уникальных 3D-форм. Вместо того чтобы предсказывать следующее слово, как делает обычный ИИ, LegoGPT предсказывает следующий кирпичик.
Но просто «красиво» — не значит «собираемо». Поэтому ребята из CMU написали собственный физический движок, чтобы проверить: модель устойчива, не развалится ли под весом, и правильно ли соединены детали.
🎮 Демо уже доступно! Можно зайти на сайт проекта и самому попробовать: вводишь текст — получаешь 3D-модель и список деталей. Пошаговой инструкции пока нет, так что это своего рода Лего-челлендж.
💡 В будущем такие модели смогут проектировать мебель, здания и реальные конструкции с учётом физики и сборки. Не просто картинка, а настоящий прототип из реального мира.
«Сегодняшние ИИ могут сгенерировать красивое кресло, но не знают, как его реально собрать. Мы хотим это изменить.» — Ava Pun, соавтор LegoGPT
🔗 Ссылка на проект - https://avalovelace1.github.io/LegoGPT/